Hyödyllinen ohjelmistoarvio vastaa käytännön kysymykseen: sopiiko työkalu tallenteeseesi, kieleesi, budjettiisi ja työnkulkuusi? Toimituksellinen standardimme on selittää, mitä tarkistettiin, näyttää näyttö ja kuvata kompromissit.
Nykyinen sisältö: ohjelmistohakemisto sisältää palveluntarjoajien dokumentaatioon perustuvia tuoteprofiileja. Ne eivät ole pisteytettyjä käytännön arvioita. Tällä sivulla määritellään testien, vertailujen ja suositusten julkaisuvaatimukset.
Päivitetty viimeksi: 17. lokakuuta 2026
1. Ilmoita sisältötyyppi selvästi
- Tuoteprofiili: yhteenveto dokumentoiduista ominaisuuksista, alustoista, hintalähteistä ja käyttötarkoituksista. Palveluntarjoajan väite merkitään tämän omaksi väitteeksi.
- Käytännön arvio: kuvaus tuotteesta, jota arvioija on itse käyttänyt, sekä testipäivä, tilaus, asetukset, näyttö ja rajoitukset.
- Vertailu: ilmoitettuihin kriteereihin perustuva vertailu. Jos tuotetta on tutkittu mutta ei testattu, eron on käytävä selvästi ilmi.
- Osto-opas: selitys tietyn tehtävän valintakriteereistä ja kompromisseista. Pelkkä sisältyminen oppaaseen ei todista parempaa suorituskykyä.
Ilmaukset kuten ”testattu”, ”varmistettu” ja ”paras” edellyttävät näyttöä. Ohjelmiston saatavuus, palveluntarjoajan väitteet ja omat havaintomme on voitava erottaa toisistaan.
2. Käytä vertailukelpoisia testiolosuhteita
Käytännön testi alkaa ilmoitetusta käyttötapauksesta ja määritellystä näytejoukosta. Menetelmä tulee valita ennen tulosten tarkastelua.
- Kuvaa näytteet. Kirjaa kieli, tarvittaessa aksentti, kesto, puhujamäärä, äänenlaatu ja tallennustilanne. Mainitse melu, päällekkäinen puhe ja erikoissanasto.
- Käytä samaa syötettä. Suorissa litterointivertailuissa käytetään samaa lähdetallennetta ja vertailulitteraattia. Tiedostomuunnokset, leikkaukset ja äänenkäsittely on dokumentoitava ja tehtävä yhdenmukaisesti.
- Kirjaa asetukset. Ilmoita tuotteen tilaus, valittavissa oleva malli, kieliasetus, puhujatunnisteiden asetukset, laite tai selain sekä testipäivä. Selitä erot, jos tuotteet eivät tarjoa vastaavia vaihtoehtoja.
- Tee yritykset näkyviksi. Kirjaa epäonnistuneet työt, uudet yritykset ja manuaaliset toimenpiteet. Sovella samaa uusintasääntöä kaikkiin tuotteisiin ja ilmoita, onko tulos ensimmäinen yritys, tyypillinen tulos vai valittu paras suoritus.
- Pidä rajaus rehellisenä. Ilmoita tallenteiden ja yritysten määrä. Pieni alustava testi ei osoita suorituskykyä kaikilla kielillä, aksenteilla tai tallennusolosuhteissa.
Kokousavustajalla, sanelusovelluksella ja ladattavia tiedostoja käyttävällä litterointityökalulla on erilaiset tallennustavat. Vertaa yhteistä tehtävää mahdollisuuksien mukaan ja arvioi muiden työnkulun osien toiminta erikseen.
3. Mittaa litteroinnin tarkkuus tarkistettua vertailutekstiä vasten
Vertailulitteraatti on tarkistettava tallennetta vasten. Toisen puheentunnistuspalvelun tarkistamaton tuloste ei ole riittävä vertailuteksti.
Sanavirheaste (WER) laskee korvaukset, poistot ja lisäykset suhteessa vertailutekstin sanamäärään. Kun vertailuteksti ei ole tyhjä:
WER = (substitutions + deletions + insertions) / reference words
Pienempi WER tarkoittaa vähemmän sanatason korjauksia ilmoitetuilla pisteytyssäännöillä. Ilmoita mittarin nimi, näytekoko ja pisteytysasetukset. Älä nimeä sitä yleispäteväksi ”tarkkuusprosentiksi”. JiWERin pisteytysviite kuvaa nämä laskelmat.
Jokaisen kielitestin on selitettävä tokenisointi ja tekstin normalisointi, mukaan lukien välimerkit, kirjainkoko, numerot, tarkkeet ja täytesanat. Japanin testeissä on ilmoitettava sanojen segmentointitapa. Kun merkkitason arviointi on tarkoituksenmukaista, ilmoita merkkivirheaste (CER) ja sen normalisointisäännöt. Käytä vertailtaville tuotteille samoja sääntöjä. Katso JiWERin muunnosdokumentaatio.
Sana- tai merkkivirheaste ei kata kaikkia tärkeitä virheitä. Raportoi tarvittaessa erikseen nimiin, numeroihin, päivämääriin, puuttuviin ilmauksiin, keksittyyn sisältöön, puhujien kohdistamiseen ja aikaleimoihin liittyvät virheet. Pidä kielikohtaiset tulokset erillään, ellei artikkeli selitä yhteenvedon laskentatapaa.
4. Arvioi litteroinnin jälkeinen työ
Luettava litteraatti on vain osa tehtävää. Arvion tulee kuvata vaiheet tallennuksesta käyttökelpoiseen lopulliseen asiakirjaan.
- Tallennus ja käyttöönotto: lataus- tai tallennusvaiheet, tuetut syötteet, käyttöoikeudet ja aloittamiseen tarvittava aika.
- Puhujatunnisteet ja yhteenvedot: kohdistusvirheet, puuttuvat päätökset, perusteettomat väitteet ja se, vastaavatko tehtävälistat tallennetta täsmällisesti.
- Muokkaus: toistosäätimet, haku, korjaustyökalut, puhujien uudelleennimeäminen ja tehtävän loppuunsaattamiseen tarvittava työ.
- Vienti: avaa viedyt tiedostot ja tarkista tarvittaessa muotoilu, puhujatunnisteet ja ajoitus. Erota ilmoitettu vientiominaisuus käytännössä testatusta viennistä.
- Nopeus ja luotettavuus: mittaa lataus-, käsittely- ja manuaalinen muokkausaika erikseen. Kirjaa äänen kesto, yhteysolosuhteet ja keskeneräiset työt.
Kliininen dokumentointi vaatii erillisen arvion kirjauksen uskollisuudesta sekä kliinisesti merkittävistä puutteista ja lisäyksistä. Kliinistä laatua koskeva päätelmä vaatii asianmukaisesti pätevän arvioijan; yleinen litterointipistemäärä ei osoita kliinistä soveltuvuutta.
5. Vertaa hintoja samalla perusteella
Hintaväitteet tarvitsevat virallisen lähteen ja tarkistuspäivän. Ilmoita valuutta, laskutussitoumus, sisältyvä käyttömäärä, tiedostorajoitukset, käyttäjäpaikkavaatimukset, ylitysmaksut ja olennaiset lisäosat. Ilmaiset kokeilut ja väliaikaiset alennukset on merkittävä sellaisiksi.
Vuositilauksen kuukausivastaava on merkittävä ilmauksella ”laskutetaan vuosittain”. Älä vertaa sitä kilpailijan kuukausimaksuun selittämättä eroa. Tuntikustannusesimerkkien on ilmoitettava oletettu käyttö ja laskutapa. Käyttämätön kiintiö ei tee tilauksesta ilmaista, ja rajattomana mainostetun tilauksen soveltuvat rajoitukset on silti tarkistettava.
Vastine rahalle riippuu tehtävästä. Jos muokkaustyö on mitattu, raportoi se tilausmaksun rinnalla. Jos hintaa tai rajaa ei voida varmistaa, ilmoita se vahvistamattomaksi sen sijaan, että arvioisit nykyisen tarjouksen.
6. Selitä pisteet, vahvuudet ja rajoitukset
Suositusten on määritettävä kohdekäyttäjä, tehtävä ja päätelmää tukeva näyttö. Työkalu voi sopia haastatteluihin mutta huonosti livekokouksiin. Käsittele olennaiset haitat ja tilanteet, joissa vaihtoehto voi olla parempi.
Hakemistoprofiililla ei ole oletusarvoista tähtiarviota. Jos artikkelissa käytetään kokonaispisteitä, siinä on ilmoitettava kriteerit, painotukset, taustalla olevat mittaukset ja puuttuvien tietojen käsittely. Testaamaton ominaisuus merkitään ”ei testattu”, ei automaattisesti hyväksytyksi tai hylätyksi. Älä keksi asiakasarvioita, arvioiden määriä, vertailumittauksia tai tuloskuvakaappauksia.
Hakemiston järjestys ja arvion johtopäätös ovat eri asioita. Hakemiston oletusjärjestys on ”Nostetut ensin”; ”Nimi A–Z” lajittelee aakkosittain. Jokaisen sijoituksia sisältävän testin tai ”paras”-suosituksen on selitettävä oma näyttönsä ja järjestämismenetelmänsä.
7. Tee näytöstä, päivityksistä ja korjauksista jäljitettäviä
Käytännön testiartikkelin on ilmoitettava kirjoittaja, testipäivä ja arvioitu tilaus tai versio. Liitä alkuperäisiä kuvakaappauksia tai muita sopivia tallenteita, lähdelinkit sekä tuloksen ymmärtämiseen tarvittava menetelmä. Kuvakaappaus todentaa vain näyttämänsä asiat; se ei tue mittaamatonta väitettä.
Käytä tallenteita, joita saa käyttää ja jakaa laillisesti. Poista julkaistavasta näytöstä henkilötiedot, luottamukselliset tiedot ja tilitiedot. Tietosuoja- ja tietoturvaominaisuudet on perustettava ajantasaiseen palveluntarjoajan dokumentaatioon, ellei niitä ole varmennettu erikseen; älä päättele sertifiointia markkinointiväitteestä.
Kun olennainen virhe varmistuu, korjaa asianomainen teksti, ilmoita muutos ja päivämäärä sekä arvioi vaikutuksen alaiset johtopäätökset uudelleen. Myöhempi ohjelmistopäivitys ei muuta vanhaa testitulosta ilmoittamatta. Testaa uudelleen ennen vanhan mittauksen esittämistä uuden version suorituskyvyn näyttönä.
Korjauspyynnön tulee ilmoittaa sivun URL-osoite, kiistanalainen väite ja tukeva näyttö. Korjauksen julkaiseminen riippuu näytöstä.
Menetelmäviitteet
- JiWER: puheentunnistuksen arviointimittarit, mukaan lukien WER ja CER.
- Google Search Central: hyödyllisten tuotearvioiden kirjoittaminen, mukaan lukien omakohtainen näyttö sekä hyödyt ja haitat.