Kasulik tarkvaraülevaade vastab praktilisele küsimusele: kas see tööriist sobib teie salvestise, keele, eelarve ja töövooga? Meie toimetusstandard on selgitada, mida kontrolliti, näidata tõendeid ja kirjeldada kompromisse.
Praegune sisu: tarkvarakataloog sisaldab teenusepakkujate dokumentatsioonil põhinevaid tooteprofiile. Need ei ole hindega praktilised arvustused. See leht määrab testide, võrdluste ja soovituste avaldamise nõuded.
Viimati uuendatud: 17. oktoober 2026
1. Määratlege selgelt käsitluse liik
- Tooteprofiil: ülevaade dokumenteeritud funktsioonidest, platvormidest, hinnaallikatest ja kavandatud kasutusest. Teenusepakkuja väide omistatakse sellele teenusepakkujale.
- Praktiline arvustus: kirjeldus tootest, mida hindaja on tegelikult kasutanud, koos testi kuupäeva, paketi, seadete, tõendite ja piirangutega.
- Võrdlus: võrdlus määratletud kriteeriumide alusel. Kui toodet uuriti, kuid ei testitud, peab see erinevus olema nähtav.
- Ostujuhend: valikukriteeriumide ja kompromisside selgitus konkreetse ülesande jaoks. Ainuüksi juhendis esinemine ei tõenda paremat jõudlust.
Mõisted „testitud“, „kontrollitud“ ja „parim“ vajavad toetavaid tõendeid. Tarkvara saadavus, teenusepakkuja väited ja meie enda tähelepanekud peavad jääma eristatavaks.
2. Kasutage võrreldavaid testitingimusi
Praktiline test algab määratletud kasutusjuhtumi ja näidiste kogumiga. Meetod tuleb valida enne tulemuste uurimist.
- Kirjeldage näidiseid. Märkige keel, vajaduse korral aktsent, kestus, kõnelejate arv, helikvaliteet ja salvestuskontekst. Tuvastage müra, kattuv kõne või erialasõnavara.
- Kasutage sama sisendit. Otsestes transkriptsioonivõrdlustes kasutatakse sama algsalvestist ja võrdlusteksti. Igasugune failiteisendus, kärpimine või helitöötlus tuleb dokumenteerida ja rakendada järjepidevalt.
- Salvestage seadistus. Märkige tootepakett, valitav mudel, keeleseade, kõnelejamärgistuse seaded, seade või brauser ning testi kuupäev. Selgitage erinevusi, kui toodetel pole samaväärseid võimalusi.
- Tehke katsed nähtavaks. Märkige ebaõnnestunud tööd, korduskatsed ja käsitsi sekkumine. Rakendage kõigile toodetele sama korduskatsete reeglit ning märkige, kas tulemus pärineb esimesest katsest, tüüpilisest katsest või valitud parimast katsest.
- Esitage ulatus ausalt. Märkige salvestiste ja katsete arv. Väike uuriv test ei saa tõendada jõudlust iga keele, aktsendi ega salvestustingimuse korral.
Koosolekuabilisel, dikteerimisrakendusel ja üleslaadimisel põhineval transkribeerimistööriistal on erinevad heli hõivamise viisid. Võimaluse korral võrrelge nende ühist ülesannet ning hinnake ülejäänud töövooge eraldi.
3. Mõõtke täpsust kontrollitud võrdlusteksti suhtes
Võrdlusteksti tuleb salvestisega võrrelda. Teise kõnetuvastusteenuse üle vaatamata väljund ei ole sobiv võrdlusalus.
Sõnaveamäär (WER) loendab asendusi, kustutusi ja lisamisi võrdlusteksti sõnade arvu suhtes. Mittetühja võrdlusteksti korral:
WER = (substitutions + deletions + insertions) / reference words
Väiksem WER tähendab esitatud hindamisreeglite järgi vähem sõnataseme parandusi. Esitage mõõdiku nimi, valimi suurus ja hindamisseadistus; ärge nimetage seda universaalseks „täpsuse“ protsendiks. JiWERi hindamise viitedokument kirjeldab neid arvutusi.
Iga keeletest peab selgitama tokeniseerimist ja teksti normaliseerimist, sealhulgas kirjavahemärkide, suurtähtede, arvude, rõhumärkide ja täitesõnade käsitlust. Jaapani keele testid peavad kirjeldama sõnadeks jaotamist. Kui märgitaseme hindamine sobib, esitage märgiveamäär (CER) ja normaliseerimisreeglid. Kasutage võrreldavate toodete puhul samu reegleid. Vt JiWERi teisenduste dokumentatsiooni.
Sõna- ega märgiveamäär ei hõlma kõiki olulisi vigu. Vajaduse korral esitage nimed, arvud, kuupäevad, välja jäetud fraasid, väljamõeldud sisu, kõnelejate omistamine ja ajatemplivead eraldi. Hoidke keeletulemused eraldi, kui artikkel ei selgita koondtulemuse arvutamist.
4. Hinnake transkribeerimisjärgset tööd
Loetav transkriptsioon on vaid osa tööst. Arvustus peab kirjeldama samme heli hõivamisest kasutatava lõppdokumendini.
- Hõivamine ja seadistamine: üleslaadimise või salvestamise sammud, toetatud sisendid, õigused ja alustamiseks kuluv aeg.
- Kõnelejamärgistus ja kokkuvõtted: omistamisvead, puuduvad otsused, põhjendamata väited ning see, kas tegevuspunktid kajastavad salvestist täpselt.
- Toimetamine: taasesituse juhtnupud, otsing, parandustööriistad, kõnelejate ümbernimetamine ja ülesande lõpetamiseks vajalik vaev.
- Eksport: avage eksporditud failid päriselt ning kontrollige vajaduse korral vormingut, kõnelejamärgistust ja ajastust. Eristage loetletud ekspordifunktsiooni testitud ekspordist.
- Kiirus ja töökindlus: mõõtke üleslaadimise, töötlemise ja käsitsi toimetamise aega eraldi. Märkige heli kestus, ühendustingimused ja pooleli jäänud tööd.
Kliiniline dokumentatsioon vajab eraldi hinnangut märkmete tõetruudusele ning kliiniliselt olulistele väljajätmistele või lisandustele. Kliinilise kvaliteedi otsus nõuab sobiva kvalifikatsiooniga hindajat; üldine transkriptsiooniskoor ei tõenda kliinilist sobivust.
5. Võrrelge hindu samal alusel
Hinnaväited vajavad ametlikku allikat ja kontrollimise kuupäeva. Märkige valuuta, arvelduskohustus, sisalduv maht, failipiirangud, kasutajakohtade nõuded, ületamistasud ja asjakohased lisad. Tasuta prooviperioodid ja ajutised soodustused tuleb sellisena tähistada.
Aastapaketi kuupõhine ekvivalent peab kandma märget „arveldatakse aastas“. Ärge võrrelge seda konkurendi kuumaksega erinevust selgitamata. Tunnihinna näited peavad esitama eeldatava kasutuse ja arvutuse. Kasutamata maht ei muuda tellimust tasuta teenuseks ning ka reklaamitud piiramatu paketi puhul tuleb kontrollida kehtivaid piiranguid.
Väärtus sõltub ülesandest. Kui toimetamisvaeva mõõdeti, esitage see koos tellimiskuluga. Kui hinda või piirangut ei saa kinnitada, märkige see kinnitamata teabeks, selle asemel et praegust pakkumist oletada.
6. Selgitage hindeid, tugevusi ja piiranguid
Soovitused peavad määratlema sihtkasutaja, ülesande ja järeldust toetavad tõendid. Tööriist võib sobida intervjuudeks, kuid mitte reaalajas koosolekuteks. Arutage olulisi puudusi ja olukordi, kus alternatiiv võiks olla parem.
Kataloogiprofiilil pole vaikimisi tärnihinnangut. Kui artikkel kasutab koondhinnet, peab see nimetama kriteeriumid, kaalud, aluseks olevad mõõtmised ja puuduvate andmete käsitluse. Testimata funktsioon märgistatakse „testimata“, selle asemel et see automaatselt läbituks või ebaõnnestunuks lugeda. Ärge mõelge välja kliendihinnanguid, arvustuste arvu, võrdlusmõõtmisi ega tulemuste kuvatõmmiseid.
Kataloogi järjekord ja arvustuse otsus on erinevad asjad. Vaikimisi on esiletõstetud kirjed eespool; Nimi A–Z järjestab tähestikuliselt. Iga järjestatud test või „parima“ soovitus peab selgitama oma tõendeid ja järjestamismeetodit.
7. Tehke tõendid, uuendused ja parandused jälgitavaks
Praktilise testi artikkel peab nimetama autori, testi kuupäeva ja hinnatud paketi või versiooni. Lisage algsed kuvatõmmised või muud sobivad salvestised, allikalingid ning tulemuse mõistmiseks vajalik meetod. Kuvatõmmis tõendab nähtavat; see ei toeta mõõtmata väidet.
Kasutage salvestisi, mida tohib seaduslikult kasutada ja jagada. Eemaldage avaldatavatest tõenditest isiklik, konfidentsiaalne ja kontoteave. Privaatsus- ja turbefunktsioonid tuleb omistada teenusepakkuja ajakohasele dokumentatsioonile, kui neid pole sõltumatult kontrollitud; ärge tuletage sertifikaati turundusväitest.
Olulise vea kinnitamisel parandage vastav tekst, märkige muudatus ja kuupäev ning vaadake mõjutatud järeldused uuesti läbi. Hilisem tarkvarauuendus ei muuda varasemat testitulemust vaikselt. Testige uuesti enne vana mõõtmise esitamist uue versiooni jõudluse tõendina.
Parandustaotlus peab nimetama lehe URL-i, vaidlustatud väite ja toetavad tõendid. Paranduse avaldamine sõltub nendest tõenditest.
Metoodika allikad
- JiWER: kõnetuvastuse hindamismõõdikud, sealhulgas WER ja CER.
- Google Search Central: kasulike tootearvustuste kirjutamine, sealhulgas vahetud tõendid ning eelised ja puudused.