Une évaluation utile répond à une question pratique : cet outil convient-il à votre enregistrement, votre langue, votre budget et votre façon de travailler ? Notre norme éditoriale consiste à expliquer les vérifications effectuées, montrer les preuves et décrire les compromis.
Contenus actuels : l'annuaire contient des fiches produits fondées sur la documentation des fournisseurs. Ces fiches ne sont pas des tests pratiques notés. Cette page définit les exigences de publication des tests, comparaisons et recommandations.
Dernière mise à jour : 17 octobre 2026
1. Préciser le type de contenu
- Fiche produit : aperçu des fonctionnalités documentées, plateformes, sources tarifaires et usages prévus. Une affirmation du fournisseur lui est attribuée.
- Test pratique : compte rendu d'un produit réellement utilisé par l'évaluateur, précisant la date, l'offre, les paramètres, les preuves et les limites du test.
- Comparaison : comparaison selon des critères explicites. Si un produit a été étudié sans être testé, cette distinction doit être visible.
- Guide d'achat : explication des critères de sélection et des compromis propres à une tâche. La seule présence dans un guide ne prouve pas une performance supérieure.
Les termes « testé », « vérifié » et « meilleur » exigent des preuves. La disponibilité du logiciel, les affirmations du fournisseur et nos propres observations doivent rester distinctes.
2. Utiliser des conditions de test comparables
Un test pratique commence par un cas d'usage explicite et un ensemble d'échantillons défini. La méthode doit être choisie avant d'examiner les résultats.
- Décrire les échantillons. Consigner la langue, l'accent si pertinent, la durée, le nombre de locuteurs, la qualité audio et le contexte d'enregistrement. Signaler bruit, paroles simultanées ou vocabulaire spécialisé.
- Utiliser les mêmes données d'entrée. Les comparaisons directes de transcription utilisent le même enregistrement source et la même transcription de référence. Toute conversion, coupe ou transformation audio doit être documentée et appliquée de façon cohérente.
- Consigner la configuration. Préciser l'offre, le modèle s'il peut être choisi, la langue, les paramètres d'identification des locuteurs, l'appareil ou le navigateur et la date du test. Expliquer les différences lorsque les options ne sont pas équivalentes.
- Rendre les tentatives visibles. Consigner les tâches échouées, les nouvelles tentatives et les interventions manuelles. Appliquer la même règle de nouvelle tentative à chaque produit ; préciser si le résultat est un premier essai, un résultat typique ou le meilleur essai sélectionné.
- Présenter honnêtement le périmètre. Indiquer le nombre d'enregistrements et de tentatives. Un petit test exploratoire ne peut établir les performances pour chaque langue, accent ou condition d'enregistrement.
Un assistant de réunion, une application de dictée et un outil de transcription par téléversement utilisent des modes de capture différents. Comparer leur tâche commune lorsque possible et évaluer séparément le reste de chaque processus.
3. Mesurer la précision par rapport à une référence vérifiée
La transcription de référence doit être vérifiée à l'écoute de l'enregistrement. La sortie non révisée d'un autre service de reconnaissance vocale ne constitue pas une référence suffisante.
Le taux d'erreur sur les mots (WER) compte les substitutions, suppressions et insertions par rapport au nombre de mots de référence. Pour une référence non vide :
WER = (substitutions + deletions + insertions) / reference words
Un WER plus faible signifie moins de modifications au niveau des mots selon les règles indiquées. Rapporter le nom de la mesure, la taille de l'échantillon et les paramètres d'évaluation ; ne pas la rebaptiser pourcentage universel de « précision ». La référence d'évaluation de JiWER décrit ces calculs.
Chaque test linguistique doit expliquer la segmentation en unités et la normalisation du texte, notamment le traitement de la ponctuation, des majuscules, des nombres, des accents et des mots de remplissage. Les tests en japonais doivent préciser la segmentation des mots. Si une évaluation par caractère est pertinente, indiquer le taux d'erreur sur les caractères (CER) et ses règles de normalisation. Appliquer des règles identiques aux produits comparés. Voir la documentation des transformations JiWER.
Le taux d'erreur sur les mots ou les caractères ne couvre pas toutes les erreurs importantes. Signaler séparément, si pertinent, noms, nombres, dates, phrases omises, contenu inventé, attribution des locuteurs et erreurs d'horodatage. Séparer les résultats par langue sauf si l'article explique le calcul d'un résultat agrégé.
4. Évaluer le travail nécessaire après la transcription
Une transcription lisible n'est qu'une partie du travail. Une évaluation doit décrire les étapes allant de la capture à un document final exploitable.
- Capture et configuration : étapes de téléversement ou d'enregistrement, entrées prises en charge, autorisations et temps de mise en route.
- Identification des locuteurs et résumés : erreurs d'attribution, décisions manquantes, affirmations non étayées et fidélité des actions à mener à l'enregistrement.
- Édition : commandes de lecture, recherche, outils de correction, renommage des locuteurs et effort nécessaire pour terminer la tâche.
- Exports : ouvrir réellement les fichiers exportés et vérifier, si pertinent, mise en forme, identification des locuteurs et synchronisation. Distinguer une fonction d'export annoncée d'un export testé.
- Vitesse et fiabilité : mesurer séparément le temps de téléversement, de traitement et de correction manuelle. Consigner la durée audio, les conditions de connexion et les tâches inachevées.
La documentation clinique exige une évaluation distincte de la fidélité des notes et des omissions ou ajouts cliniquement significatifs. Un jugement sur la qualité clinique nécessite un évaluateur dûment qualifié ; une note générale de transcription ne prouve pas l'adéquation clinique.
5. Comparer les prix sur une base identique
Les tarifs doivent avoir une source officielle et une date de vérification. Préciser la devise, l'engagement de facturation, le quota inclus, les limites des fichiers, les exigences de licences utilisateur, les dépassements et les options pertinentes. Identifier clairement les essais gratuits et remises temporaires.
L'équivalent mensuel d'une offre annuelle doit porter la mention « facturé annuellement ». Ne pas le comparer à la mensualité d'un concurrent sans expliquer la différence. Les exemples de coût horaire doivent indiquer l'usage supposé et le calcul. Un quota inutilisé ne rend pas l'abonnement gratuit ; les restrictions applicables à une offre dite illimitée doivent toujours être vérifiées.
La valeur dépend de la tâche. Lorsque l'effort de correction est mesuré, le rapporter avec le coût de l'abonnement. Si un prix ou une limite ne peut être confirmé, le signaler plutôt que d'estimer une offre actuelle.
6. Expliquer les notes, points forts et limites
Les recommandations doivent préciser le public, la tâche et les preuves soutenant la conclusion. Un outil peut convenir aux entretiens et mal convenir aux réunions en direct. Présenter les inconvénients importants et les circonstances favorables à une autre solution.
Les fiches d'annuaire n'ont pas de note en étoiles par défaut. Si un article utilise une note globale, il doit préciser critères, pondérations, mesures sous-jacentes et traitement des données manquantes. Une fonction non testée est marquée « non testée », sans réussite ou échec automatique. Ne pas inventer d'avis clients, de nombres d'avis, de benchmarks ou de captures de résultats.
L'ordre de l'annuaire et le verdict d'une évaluation sont distincts. L'annuaire place par défaut les produits mis en avant en premier ; l'option « Nom A–Z » trie alphabétiquement. Tout classement de test ou recommandation du « meilleur » doit expliquer ses preuves et sa méthode de classement.
7. Assurer la traçabilité des preuves, mises à jour et corrections
Un article de test pratique doit identifier l'auteur, la date du test et l'offre ou la version évaluée. Inclure des captures originales ou d'autres traces adaptées, les sources et la méthode nécessaire pour comprendre le résultat. Une capture documente ce qu'elle montre ; elle ne prouve pas une affirmation non mesurée.
Utiliser des enregistrements dont l'utilisation et le partage sont licites. Retirer des preuves publiées les données personnelles, confidentielles et de compte. Les fonctions de confidentialité et de sécurité doivent être attribuées à la documentation actuelle du fournisseur, sauf vérification indépendante ; ne pas déduire une certification d'une affirmation marketing.
Lorsqu'une erreur importante est confirmée, corriger le texte concerné, indiquer le changement et sa date, puis réexaminer les conclusions affectées. Une mise à jour logicielle ultérieure ne modifie pas silencieusement un ancien résultat. Tester à nouveau avant de présenter une ancienne mesure comme preuve des performances d'une nouvelle version.
Une demande de correction doit préciser l'URL de la page, l'affirmation contestée et les preuves à l'appui. La publication d'une correction dépend des preuves fournies.
Références méthodologiques
- JiWER : mesures d'évaluation de la reconnaissance vocale, dont le WER et le CER.
- Google Search Central : rédiger des avis produits utiles, notamment les preuves de première main et les avantages et inconvénients.