What affects speech recognition qualityCe qui influence la qualité de la reconnaissance

Three groups of factors

The differences in performance from one situation to another are not random. Three groups of factors account for them, and most of them leave you some room to act.

Signal quality

FactorEffect on performanceWhat you can do
Microphone quality and placementWrong distance or angle: intelligibility drops, consonants get swallowedMicrophone close to the mouth (15 to 20 cm); avoid rubbing and plosives; run an audio test
Background noiseMasks the useful sounds: the error rate risesHeadset or directional microphone; quiet room; software noise reduction
Room reverberationThe echo blurs word and sentence boundariesA room with little reverberation; curtains or panels; speak facing the microphone
Several speakers, overlappingImperfect diarization; segments cut short where voices overlapIndividual microphones; clear turn-taking; targeted rereading
Poor network connection and compression (live)Artefacts, missed wordsA stable connection, wired if possible; limit competing applications

Assigning each segment to the right speaker remains an open problem, particularly where voices overlap (O’Shaughnessy, 2025): expect to carefully reread any transcription of a meeting.

Linguistic content and style

FactorEffect on performanceWhat you can do
Language varieties and accentsPerformance varies by variety; phonetic confusionsCareful articulation; where possible, a model adapted to the variety
Specialized vocabularyRare or technical terms poorly recognizedTerminology preparation; custom dictionaries
Critical entities (numbers, proper nouns, acronyms)High-impact errors: amounts, references, peopleSpell out; repeat; normalize (date formats); targeted checking
Code-switchingUnstable language detection; mixed spellings and terminologyFix the input language if possible; flag the passages in the other language
Speaking rate and styleToo fast or unclear: substitutions; hesitations: needless insertionsA moderate pace; clean pauses; short sentences
Automatic segmentation and punctuationSentence boundaries and punctuation sometimes wrongMark the end of a sentence with a short pause; reread punctuation and capitalization

The differences between speakers are not symmetrical: Koenecke et al. (2020) document, across five commercial systems, an error rate almost twice as high for African American speakers as for white speakers. Testing a system with the accents and varieties it will actually be used with is part of evaluating it.

Processing mode and the chain

FactorEffect on performanceWhat you can do
Live or offlineLive: fast display but more errors; offline: cleaner output after a delayChoose according to your priority; revise offline where you can
Cascade chain (recognition, translation, synthesis)Errors propagate from one stage to the nextCheck the transcription before translating; turn translation off where it serves no purpose
End-to-end approachOften smoother, but quality is uneven across languages and domainsKeep it for straightforward cases; confirm with samples; plan for a human rereading
Written alternately in EN and FR, translation partly generated in both directions. Rédigé en alternance en EN et en FR, traduction en partie générée dans les deux sens. Updated 2 October 2026

Trois groupes de facteurs

Les écarts de performance observés d’une situation à l’autre ne sont pas aléatoires. Trois groupes de facteurs les expliquent, et la plupart offrent une marge de manœuvre concrète.

La qualité du signal

FacteurImpact sur la performanceSolutions possibles
Qualité et placement du microDistance ou orientation inadéquates : chute d’intelligibilité, consonnes avaléesMicro près de la bouche (15 à 20 cm) ; éviter frottements et plosives ; faire un test audio
Bruit ambiantMasque les sons utiles : hausse du taux d’erreurCasque ou micro directionnel ; environnement calme ; réduction de bruit logicielle
Réverbération de la pièceL’écho brouille les frontières de mots et de phrasesPièce peu réverbérante ; rideaux ou panneaux ; parler face au micro
Plusieurs locuteurs, chevauchementsDiarisation imparfaite ; segments tronqués quand les voix se superposentMicrophones individuels ; tours de parole clairs ; relecture ciblée
Mauvaise connexion réseau et compression (en direct)Artefacts, mots manquésConnexion stable, filaire si possible ; limiter les applications concurrentes

Attribuer chaque segment au bon locuteur reste un problème ouvert, particulièrement quand les voix se chevauchent (O’Shaughnessy, 2025) : comptez-y une relecture attentive pour toute transcription de réunion.

Le contenu linguistique et le style

FacteurImpact sur la performanceSolutions possibles
Variétés de langue et accentsPerformance variable selon les variétés ; confusions phonétiquesArticulation soignée ; si possible, modèle adapté à la variété
Vocabulaire spécialiséTermes rares ou techniques mal reconnusPréparation terminologique ; dictionnaires personnalisés
Entités critiques (nombres, noms propres, sigles)Erreurs à fort impact : montants, références, personnesÉpeler ; répéter ; normaliser (formats de dates) ; vérification ciblée
Alternance de langues (angl. code-switching)Détection de langue instable ; mélange de graphies et de terminologiesFixer la langue d’entrée si possible ; signaler les passages dans l’autre langue
Débit et style de paroleTrop rapide ou flou : substitutions ; hésitations : insertions inutilesVitesse modérée ; pauses nettes ; phrases courtes
Segmentation et ponctuation automatiquesFrontières de phrase et ponctuation parfois erronéesMarquer la fin de phrase par une courte pause ; relire ponctuation et casse

Les écarts selon les locuteurs ne sont pas symétriques : Koenecke et al. (2020) documentent, pour cinq systèmes commerciaux, un taux d’erreur presque deux fois plus élevé pour les locuteurs afro-américains que pour les locuteurs blancs. Tester un système avec les accents et variétés réellement visés fait partie de l’évaluation.

Le mode de fonctionnement et la chaîne de traitement

FacteurImpact sur la performanceSolutions possibles
En direct ou en différéEn direct : affichage rapide mais plus d’erreurs ; en différé : rendu plus propre avec un délaiChoisir selon la priorité ; réviser en différé si possible
Chaîne en cascade (reconnaissance → traduction → synthèse)Propagation des erreurs d’une étape à l’autreVérifier la transcription avant traduction ; désactiver la traduction si inutile
Approche de bout en boutSouvent plus fluide, mais qualité inégale selon les langues et domainesRéserver aux cas simples ; confirmer par échantillons ; prévoir une relecture humaine
Written alternately in EN and FR, translation partly generated in both directions. Rédigé en alternance en EN et en FR, traduction en partie générée dans les deux sens. Mise à jour 2 octobre 2026

Sources

  • Koenecke, A., Nam, A., Lake, E., Nudell, J., Quartey, M., Mengesha, Z., Toups, C., Rickford, J. R., Jurafsky, D., & Goel, S. (2020). Racial disparities in automated speech recognition. Proceedings of the National Academy of Sciences, 117(14), 7684–7689. https://doi.org/10.1073/pnas.1915768117
  • O'Shaughnessy, D. (2025). Speaker diarization: A review of objectives and methods. Applied Sciences, 15(4), 2002. https://doi.org/10.3390/app15042002

Sources

  • Koenecke, A., Nam, A., Lake, E., Nudell, J., Quartey, M., Mengesha, Z., Toups, C., Rickford, J. R., Jurafsky, D., & Goel, S. (2020). Racial disparities in automated speech recognition. Proceedings of the National Academy of Sciences, 117(14), 7684–7689. https://doi.org/10.1073/pnas.1915768117
  • O'Shaughnessy, D. (2025). Speaker diarization: A review of objectives and methods. Applied Sciences, 15(4), 2002. https://doi.org/10.3390/app15042002

Spotted an error? Une erreur ?

Language, content, a broken link: e-mail me what you saw and I will fix it. Langue, contenu, lien brisé : écrivez-moi ce que vous avez vu et je corrige.

ayla.rigouts.terryn@umontreal.ca

Please mention the page: Mentionnez la page :