Benchmark de transcription en espagnol
Pourquoi AudioMap utilise-t-il AssemblyAI plutôt que Whisper ? Parce que chaque point de pourcentage de WER se ressent sur le résultat final. Voici les données publiques par moteur et variante régionale.
WER (Word Error Rate): pourcentage de mots incorrects sur le total. Plus bas = meilleur. 0 % serait parfait.
Les chiffres du tableau sont ceux d'AssemblyAI Universal-2, la génération précédente. En production, nous utilisons Universal-3.5 Pro, pour laquelle AssemblyAI ne publie pas de WER comparable par variante régionale.
AssemblyAI l'emporte dans toutes les variantes
Universal-2 (génération précédente) maintient un WER < 11 % sur les 5 variantes hispaniques testées. Whisper-large-v3 oscille entre 14,7 % et 19,1 %. Un écart de 7 à 10 points dans les zones à yeísmo ou à débit rapide.
Whisper n'est correct qu'en espagnol neutre
Whisper offre des performances acceptables en es-ES standard mais perd en qualité sur les variantes régionales.
À venir : benchmark propre à AudioMap
Au T3 2026, nous publierons un benchmark avec des audios sélectionnés par nos soins (10h par variante régionale, domaine professionnel, évaluation humaine).
300 minutes par mois incluses. Sans carte.