La preuve
Phone PCC 0.682 contre le consensus humain 0.555.
Le PCC — coefficient de corrélation de prononciation — mesure la proximité des scores automatiques de phone avec le consensus d’évaluateurs humains formés. Sur le jeu public que nous utilisons, deux humains formés s’accordent à 0.555 (niveau phone). Le moteur de production qui note l’outil gratuit est à 0.682 contre ce même consensus.
| Évaluateur | Phone PCC |
|---|---|
| Moteur de production (outil gratuit) | 0.682 |
| Deux humains formés entre eux | 0.555 |
Ce que le nombre est, et ce qu’il n’est pas
Ce n’est pas « la machine est meilleure que l’enseignant ». L’enseignant décide encore le cours. C’est : au grain du phonème, les scores du moteur sont plus proches d’un panel formé que deux membres de ce panel ne le sont l’un de l’autre. C’est la seule raison pour laquelle une cellule rouge sur DH /ð/ peut remplacer la deuxième écoute par défaut.
Le niveau phone est le point. Les scores de mot et sentenceScore sont d’autres construits (un mot est un faisceau de phones ; une phrase mesure aussi l’aisance). Ne collez pas 0.682 à une affirmation d’aisance. Collez-le à une affirmation de phonème.
Comment une classe doit s’en servir — et quand le poser
Servez-vous du PCC comme permission de trier une classe par phonèmes plutôt que par oreille, sur des prises appariées : même phrase, SNR au moins 15 dB, confiance au moins 0.5. Posez-le quand le moteur lui-même avertit — `low_snr`, `high_wer`, `low_confidence_reject`. Un chiffre de preuve collé sur du bruit de cuisine n’est plus le chiffre de preuve.
Les bandes restent le guide, pas le PCC : 80–100 natif, 60–79 acceptable, 40–59 notable, 0–39 grave. Le PCC dit que la bande mérite d’être lue. La bande dit quel phone enseigner.
Pourquoi cette page existe
Chaque autre page de cette série qui imprime 0.682 ou 0.555 pointe ici. Il n’y a pas de troisième chiffre dans les coulisses. Si un paragraphe a besoin d’un autre nombre, il n’entre pas sur ces pages tant que ce nombre n’a pas sa propre source.