Performances

Mesuré en toute transparence.

Nous mesurons sur des jeux de test publics utilisés par toute la communauté scientifique, avec l’évaluation de la Speech DF Arena : un seul modèle, des jeux mesurés intégralement, et nous indiquons ce que le tableau ne montre pas.

Huit jeux de test publics

Un modèle, huit jeux.

Equal Error Rate (EER) par jeu : le point où les attaques manquées et les fausses alertes sont aussi fréquentes les unes que les autres. Plus la valeur est basse, mieux c’est. Mesure interne de notre modèle de détection actuel sur les jeux de test complets, situation en octobre 2026.

Jeu de testEER · plus bas = meilleur
DFADD0,000 %
Fake or Real0,133 %
ASVspoof 2019 (LA)1,034 %
ASVspoof 2021 (DF)1,138 %
SONAR1,191 %
InTheWild3,285 %
ASVspoof 2021 (LA)4,387 %
ASVspoof 511,789 %
Moyenne des huit jeux : 2,870 %. Un seul modèle, chaque jeu mesuré intégralement, situation en octobre 2026.
8 jeux de test · un modèle

Toutes les valeurs proviennent du même modèle, mesuré sur les jeux de test complets avec l’évaluation officielle de la Speech DF Arena. Nous avons choisi ce modèle sur nos propres données de contrôle. Nous ne l’avons pas soumis, il n’y a donc pas de classement.

L’entraînement ne contenait aucune donnée de test ou de développement de ces jeux, mais bien les parties d’entraînement publiques d’ASVspoof 2019 (base également des jeux 2021), d’ASVspoof 5 et de DFADD. Pour InTheWild, SONAR et Fake or Real, il n’y avait aucune part d’entraînement.

L’Arena évalue en outre LibriSeVoc, Codecfake et quatre jeux ADD. Nous n’avons pas encore mesuré LibriSeVoc sur le corpus complet. Codecfake et les jeux ADD sont sous une licence qui exclut l’usage commercial, nous n’indiquons donc aucune valeur pour eux. Sur plusieurs de ces jeux, le taux d’erreur est plus élevé que dans le tableau.

Jeux de test et évaluation : Speech DF Arena, Hugging Face
Honnêteté

Ce que ces valeurs signifient, et ce qu’elles ne signifient pas.

Portée

Laboratoire contre laboratoire

Les jeux de référence reflètent des conditions contrôlées : attaques connues, découpages propres, canaux définis. Les valeurs indiquent dans quelle mesure une méthode résiste face à l’état de la recherche.

Limite

Votre quotidien est plus exigeant

En production, les voix sont compressées, multilingues, entachées de réverbération et de bruits de fond. Aucun benchmark ne reproduit exactement votre téléphonie. Quiconque prétend le contraire mesure mal.

Conséquence

Pilote sur vos données

C’est pourquoi tout déploiement commence par vos enregistrements : nous mesurons sur vos canaux, dans vos langues, avec votre niveau de bruit, et définissons ensemble les seuils.

Mesure interne

Le seul chiffre qui compte : le vôtre.

L’analyse des archives montre les performances de VeriGate sur vos enregistrements : avec un constat par dossier et un profil de risque de vos flux d’appels.