EER 0.8% на In-the-Wild — уровень лучших систем лидерборда Speech DF Arena.
Ноябрь 2026
Результаты голосового детектора
Тот же код и порог, что в сервисе. Около 146 тысяч записей из 24 открытых датасетов.
Формулировки, которые можно цитировать
91% точности на реальных дипфейках из соцсетей 2024 года.
94% подделок ElevenLabs v4 распознаются.
Как читать цифры
Точность
Доля верных вердиктов «фейк / не фейк».
EER
Метрика лидерборда Speech DF Arena. Меньше — лучше.
AUC
Качество оценок без привязки к порогу. Ближе к 1 — лучше.
Датасеты, на которых модель не обучалась
| Датасет | Что это | Результат | Сравнение / оговорка |
|---|---|---|---|
| In-the-Wild | Реальные дипфейки знаменитостей из интернета, 29 тысяч записей | Точность 99.0%. EER 0.80%. AUC 0.998 | У лучших систем лидерборда Speech DF Arena EER 0.67–1.3%. Результат на этом уровне. |
| Deepfake-Eval-2024 | Дипфейки, ходившие в соцсетях в 2024 году | Точность 91.0%. AUC 0.949 | Лучший коммерческий детектор в исследовании авторов набора: 89% (AUC 0.93). Открытые модели после дообучения: 86%. Модель училась на других записях этого набора, тестовые не видела. |
| ElevenLabs v4 | Генератор 2026 года, 5 языков | Распознано 93.9% подделок | Независимых сравнений нет. ElevenLabs пишет, что их собственный детектор не распознаёт надёжно даже предыдущую версию v3. |
| ML-ITW | Многоязычные дипфейки из соцсетей, 14 языков | Точность 90.3%. AUC 0.938 | Модель училась на других спикерах этого набора. |
| DeepVoice | — | Точность 93.8%. EER 3.0% | — |
| ODSS | Многоязычный | Точность 98.4%. EER 0.88% | — |
| EmoFake | Эмоциональная речь | Точность 99.7%. EER 0.11% | — |
| EmoSpoofTTS | Только подделки | Распознано 99.8% подделок | Это доля найденных подделок, не точность. В наборе только фейки. |
«Не обучалась» — по открытым данным. Две из трёх базовых моделей не раскрывают свои обучающие наборы.
Пересечение с обучением неизвестно
Возможно, на этих датасетах обучалась одна из базовых моделей. Обучающие данные не раскрыты.
| Датасет | Результат |
|---|---|
| ArAD (арабский) | Точность 99.6% |
| J-SPAW (японский) | Точность 99.96% |
Рост после обновления в ноябре 2026
| Датасет | Было | Стало |
|---|---|---|
| Deepfake-Eval-2024 | 80% | 91% |
| ML-ITW | 78% | 90% |
| ElevenLabs v4 | 82% | 94% |