whisper-small-en-ft
ASR для английской речи с заиканием
Это файнтюн openai/whisper-small для automatic-speech-recognition на английском. Обучен на train-части CDLI Rwandan English non-standard speech dataset — записях преимущественно молодых взрослых с заиканием. Проект исследует недорогое распознавание речи для людей с заиканием (Rwanda Innovation Sprint, CDLI).
👀 Ключевые особенности
- ✅ База —
openai/whisper-small, поддерживается только английский. - 🎨 Дообучение только на train-сплите; dev выбрал checkpoint, test оценён один раз.
- 📓 В карточке есть WER/CER и отдельно loops — повторы в выводе Whisper; веса лежат в
best/. - 🫤 Тестовых дикторов всего 9: в основном молодые мужчины, тихие записи в помещении с планшета.
- ❌ Не для диагностики или оценки речевых нарушений, идентификации дикторов и клинических, юридических или правоохранительных решений.
💻 Пример
Сценарий из карточки: надиктовать описание картинки или прочитать предложение на английском, а модель должна выдать текстовую расшифровку. Для открытой речи карточка советует ориентироваться на результаты picture-prompt, а не на чтение предложений.
Подробнее
Test: pooled WER 26.0%, CER 17.5%, loops 0.9 тестовых дикторов: различия меньше примерно 3 WER-пунктов между моделями не подтверждаются.
Ограничения: тихие записи в помещении, чтение и описание картинок, не разговорная речь; повторы заикания записаны в транскриптах, блоки и продления в тексте не видны.








Комментарии