Whisper от OpenAI стал стандартом для open-source распознавания речи:
- 99 языков: От русского, английского и китайского до редких языков с минимальным датасетом обучения.
- Транскрибация: Преобразование речи в текст с пунктуацией, capitalization, временными метками.
- Перевод: Прямой перевод аудио с любого языка на английский без промежуточного шага транскрибации.
- Robust к шуму: Работает с записями плохого качества, фоновым шумом, акцентами.
- Большой контекст: Учитывает 30-секундный контекст для consistency терминологии и имён.
- Speaker diarization: Через WhisperX - определение, кто говорит, в многопользовательских записях.
Whisper Large v3 - самая точная версия с WER (word error rate) ниже большинства коммерческих сервисов вроде Google Speech-to-Text или Azure.