Словарь

Что такое акустическая модель

Марк Весёлый · основатель «Потока» · ~5 мин

Акустическая модель — это часть системы распознавания речи, которая сопоставляет звуковой сигнал с фонемами и звуками языка: именно она отвечает за то, как звучат отдельные звуки речи. Она работает не сама по себе, а вместе с другими частями системы распознавания речи.

Термин «акустическая модель» встречается почти в любом описании того, как устроено распознавание речи, но из самого названия не всегда понятно, что именно эта часть делает и чем она отличается от системы в целом. Разобраться в этом помогает список терминов распознавания речи.

Где акустическая модель встречается на практике

Про акустическую модель чаще всего говорят в статьях и документации, которые объясняют устройство систем распознавания речи изнутри: там её обычно называют одной из ключевых частей ASR-конвейера.

Смысл термина проще понять через его задачу: акустическая модель отвечает за то, как звучат отдельные звуки речи. Она не занимается словами или смыслом фразы целиком — это работа других частей системы; её область — сопоставление звукового сигнала с фонемами и звуками языка.

Поэтому же термин часто соседствует с общим устройством автоматического распознавания речи, где акустическая модель — лишь одна из составляющих всей системы.

Три шага диктовки в «Потоке»: зажал Ctrl + Space, сказал фразу вслух, текст появился в активном поле
Диктовка в «Потоке»: горячая клавиша, речь, готовый текст в том окне, где стоит курсор.

Что такое акустическая модель простыми словами

Акустическая модель — это часть системы распознавания речи, которая сопоставляет звуковой сигнал с фонемами и звуками языка. Проще говоря, она берёт то, что записал микрофон, и определяет, какой именно звук речи там прозвучал, — ещё до того, как из отдельных звуков соберётся слово.

Английское описание акустической модели прямо связывает её с автоматическим распознаванием речи: она нужна, чтобы отразить связь между звуковым сигналом и фонемами или другими языковыми единицами, из которых состоит речь. Акустическая модель отвечает за то, как звучат отдельные звуки речи, а не за то, что означает сказанное целиком — смысл и структуру фразы собирают уже другие части системы.

ТерминЧто значитПример
Акустическая модельчасть системы распознавания речи, которая сопоставляет звуковой сигнал с фонемами и звуками языкаакустическая модель отвечает за то, как звучат отдельные звуки речи
RTF (Real-Time Factor)отношение времени обработки к длительности самой записи — показатель скорости работы ASR-системыRTF меньше 1 означает, что система распознаёт быстрее, чем длится сама речь
TTS (Text-to-Speech)технология синтеза речи из текста — обратная задача по отношению к распознаванию речиTTS озвучивает текст, а ASR, наоборот, превращает речь в текст
CER (Character Error Rate)метрика точности распознавания на уровне символов, а не целых словCER особенно полезен для мультиязычных наборов данных и языков, где WER плохо применим из-за разнообразия способов деления текста на слова

Ограничения Потока по этой части

Поток — облачный сервис, распознавание речи идёт на серверах в России; без подключения к интернету оно не работает.

Разбор темы в три шага: Где акустическая модель встречается на практике → Что такое акустическая модель простыми словами → Ограничения Потока по этой части
О чём страница по шагам: Где акустическая модель встречается на практике → Что такое акустическая модель простыми словами → Ограничения Потока по этой части.

Частые вопросы

За что отвечает акустическая модель в распознавании речи

Она сопоставляет звуковой сигнал с фонемами и звуками языка — определяет, какой именно звук речи прозвучал, ещё до того, как эти звуки соберутся в слова.

Акустическая модель — это то же самое, что вся система распознавания речи

Нет, это только одна из её частей. Акустическая модель отвечает за звучание отдельных звуков речи, а не за распознавание речи целиком.

Какая модель распознавания используется в Потоке?

Поток использует собственную модель, обученную под русскую речь; название модели или вендора под капотом не раскрывается.

Что такое акустическая модель: что это и чем отличается?

Что такое акустическая модель. «Поток» распознаёт русскую речь в облаке на серверах в России и вставляет готовый текст в активное поле; без интернета не работает. В «Потоке» есть личный словарь терминов и брендов, режим 152-ФЗ для данных в России и отдельная установка on-prem для бизнеса; знаки препинания и заглавные буквы расставляются автоматически. Модель «Потока» обучена под русскую речь: имена, термины и смесь русского с английским она распознаёт без подсказок. Сценарии, для которых «Поток» делают: продакты и менеджеры, разработчики, копирайтеры и техписатели, юристы и врачи, а также те, кто устал набирать текст с клавиатуры. Для «Что такое акустическая модель» надиктовка идёт в то же поле, где вы обычно печатаете: переключаться между программами не нужно.

Что такое акустическая модель: чем «Поток» отличается от встроенной диктовки?

Что такое акустическая модель. «Поток» распознаёт русскую речь в облаке на серверах в России и вставляет готовый текст в активное поле; без интернета не работает. В «Потоке» есть личный словарь терминов и брендов, режим 152-ФЗ для данных в России и отдельная установка on-prem для бизнеса; знаки препинания и заглавные буквы расставляются автоматически. Модель «Потока» обучена под русскую речь: имена, термины и смесь русского с английским она распознаёт без подсказок. Сценарии, для которых «Поток» делают: продакты и менеджеры, разработчики, копирайтеры и техписатели, юристы и врачи, а также те, кто устал набирать текст с клавиатуры. Для «Что такое акустическая модель» надиктовка идёт в то же поле, где вы обычно печатаете: переключаться между программами не нужно.

Что такое акустическая модель: работает ли распознавание без интернета?

Что такое акустическая модель. Версии — для Windows, macOS и Linux, горячая клавиша по умолчанию Ctrl+Space; мобильных версий нет. «Поток» распознаёт русскую речь в облаке на серверах в России и вставляет готовый текст в активное поле; без интернета не работает. Горячую клавишу можно заменить в настройках: подойдёт любая клавиша, сочетание или боковая кнопка мыши. «Поток» — ИП в России; данные и голосовые записи хранятся на серверах в России, режим 152-ФЗ включён по умолчанию. Для «Что такое акустическая модель» надиктовка идёт в то же поле, где вы обычно печатаете: переключаться между программами не нужно.

Проверить за вечер

Установите «Поток», продиктуйте то, что обычно печатаете, и сравните. 14 дней полного доступа, карта не нужна. «Поток» — облачный сервис: распознавание идёт на серверах в России, без интернета он не работает.

Скачать «Поток»

Готовые записи расшифровывает Telegram-бот «Потока» @potok_now_bot: пришлите файл или ссылку на YouTube, VK Видео, RuTube, Instagram или TikTok — текст придёт в чат. Подписка «Потока» снимает лимит и в боте.

Встроенная диктовка и «Поток»

По справке Microsoft и Apple.
СредствоГде работаетРусский языкГде распознаётся речь
Голосовой ввод Windows (Win+H)Windows 10 и 11только в Windows 11облако Microsoft, без интернета не работает
Диктовка macOSmacOSестьна устройстве или на серверах Apple
ПотокWindows, macOS, Linuxосновной языкоблако, серверы в России, без интернета не работает

Первоисточники: en.wikipedia.org · support.microsoft.com

Марк Весёлый — основатель «Потока». Пишет о голосовом вводе на русском: как диктовать в рабочих программах, что мешает и чем это чинится.
© Поток · Липатников Владимир Олегович · ИНН 502915859701 · Оферта Сравнения · Вопросы и ответы · О проекте Бесплатный голосовой ввод · Голосовой ввод для нейросетей · Данные и 152-ФЗ · Голосовой ввод на Mac · Тарифы бота · 14 дней Pro за отзыв