dumaiДообучение ИИ вдвое сократило ошибки при распознавании нарушенной речи
Препринт, ещё не рецензирован · ранние данные
Кратко
Систему дообучили на данных людей с нарушениями речи; в работе использовали записи 41 человека. В первом тесте доля ошибок в символах составила 7,81% против 15,26% у базовой системы. На знакомых предложениях доля ошибок была 2,58%, на новых — 6,42%.
Зачем это знать?
Проверки систем распознавания нарушенной речи могут завышать их качество, если в тестах встречаются знакомые предложения.
Разбор
Дообучение сильнее всего помогло с речью новых для системы людей, которых исходная программа понимала хуже всего. К такому выводу авторы пришли, отдельно изучив долю устранённых ошибок у разных людей.
Авторы также проверили, как система работает в реальном времени. Типичная суммарная задержка составила около 0,9 секунды, а доля ошибок в символах — от 7,96% до 8,07%.
Ключевые цифры
Можно ли доверять
Авторы проверяли систему на записях 41 человека при подборе варианта, а затем оценили результат на скрытом наборе записей. Знакомые предложения снижали долю ошибок сильнее, чем знакомый голос, поэтому результат зависит от того, встречались ли предложения при обучении.
- Это препринт, а не прошедшая рецензирование статья.
- Основные результаты получены на ограниченной выборке из 41 говорящего и двух скрытых тестовых наборах.
- Сильная зависимость качества от знакомых предложений показывает, что результаты на тесте могут не отражать распознавание новой речи.
Пересказано ИИ по научной статье. Это научпоп, а не совет врача. Как это устроено