Лаборатория искусственного интеллекта
Meaning Error Rate: ASR domain-specific metric framework
Уважаемые коллеги,
приглашаем Вас посетить семинар "Meaning Error Rate: ASR domain-specific metric framework".
В области оценки качества систем распознавания речи существуют две общепринятые метрики WER (word error rate) и CER (character error rate). Несмотря на то, что они являются стандартом, в прикладных областях этих метрик уже недостаточно. К основным недостаткам можно отнести: отсутствие чувствительности к семантическим ошибкам и особенностям конкретной доменной области.
Мы исследовали как изменяется человеческая оценка качества распознавания речи в зависимости от значения WER и предложили новый подход к построению метрик. Полученное, таким образом, семейство метрик может учитывать требования предметной области и человеческий опыт. На семинаре мы расскажем о результатах этого исследования и проведенных экспериментах по применимости данного подхода.
Докладчик: Людмила Гордеева.
Язык доклада: русский.
Дата и время: 18-е февраля, 19:00-20:30.
Заходите в Zoom: https://clck.ru/Rbv3x
Записи всех прошлых и будущих семинаров будут выкладываться здесь: https://youtube.com/channel/UCKYcMXUhucq50dUym-l3_jA
До встречи!