Компьютер-полиглот читает по губам // 24 Февраля 2013

Ученые из University of East Anglia (UEA) занимаются разработкой инновационной системы, которая сможет прочитать по губам проговариваемую пользователем фразу.

Системы с подобной функциональностью уже разрабатывались раньше. Однако теперь ученые впервые задались целью научить компьютер распознавать отдельные слова и целые предложения, произносимые на различных языках. Материалы исследований, проведенных Стивеном Коксом (Stephen Cox) и Джейком Ньюманом (Jake Newman) из School of Computing Sciences, будут впервые представлены на проходящей в эти дни на Тайване научной конференции.

Компьютер сможет самостоятельно определить, на каком именно языке произнесена текущая фраза. Разработчики утверждают, что при идентификации языка система практически не допускает ошибок. Список поддерживаемых языков включает в себя английский, французский, немецкий, арабский, китайский (мандаринский и кантонский диалекты), итальянский, польский и русский, сообщает сайт Science Daily.

«Сделанное нами открытие представляет собой настоящий прорыв в данной области. Мы впервые нашли научное подтверждение весьма любопытной теории, согласно которой при произнесении фразы губы говорящего принимают специфическую форму в характерной для данного языка последовательности, - объясняет профессор Кокс, - К примеру, мы обнаружили, что франкоговорящие пользователи часто округляют губы во время разговора, а характерным признаком арабской речи является слегка выступающий кончик языка». Для проверки гипотезы ученые пригласили два десятка добровольцев, разговаривающих на двух или трех языках, и воспользовались специальными инструментами для статистического моделирования движений губ при произнесении фраз на различных языках.

Разработчики считают, что создаваемой системе найдется применение в самых разных областях. К примеру, разработка позволит компьютеру понимать глухонемых людей, поможет безошибочно распознавать голосовые команды, отдаваемые в шумном помещении, а также пригодится сотрудникам спецслужб при проведении оперативных мероприятий.

Исследование, финансируемое правительственным комитетом Engineering and Physical Sciences Research Council (EPSRC), является частью более масштабного проекта в рамках UEA. На следующем этапе исследователи научат создаваемую систему принимать во внимание индивидуальные физиологические особенности говорящего и специфическую манеру речи.