Уникальная программа, читающая безошибочно по губам

11 ноября 2016 в 00:07 Уникальная программа, читающая безошибочно по губам

Программа распознает речь по губам на уровне целых предложений и делает это намного лучше человека.

исследования американские учёные изобретения
 

 

Учёные из Оксфордского университета создали уникальную и пока единственную в мире программу, которая способна распознать речь по губам целыми предложениями и по заверениям специалистов делает это намного лучше человека.

В ходе исследования учёные выяснили, что человеку легче распознать целую фразу, а не слова по отдельности, поэтому принцип действия уникальной разработки основывался именно на этом.

Стоит отметить, что существующие системы, распознающие речь, и основанные на мимике очень умело могут«считать» отдельные слова и словосочетания, но справиться  с целыми предложениями они не могут. Авторы уникальной программы смогли преодолеть это ограничение, применив программу LipNet, в основе которой лежит использование LSTM-нейросети.

Принцип действия программы заключается в следующем: программа с помощью специального алгоритма анализирует целые предложения, а затем, используя методы глубокого обучения, расшифровывает каждое слово.

Для того чтобы начать тестирование, авторами была использована база данных Grid с более 32 000 видеозаписей. На видео 13 человек произносили на английском языке предложения, которые были построены по одинаковому принципу. Учёные отметили, что на каждое предложение существовало по 64 тысячи вариантов.

По завершению исследования оказалось, что LipNet может качественно и без ошибок распознать речь по губам в 93,4 процентах случаев. В связи с этим специалисты заявили, что система смогла, не только обойти другие программы, но и специально обученных людей.

Однако авторы разработки отметили, что условия проверки работы LipNet были весьма «тепличными», и когда программе придётся распознавать произвольную человеческую речь, результат может ухудшиться.

Источник


Еще читать  Ученые рассказали, в такси какого цвета лучше не садиться

Комментарии:

Добавить Комментарий

Яндекс.Метрика