Исследователи Оксфордского университета (Великобритания) разработали программу LipNet, благодаря которой компьютер читает по губам с точностью, составляющей 93,4%. На сегодня это наилучшее совпадение. Следует отметить, что человек, умеющий читать по губам, делает это с точностью не выше 52%.
В ходе своей работы специалисты пришли к выводу, что люди с большей точностью читают и понимают, глядя на губы говорящего, когда последний произносит длинные слова. Поэтому представленная программа анализирует не отдельные слова, а все предложение, после чего в ход идет техника глубокого обучения и исходя из целого расшифровывается каждое слово, входящее в это предложение. Данная программа сможет оказать неоценимую услугу людям, имеющим проблемы со слухом. Им достаточно будет иметь смартфон с камерой и с программой LipNet для восприятия речи собеседника с большой точностью. (LipNet/NovostIT)
