Разработчики из Британии создали алгоритм, превращающий текст в видео с человеком, который произносит все при помощи жестов.
Как сообщает ToDay News Ufa со ссылкой на arXiv.org, эта программа разработана специально для людей, которые плохо слышат. В основном контент состоит из роликов, предназначающихся для слышащих людей. В электронном формате эту проблему можно исключить при помощи субтитров. Но при проведении мероприятий или, например, трансляции прямого эфира, приходится использовать сурдоперевод с обычного языка на жестовый.
Исследователи не первый год занимаются подобной разработкой. Для начала было запланировано сделать это при помощи 3D-аватаров, но этот способ давал низкие результаты.
В последнее время специалисты принялись к разработке нейросетевого синтеза. И им впервые удалось качественно вырисовывать каждую деталь, в том числе и движение кистей рук.