Робота научили передавать речь жестами

Робота научили передавать речь жестами
Робота научили передавать речь жестами / Фото из открытых источников

Корейские ученые научили трехмерную систему сопровождать речь жестами, использовав для этого 52 часа записи выступлений спикеров на TED Talks. С помощью алгоритма разметки OpenPose и нейросети им удалось научить систему сопровождать синтезированную речь правдоподобными жестами, а также использовать ее для управления человекоподобным роботом.

Об этом сообщает arXiv.org.

Читайте также: Робота научили мыть туалет

Ученые из Научно-исследовательского института электроники и телекоммуникаций (ETRI) и Корейского института передовых технологий (KAIST) решили научить робота невербальной коммуникации – жестам. Для этого они собрали датасет из 52 часов записи выступлений спикеров на конференциях TED Talks.

Жесты людей на видео были размечены с помощью открытого алгоритма OpenPose (использовались только движения головы, торса и рук). В результате получилась система, которая воспроизводит положение тела в трехмерном пространстве в соответствии с синтезированной речью.

NAO
Робот NAO научился воспроизводить речь жестами

Затем ученые попросили 46 человек оценить по шкале от 1 до 5, насколько жесты, сопровождающие язык, антропоморфные, соответствуют сказанному и приятны на вид. Оказалось, что воспроизведеннsе алгоритмом жесты превзошли по всем параметрам все другие методы.

Читайте также: В Китае ведущим стал искусственный интеллект: как он выглядит

Полученную систему использовали в гуманоидном роботе NAO (он часто используется в исследованиях взаимодействия роботов с людьми): авторы робота утверждают, что нейросети удалось успешно воспроизвести заданные ему комбинации движений.

Больше новостей, касающихся событий из мира технологий, гаджетов, искусственного интеллекта, а также космоса читайте в разделе Техно

Источник: Техно
powered by lun.ua
Если Вы обнаружили ошибку на этой странице, выделите ее и нажмите Ctrl+Enter
Комментарии
При цитировании и использовании любых материалов в Интернете открытые для поисковых систем гиперссылки
не ниже первого абзаца на Телеканал новостей «24» - обязательные.
Цитирование и использование материалов в оффлайн-медиа, мобильных приложениях , SmartTV возможно только с письменного согласия Телеканала новостей "24".
Материалы с маркировкой «Реклама» публикуются на правах рекламы.
Все права защищены. © 2005-2017, ЗАО «Телерадиокомпания" Люкс "», Телеканал новостей «24»
Залиште відгук