fbpx

Ботов научили самостоятельно одеваться, используя обучение с подкреплением

Ученые из Технологического Института Джорджии научили анимационных персонажей одеваться самостоятельно. Боты умеют надевать виртуальные футболки и куртки, а также одеваться с помощью ассистента. Технология поможет создавать реалистичную компьютерную графику и в будущем может повлиять на разработку роботов, которые будут помогать одеваться больным или людям с ограниченными возможностями.

Обучение с подкреплением

Для тренировки ботов команда использовала обучение с подкреплением. В функции вознаграждения бот получал дополнительные очки, если правильно просовывал голову в воротник, держал край рукава, не разрывал ткань. Исследователи добавили физический движок, чтобы имитировать реалистичное взаимодействие с тканью (вытягивание, растяжение и др.). Кроме того, ученые использовали подход sequence to sequence, разделив большую задачу по надеванию крутки на несколько мелких. То есть, на этапе просовывания руки в рукав бот уже понимал, какую задачу нужно выполнить следующей, чтобы продвинуться дальше.

Пока учёные работали только с одеждой для верхней части тела. Обучение ботов, например, надеванию брюк — следующая по сложности задача, потому что требует включения баланса в контроллер.  

Результаты исследования будут представлены на конференции SIGGRAPH Asia 2018, которая пройдет в Токио с 4 по 7 декабря.