В MIT разработали робота-собаку, который может играть в футбол в снегу и в грязи

Инженеры использовали обучение с подкреплением, чтобы подготовить робота к игре в футбол в сложных условиях.

Инженеры из MIT использовали симуляцию искусственной среды и обучение с подкрепления, чтобы научить робота играть в футбол в различных условиях. «DribbleBot» успешно манипулирует мячом на таких ландшафтах, как песок, гравий, грязь и снег. Исследование носит не только теоретический, но и практический характер: роботы, которые легко перемещаются в сложных и непредсказуемых условиях подойдут для использования в спасательных операциях.

Для ускоренного обучения исследователи использовали искусственную симуляцию — цифровой двойник природы. Она позволяет загрузить необходимые физические параметры среды, и моделировать динамику предметов в таких условиях. С помощью этого подхода инженеры одновременно моделировали 4 000 версий робота, соответственно ускоряя отработку движений. Практика в реальных условиях начинается после таких симуляций.

Робот начинает обучение, не зная, как вести мяч — он просто получает вознаграждение, когда делает это, или отрицательное подкрепление, когда ошибается. Таким образом, он, по сути, пытается выяснить, какую последовательность сил он должен прикладывать к своим ногам.

Обучение ведению мяча требует большей сложности и в большей степени зависит от внешней среды. Робот должен адаптировать свое движение, чтобы воздействовать на мяч. При этом взаимодействие между мячом и внешней средой может отличаться от взаимодействия между роботом и ландшафтом. Например, трение, который футбольный мяч будет испытывать на траве и на тротуаре отличается, а наклон будет вызывать ускорение, изменяя типичную траекторию мяча.

Источник: hightech.fm