Google DeepMind теперь может обучать крошечных, готовых роботов, чтобы они могли работать на футбольном поле.
Чтобы сделать миниатюрного Месси, инженеры сначала разработали и обучили два глубоких набора навыков RL в компьютерном моделировании - способность вставать с земли и как забивать голы против неподготовленного противника.
На втором этапе агент научился объединять ранее полученные навыки, совершенствовать их до полной футбольной задачи, а также предсказывать и предвидеть поведение соперника.
Благодаря глубокой структуре RL агенты, использующие DeepMind, вскоре научились улучшать существующие способности, в том числе как пинать и стрелять в футбольный мяч, блокировать удары и даже защищать свою собственную цель от атакующего противника, используя свое тело в качестве щита.
Команда считает, что использование аналогичных подходов глубокого RL для футбола, а также многих других задач может еще больше улучшить движения двуногих роботов и возможности адаптации в режиме реального времени.