В основе постижения геймерского искусства лежал новый метод — предварительное видеообучение. Стать игроком искусственному интеллекту помогли специалисты из OpenAI. Кстати, именно эта компания создала нашумевшего "цифрового художника" DALL-E 🎨
Процесс тренировки состоял из нескольких этапов:
1. Специалисты собрали общедоступные видео с игровым процессом в Minecraft. Совокупная продолжительность роликов составила 2 тыс. часов. На видео инженеры отметили действия игроков — нейросеть могла видеть, какие нажимались клавиши, как двигалась компьютерная мышь и т. д. Обучившись с помощью этих данных, ИИ уже мог предсказывать действия геймеров.
2. Исследователи предложили нейросети просмотреть гораздо больший объём игровых материалов — 70 тыс. часов видео без меток о действиях игроков. Так что здесь системе пришлось самостоятельно разметить ролики.
В итоге обученная на десятках тысяч часов онлайн-видео нейросеть стала продвинутым игроком в Minecraft: она научилась рубить деревья, превращать брёвна в доски и даже создавать из этих досок стол, а ещё плавать, охотиться, "прыгать на столбе" и не только 💪🏻
Уверены, что это не просто интересный эксперимент и разработанный метод будет полезен во многих других областях!