Специалисты «Яндекса» представили ИИ-помощника для геймеров. По словам команды разработчиков, это новый режим работы «Алисы» в телевизорах компании, во время которого она «смотрит», как пользователь играет, и может дать ответ по поводу прохождения, если обратиться к ней за помощью.
ИИ-помощника (пока в бета-режиме) представили вместе с новой линейкой телевизоров («ТВ Станций»). Ассистент работает при подключении к интернету и пока может выручить при игре на PlayStation 5, Xbox Series X/S и Nintendo Switch 1/2.
В основе помощника — Visual Language Model (VLM). Это позволяет ему в момент запроса пользователя «смотреть» на экран и анализировать происходящее. После этого нейросеть ищет в сети ответ на заданный вопрос, дополняя его контекстом на основе изображения. По сути, это умный поиск по картинке. Ответы на запросы возникают в небольшом окошке в правой части экрана и озвучиваются ассистентом.
Приведём несколько примеров того, о чём можно спросить «Алису» во время игры.
- Какие у босса слабые стороны и как его победить?
- Какое оружие лучше выбрать и на что потратить ресурсы?
- Что написано на вывесках и в письмах?
- Как решить головоломки, если не хочется тратить время?
- На каком моменте сюжета вы находитесь и сколько осталось до финала?
- Где найти коллекционные предметы и сколько их на уровне?
Игровой ИИ-ассистент полностью бесплатен и доступен всем пользователям «ТВ Станций». В обозримом будущем появится поддержка ПК при HDMI-подключении к телевизору.