26 подписчиков
🎮 ChatGPT + Skyrim = виртуальная реальность нового уровня!
Представьте себе игру без диалоговых окон с выбором стандартных фраз. Если хотите что-то узнать, то просто произнесите любой вопрос вслух, а дальше всё сделают нейросети.
Такой идеей и вдохновился один из пользователей Reddit и реализовал это в The Elder Scrolls V: Skyrim, с помощью ChatGPT, xVASynth и Whisper.
Система работает так:
1) Вы задаёте вопрос голосом (можно спросить о времени суток, погоде, сюжете и так далее)
2) Система распознавания речи Whisper преобразует ваш голос в текст и передает ChatGPT для создания ответа вместе с кучей параметров
3) ChatGPT генерирует ответ с учетом биографии персонажа, времени суток и прошлых диалогов
4) xVASynth получает готовый ответ и озвучивает его нужным голосом персонажа, а доп. инструменты синхронизируют движение губ героев
Пока эта схема работает не мгновенно и для полноценного ответа нужно время, но это уже невероятно впечатляет
Посмотреть демонстрацию работы можно по ссылке
И обязательно подписывайтесь на наш Дзен, если хотите знать больше про нейросети!
Около минуты
1 мая 2023