Дженсен Хуанг, глава NVIDIA, внедряет инновационную технологию известную как ACE for Games. Эта разработка позволяет видеоиграм стать более интерактивными, с естественными диалогами и реальными мимическими выражениями персонажей.
Также она обеспечивает преобразование текстового и звукового контента в графические выражения персонажей и обратно. В демонстрационной версии игры, Хуанг показал, как неигровой персонаж по имени Jin, владелец азиатского кафе, интерактивно реагирует на вопросы игрока голосом и дает реалистичные ответы.
Технология ACE for Games состоит из трех основных компонентов. Первый – это NVIDIA NeMo, который включает NeMo Guardrails, созданный для предотвращения нецензурных диалогов с искусственным интеллектом.
Второй компонент – NVIDIA Riva, который преобразует аудио в текстовую форму и наоборот. В демонстрации технологии ACE for Games, игрок обращался к персонажу с помощью микрофона, после чего Riva помогал в визуализации текста, передавая его языковой AI-модели.
Последняя часть в рабочем процессе этой технологии – NVIDIA Omniverse Audio2Face, благодаря которой персонажи могут иметь мимические выражения, согласующиеся с их речью.
По данной теме у нас еще есть много интересного, вот например: