Сегодня, 29 мая, на мероприятии Computex 2023 компания NVIDIA представила сервис Ace for Games, основанный на технологиях генеративного ИИ. Как сообщил генеральный директор «зелёных» Дженсен Хуанг (Jensen Huang), новая разработка сделает NPC-персонажей в видео и компьютерных играх больше похожими на людей.
Демонстрацию новой технологии показали на видео, в котором обычный человек общается с NPC по имени Джин. Игрок задавал вопросы человеческим голосом, а собеседник отвечал ему. Главная фишка заключается в том, что за речь, формирование текстов ответов и мимику отвечали алгоритмы искусственного интеллекта. Пример был создан специалистами компании Convai, стартапом в области искусственного интеллекта в играх, который является частью программы NVIDIA Inception. В реализации проекта был использован игровой движок Unreal Engine 5.
Ace for Games предложит разработчикам игр доступ к трём компонентам. Первый — NVIDIA NeMo, платформа для обучения сверхбольших языковых моделей, позволяющая сделать речь игровых персонажей более реалистичной. Сюда входит технология NeMo Guardrails для предотвращения небезопасных разговоров с искусственным интеллектом.
Второй компонент получил название NVIDIA Riva. Технология конвертации текста в голосовую речь и обратно. Человек задаёт NPC вопрос голосом. Алгоритмы преобразуют речь в текст после чего идёт формирование ответа силам нейронной сети. Когда ответ готов, его текст преобразуется обратно в голосовое сообщение, которое услышит игрок.
Третий компонент под названием NVIDIA Omniverse Audio2Face генерируют мимику и жестикуляцию в соответствии с произносимой речью. Сейчас неизвестно, когда появятся первые проекты с внедрённой технологией Ace for Games.