В преддверии выставки Computex 2024 компания NVIDIA анонсировала новый сервис на базе искусственного интеллекта под названием Project G-Assist. Он создан, чтобы помочь геймерам во время игровых сессий. В частности, помощник может предоставить информацию по вопросу, подсказать с тактикой прохождения и так далее. Более того, ИИ способен оценивать происходящее на экране пользователя и понимать контекст.
Project G-Assist понимает голосовые или текстовые запросы от игрока, а также снимок в окне игры. Изображение передаётся моделям компьютерного зрения, которые обеспечивают понимание контекста и специфики приложения для больших языковых моделей. В свою очередь LLM подключена к базе данных игр, и результатом обработки является персонализированный ответ в текстовом или голосовом виде — в зависимости от того, что происходит в игре, — говорится в блоге NVIDIA.
NVIDIA продемонстрировала свою технологию в игре ARK: Survival Ascended. Игроки могли набирать запросы на клавиатуре или использовать голосовую команду, чтобы спросить Project G-Assist о чём-то. Например, как создать оружие, что означает тот или иной предмет или как победить босса. Ассистент учитывает контекст и персонализирует ответы в соответствии с игровой сессией геймера.
Project G-Assist можно использовать и для достижения максимально возможной производительности оборудования. Компания заявила, что ИИ может отслеживать и отображать частоту кадров, энергопотребление, задержку и другие технические данные во время игры. Он предлагает варианты оптимизации настроек при появлении соответствующего запроса.
Этот ИИ-помощник может быть доступен на ПК при подключении к облачному серверу или непосредственно на устройстве при использовании графических ускорителей GeForce. Компания пока не называет сроки, когда Project G-Assist станет доступен геймерам, но для разработчиков уже открыла регистрацию.
