NVIDIA AI游戏助手G
6月8日消息,台北电脑展上,NVIDIA虽然没有带来下一代显卡Blackwell RTX 50系列的消息,但也奉上了不少新的技术,尤其是AI相关,比如说游戏助手G-Assist,比如说数字人生成套件ACE。
在台北电脑展现场,也实际体验了一番。
台北电脑展南港展览馆一馆门前硕大的NVIDIA LOGO
G-Assist意在利用生成式AI的能力,解决传统游戏世界庞大需要细致探索、玩法机制复杂需要不断摸索的问题,为玩家节省大量无谓的时间消耗,甚至可以帮助小白优化性能,获得最高帧率、能效。
G-Assist可以接收玩家的语音或文字输入内容、游戏窗口的上下文信息,通过AI视觉模型处理相关数据,然后通过语音或文字回复给玩家。
这些AI视觉模型,加强了与游戏知识数据库相连的大语言模型(LLM)的上下文感知,以及对特定游戏、应用的理解,可以生成最贴切的答案。
它还可以对显卡硬件进行控制,既可以直接超频,获得最高帧率,也可以优化提升,获得性能、功耗的平衡。
甚至只需要说一句话,它就能生成帧率、功耗、延迟等参数的实时曲线,对于评测来说简直是神助手。
NVIDIA通过和Studio Wildcard合作,打造了《方舟:生存飞升》(ARK: Survival Ascended)的演示DEMO。
在其中,G-Assist可以帮助玩家回答有关生物、物品、背景知识、任务、关卡BOSS等方面的问题,从而免去查找攻略或反复尝试的麻烦。
比如说,它可以告诉你屏幕上的恐龙是什么类型,某个装备有什么用。
凭借游戏环境感知、上下文理解的能力,它可以玩家的不同进程,提供个性化的回复。
识别屏幕上的恐龙类型
当前的平均帧率和功耗
让能效最大化,但帧率不能低于55FPS
显卡功耗、平均帧率实时曲线:后期功耗骤降就是最大化能效的效果
平均帧率、延迟实时曲线
1%低帧率暂时没有实时曲线,但也能提供相关数据
NVIDIA从年初就宣布并多次展示的生成式AI微服务 ACE ,现已全面推出,可以为客户服务、远程医疗、游戏和娱乐等各种领域创建、动画化、操作栩栩如生的数字人。
ACE数字人AIGC套件的内容包括:
- Riva ASR、TTS、NMT:用于自动语音识别、文本到语音转换、翻译。
- Nemotron LLM:用于语言理解,并根据上下文生成回复。
- Audio2Face:根据音轨制作栩栩如生的面部动画。
- mniverse RTX:用于实时路径追踪,以制作逼真的皮肤和毛发。
其中,第一步和第四步主要在本地利用RTX GPU进行硬件加速执行,第二步和第三步则需要连接云端服务。
该服务还有两项全新推出的技术:
一是Audio2Gesture,用于根据音轨生成肢体手势,即将推出。
二是Nemotron-3 4.5B,一种全新的小语言模型(SLM),45亿参数,专为低延迟、本地端RTX AI PC推理而设计。
NVIDIA ACE服务的合作客户有:Aww Inc.、戴尔科技、Gumption、Hippocratic AI、英业达、掌趣科技、完美世界游戏、Reality Arts、甲尚科技、ServiceNow、Soulbotix、数字栩生、UneeQ,等等。
这就是完美世界制作的一个演示DEMO,玩家可以和这位部落公主互动交流,中英文都可以,她会实时给出回答。
演示过多次的ACE DEMO,Inworld制作,一个酒店大堂场景,在原来前台、服务生、科学家的基础上,又增加了一个角色,互动更丰富。
ChatRTX:完全本地化的AI助手,初期只能处理文件文本,现已支持图片,后续还会支持视频,语音、文字交互均可。
DLSS 3.5开关对比:手机拍摄无法体现真正的效果,但仔细看窗户上的窗帘阴影、沙发靠背上的光照效果,差别都极其明显。
H.264、AV1视频编码效果对比:同样帧率和码率,后者优势明显,NVIDIA RTX GPU可以硬件加速。
NVIDIA Studio专业应用:降噪与物体消除。
SFF机箱:小机箱安装高性能RTX显卡,终于有了统一标准。
显卡型号不低于RTX 4070,长度不超过304毫米,高度不超过151毫米(包括电源线空间),厚度不超过50毫米(2.5插槽)。
机箱可横装或竖装显卡,从主板/转接卡到机箱面板不少于154.5毫米,显卡长度空间不少于312毫米,显卡厚度空间不少于50毫米(2.5插槽)。