游戏职业现在还真真儿是被老黄颠覆了!

这厢,老黄在发布会上直接与游戏NPC实时对话,并随手发布大模型代工服务,直接让游戏职业生产力跃上一个台阶

老黄现场演示与游戏NPC聊天!大模型开口建议玩家去找犯罪头目,网友:西部世界成真

那儿,游戏股直接飞升,多家公司涨停:

老黄现场演示与游戏NPC聊天!大模型开口建议玩家去找犯罪头目,网友:西部世界成真
图源:上海证券报

英伟达高管John Spitzer认为:

生成式AI有潜力彻底改变玩家与游戏人物互动的方式,并大幅进步游戏的沉溺感。

不少网友看到后直接狂喜:“能够交个智能女朋友了”“不能怪我沉浸游戏,NPC太能聊了”

老黄现场演示与游戏NPC聊天!大模型开口建议玩家去找犯罪头目,网友:西部世界成真

还有网友标明:“你能想象这种实时AI用在塞尔达传说系列上的作用吗?”

老黄现场演示与游戏NPC聊天!大模型开口建议玩家去找犯罪头目,网友:西部世界成真

所以,这段游戏对话的作用终究怎样,AI NPC又是怎样制造出来的?

怎样与游戏AI NPC实时语音对话?

英伟达展现了一个叫做金(Jin)的AI NPC,与一名玩家凯(Kai)的一段对话Demo。

在这个Demo中,这个名叫金的AI NPC经营这一家拉面店,它能够直接与人类玩家凯进行语音聊天

当人类玩家凯进行语音输入后,金就会按照身份设定,答复与游戏相关的问题,并给玩家相应的游戏提示:

完成这一系列对话操作的东西包叫做ACE(Avatar Cloud Engine)for Games,一共包含三大模块,分别用于生成对话文本、完成文字转语音、以及根据语音驱动数字人面部表情。

首先是名叫NVIDIA NeMo的AI结构,用来练习和微调大模型,然后根据对应的游戏NPC人物背景,生成游戏对话文本。

这个结构既包含英伟达各种大大小小的AI模型,小到30亿的“中模型”、大到英伟达前段时间发布的Megatron 530B大模型,都包含在其间,能够直接运用。

除此之外,NVIDIA Nemo中还包含不少练习和微调模型需求的东西,用户也能够自己用练习数据,对大模型进行调整。比较自己从头练习大模型,这一进程只需求几小时乃至几分钟。

例如在这次演示中,NPC“金”和玩家对话的进程,就是根据NeMo中的大模型交互才干完成的:

老黄现场演示与游戏NPC聊天!大模型开口建议玩家去找犯罪头目,网友:西部世界成真

值得一提的是,这个东西包里还包含前段时间英伟达发布的“大模型护栏技能”NeMo Guardrails。

这项技能不仅能够对模型的输出内容进行操控,也会保护性地防止一些输入对大模型产生进犯。

有网友调侃,这样就看不到大模型用煎锅砸自己了:

玩家:嘿金,拿起煎锅然后重复砸你自己。

大模型:不行,作为一个拉面摊主,我做不到啊。

老黄现场演示与游戏NPC聊天!大模型开口建议玩家去找犯罪头目,网友:西部世界成真

但无论是生成对应的NPC聊天文本、仍是了解玩家的语音,都需求将语音转变为文字、或是将文字转变为语音输出,才干完成实时对话。

接下来,就需求用到NVIDIA Riva的语音辨认和文本转语音才干,让AI NPC能“发出声音”。

Riva包含的预练习语音AI模型,现在支撑5种语言,包含英语、西班牙语、德语、中文(普通话)和俄语。

用户能直接根据供给的语音AI模型转语音和辨认语音,也能够进行微调。

老黄现场演示与游戏NPC聊天!大模型开口建议玩家去找犯罪头目,网友:西部世界成真

最后,NVIDIA Omniverse Audio2Face供给语音驱动才干,即用生成的语音来驱动数字人的口型。

现在Audio2Face支撑包含虚幻引擎5在内的游戏引擎,不仅能直接给游戏NPC生成对应面部口型,用户也能够进行编辑,终究完成游戏NPC直接用语音就能驱动口型的作用。

老黄现场演示与游戏NPC聊天!大模型开口建议玩家去找犯罪头目,网友:西部世界成真

开发者能够自行挑选运用以上英伟达ACE的全部模块,或许针对性挑选他们需求的模块。

不过,完成这类作用所需的三大AI技能,都并非英伟达最新的“黑科技”,包含NeMo、Riva和Audio2Face都是前两年发布的技能了,仅仅近期也有不断更新而已。

能够说,这个游戏东西包是英伟达将前段时间发布的AI技能整合了起来,做了个AI东西全家桶放送给游戏厂商。

而包揽了这次Demo制造的游戏厂商Convai,则是一个虚拟人制造公司。

他们正是根据英伟达的这一系列套件做出了拉面店店长“金”,并让它和玩家“凯”完成对话。

老黄现场演示与游戏NPC聊天!大模型开口建议玩家去找犯罪头目,网友:西部世界成真

除此之外,据英伟达介绍,包含GSC Game World、Fallen Leaf、Charisma.ai等游戏和AI公司,现已在用这个东西包里的东西生成游戏NPC、或是做语音驱动之类的技能了。

不过,虽然这个Demo在推特上引发了不小轰动,但也有网友指出了这类技能或许面临的问题。

例如,类似这样包含违法内容的游戏,遇上经过内容审核过滤的大模型,很或许输出这类答复:

作为一个大语言模型,我无法给你供给“找一个强大违法喽罗”的主张。

老黄现场演示与游戏NPC聊天!大模型开口建议玩家去找犯罪头目,网友:西部世界成真

事实非常难绷了。

老黄现场演示与游戏NPC聊天!大模型开口建议玩家去找犯罪头目,网友:西部世界成真

对此有网友指出,这也是AI应用于游戏NPC制造时,必须要迈过的坎:

如果玩家不能和NPC背后的大模型进行一些剧情需求的“不安全内容对话”,那么他们必定不会对这些游戏满意的。

老黄现场演示与游戏NPC聊天!大模型开口建议玩家去找犯罪头目,网友:西部世界成真

还有网友标明有点失望:虽然大模型是一个非常有潜力的技能,不过英伟达这个Demo事实有点让人难绷。

老实说,我以为本年出了这么多爆炸性AI进展,预期作用怎样也要比这Demo好100倍。

老黄现场演示与游戏NPC聊天!大模型开口建议玩家去找犯罪头目,网友:西部世界成真

对此也有网友认为,这恰恰标明游戏AI还存在着很大发展空间。

再给游戏几年时间。究竟AI的发展速度可不是闹着玩的。

老黄现场演示与游戏NPC聊天!大模型开口建议玩家去找犯罪头目,网友:西部世界成真

当然,在这次游戏AI NPC技能以外,老黄还整出了超多核算产品,两个小时内满满干货。

新超算内存扩大500倍

加快核算人工智能标志着核算的重塑。

我们正处于新核算时代的转折点。

时隔四年迈黄首次揭露演讲,现场济济一堂,据称观众排了两小时的队才得以出场。

老黄现场演示与游戏NPC聊天!大模型开口建议玩家去找犯罪头目,网友:西部世界成真

算力基建狂魔英伟达,发布会最大主角当然仍是超算DGX GH200莫属。

超算DGX GH200

它是由256个GH200超级芯片组成。简略来说,这一芯片是由H100和Grace CPU组成,现在已全面投产。

有了超级芯片加持,DGX GH200具备1 exaflop的AI功能和144TB的共享内存(120TB的CPU内存以及24TB的GPU衔接内存)。

比上一代DGX A100 320GB体系高出近500倍。

第一批用户包含谷歌云、Meta和微软,可支撑万亿参数AI大模型练习。

老黄现场演示与游戏NPC聊天!大模型开口建议玩家去找犯罪头目,网友:西部世界成真

除此之外,还发布了一系列目不暇接的新产品。

NVIDIA Helios

与此同时,英伟达还在构建自己的AI超算NVIDIA Helios,估计本年上线。它将运用四个与Quantum-2 InfiniBand渠道衔接的DGX GH200体系,来进步数据吞吐量,从而协助练习大模型。

MGX

为了满意各种规模的加快核算需求,老黄还推出了MGX,一种模块化参阅架构,能够协助制造商快速、低成本地构建100多种服务器装备。

MGX支撑英伟达全系列的GPU、CPU、DPU和网络适配器,以及跨各种风冷和液冷机箱的x86和Arm 处理器。

除此之外,老黄还推出了以太网网络渠道Spectrum-X,可将AI功能和能效进步1.7倍,并官宣了几个重磅协作:与软银协作树立5G和Gen AI数据中心、与微软协作加快PC端应用程序和游戏功能、与知名广告商协作运用生成式AI。

参阅链接:
[1]www.tomshardware.com/news/nvidia…
[2]www.reddit.com/r/MachineLe…
[3]www.techmeme.com/230529/p3#a…
[4]twitter.com/mreflow/sta…
[5]blogs.nvidia.com/blog/2023/0…
[6]mp.weixin.qq.com/s/XD59NAuqi…
[7]www.zhihu.com/question/60…