让NPC和玩家实时交互?英伟达的新AI技术做到了|精选
虽然是新技术,但是已经有人在用了。
(资料图)
5月29日,在中国台北举办的2023年台北国际电脑展(Computex)上,英伟达首席执行官黄仁勋开始了他长达两小时的主题演讲。
作为演讲前半部分用于吸引观众眼球的重头戏,黄仁勋公布并介绍了英伟达和合作伙伴Convai共同构建的新AI技术:Omniverse Avatar Cloud Engine(以下简称ACE)。
ACE是一套基于生成式AI技术的模型代工服务,能够为游戏中的语音、对话和角色动画提供AI模型,或者说,给NPC添加实时交互的功能。“……我们用AI来渲染场景,还能用它让场景变得栩栩如生。”
黄仁勋还播放了一段代号“Kairos”的演示视频。这段视频运用虚幻5引擎和光线追踪技术,渲染了一间赛博风格的拉面店,由玩家操控的Kai来到店里,和AI驱动的NPC老板Jin实时交流。他们的对话翻译如下:
Kai:嗨,Jin,你还好吗?
Jin:不幸的是,不太好。
Kai:怎么了?
Jin:我担心这附近的犯罪活动。最近情况变得很糟。我的拉面店也陷入了交火之中。
Kai:我能帮忙吗?
Jin:如果你想为此做些什么,我听说了这样的传言。Kumon Aoki,那个强大的犯罪头目,正在城市里制造各种各样的混乱。他可能是这些暴力行为的根源。
Kai:我会跟他谈谈。我在哪里能找到他?
Jin:我听说他常去城东边的地下搏击俱乐部。试试去那里吧。
Kai:OK,我会过去的。
Jin:小心点,Kai。
搞这一大段对话的目的,就是让玩家接了个支线任务,找到这个Kumon Aoki,还拉面店一片清净。
Jin的对话都是AI“即兴创作”的产物,只是视频中的对话流程乏善可陈,和之前的游戏中NPC照本宣科般的对话似乎没啥区别。Jin的确在结合世界观作出发言,但玩家的问题问得太过简单,我们无从得知英伟达AI的实际性能及应变能力。
不过,Jin对自然语言实时做出的面部反应,或者说口型,完全对得上他的发言,光这一点就足以技惊四座。
在ACE支持下的Jin“栩栩如生”,是英伟达的三种技术相辅相成的结果。
首先是NeMo,根据预先输入的知识和角色背景故事,构建、定制并部署语言模型,是NPC的大脑。
然后是Riva,用于识别玩家的语音、实现文本和语音互转,让NPC给出实时语音对话,是NPC的耳朵和嘴。
最后是Audio2Face,即时创建匹配语音的NPC面部动画,并直接添加到Epic的虚幻5引擎或其他工具中,可谓是NPC的面部神经。
图源英伟达官网
Nvidia GeForce平台副总裁杰森·保罗(Jason Paul)在展前简报中表示,ACE可以一次用于多名AI角色,理论上甚至可以让NPC之间相互交谈。但他承认,他还没有看到过关于这方面的实际测试。
ACE是个代工服务,是英伟达向游戏开发人员出售的技术,旨在“让几乎所有开发人员都能以经济高效的方式设计由AI控制的NPC”。
当然,构成ACE的三项技术并非缺一不可,单买也没问题。据英伟达的新闻稿,一批游戏开发商和初创公司,已经在其工作流程中使用且仅使用了英伟达的Audio2Face技术。
例如,乌克兰游戏开发商GSC Game World,就准备在由虚幻5引擎打造的《潜行者2:切尔诺贝利之心》中试用Audio2Face,让NPC的口型对得上配音演员的声音。
《潜行者2》开发中画面
老黄的演讲能够吸引多少游戏开发者买下ACE、又有多少开发者会因为这项技术革新受益或失业,暂且都是未知数。不过有一点可以确定:用于实现ACE效果的计算和渲染,需要更强大的显卡性能支撑。但愿英伟达在将来推出的新显卡,价格不会涨得太狠。
标签:
相关文章
天天精选!反诈宣传进社区 中国电信唐山丰润分公司联合公安局和街道办开展反诈宣传活动
为全面推进网络信息安全全民化,提升全面反诈意识和能力,5月20日中国电信唐山丰润分公司(以下简称丰润分
天天播报:销售机构办公费用计入什么科目(办公费用计入什么科目)
每日小编都会为大家带来一些知识类的文章,那么今天小编为大家带来的是办公费用计入什么科目方面的消息知识
“药明系”生物制药公司科笛集团招股打新:专注皮肤与毛发护理
科笛集团港股招股打新,专注皮肤与毛发护理,两年亏超8亿元,背靠“药明系”今日科笛集团发布公告,公司拟
泰晤士:欧足联计划对俱乐部转会支出和工资的总金额做双重限制_环球信息
泰晤士:欧足联计划对俱乐部转会支出和工资的总金额做双重限制,英超,欧足联,总金额,泰晤士,欧洲足球,财务造
百融云-W(06608)6月1日斥资约587.15万港元回购61.1万股_世界新要闻
百融云-W(06608)发布公告,于2023年6月1日斥资约587 15万港元回购
“重制版”都在比烂?这款游戏的赛季版却越玩越香|全球热门
对于一款游戏来说,如何才能证明其历史地位?那大概就是——被重制,甚至被重制无数次。一直以来,重制游戏
世界微头条丨漫步人生路粤语歌词汉字标注发音_漫步人生路粤语歌词
1、楼上没毛病!从一开始就错了!后面更离谱!我之前回答过同样的问题,被接受了。2、我想抄答案,但是找不
世界信息:最强版本/限量333台 大众高尔夫 R 333官图发布
大众官方发布了一组大众高尔夫R333限量版的官图,限量333台。新车搭载2 0TTSI发动机,最大马力333匹,最大
马斯克到访特斯拉上海超级工厂具体详细内容是什么 天天微资讯
马斯克到访特斯拉上海超级工厂今天的热度非常高,现在也是在热搜榜上了,那么具体的马斯克到访特斯拉上海超
世界快看:激发科普活力 播撒科学种子——各地开展形式多样科普活动迎接“六一”国际儿童节
在三晋大地探寻煤炭的“神奇旅程”,在雪域高原感受冰川科学的无穷魅力,在南海之滨逐梦深蓝体验“有趣的海
天天微动态丨阿里影业发布业绩:2023财年经调整EBITA盈利2.95亿元,同比增加106%
报告期内,数智化平台先后为《独行月球》、《交换人生》、《点燃我,温暖你》等多个影剧项目提供了独家策划
天天即时:水发燃气:5月31日融资净买入394.22万元,连续3日累计净买入1806.58万元
5月31日,水发燃气(603318)融资买入1029 95万元,融资偿还635 72万元,融资净买入394 22万元,融资余额1
uni-t 长安(uni-t是什么车?)_环球快资讯
UNI-T(参数|询价)是长安乘用车高端产品序列uni旗下的首款车型,基于长安汽车新架构打造,并采用新无边界设
废物利用怎么做衣服_如何用废弃物制作衣服图片-全球新动态
1、首先要明确的,是什么样的废物可以拿来做衣服。2、我们不是原始人,也不是土著,穿在身上的衣服除了能遮
360 智脑 - 视觉大模型发布,大模型开启 Alot 新时代_世界要闻
品玩5月31日讯,360今天举办视觉大模型及AI硬件新品发布会,推出了360智脑视觉大模型及多款AI硬件新品。周