讓NPC和玩家實(shí)時(shí)交互？英偉達(dá)展示的新AI技術(shù)做到了 天天熱點(diǎn)

雖然是新技術(shù)，但是已經(jīng)有人在用了。

【資料圖】

5月29日，在中國(guó)臺(tái)北舉辦的2023年臺(tái)北國(guó)際電腦展（Computex）上，英偉達(dá)首席執(zhí)行官黃仁勛開(kāi)始了他長(zhǎng)達(dá)兩小時(shí)的主題演講。

作為演講前半部分用于吸引觀眾眼球的重頭戲，黃仁勛公布并介紹了英偉達(dá)和合作伙伴Convai共同構(gòu)建的新AI技術(shù)：Omniverse Avatar Cloud Engine（以下簡(jiǎn)稱ACE）。

ACE是一套基于生成式AI技術(shù)的模型代工服務(wù)，能夠?yàn)橛螒蛑械恼Z(yǔ)音、對(duì)話和角色動(dòng)畫(huà)提供AI模型，或者說(shuō)，給NPC添加實(shí)時(shí)交互的功能?！啊覀冇肁I來(lái)渲染場(chǎng)景，還能用它讓場(chǎng)景變得栩栩如生?！?/p>

黃仁勛還播放了一段代號(hào)“Kairos”的演示視頻。這段視頻運(yùn)用虛幻5引擎和光線追蹤技術(shù)，渲染了一間賽博風(fēng)格的拉面店，由玩家操控的Kai來(lái)到店里，和AI驅(qū)動(dòng)的NPC老板Jin實(shí)時(shí)交流。他們的對(duì)話翻譯如下：

Kai：嗨，Jin，你還好嗎？

Jin：不幸的是，不太好。

Kai：怎么了？

Jin：我擔(dān)心這附近的犯罪活動(dòng)。最近情況變得很糟。我的拉面店也陷入了交火之中。

Kai：我能幫忙嗎？

Jin：如果你想為此做些什么，我聽(tīng)說(shuō)了這樣的傳言。Kumon Aoki，那個(gè)強(qiáng)大的犯罪頭目，正在城市里制造各種各樣的混亂。他可能是這些暴力行為的根源。

Kai：我會(huì)跟他談?wù)?。我在哪里能找到他?/p>

Jin：我聽(tīng)說(shuō)他常去城東邊的地下搏擊俱樂(lè)部。試試去那里吧。

Kai：OK，我會(huì)過(guò)去的。

Jin：小心點(diǎn)，Kai。

搞這一大段對(duì)話的目的，就是讓玩家接了個(gè)支線任務(wù)，找到這個(gè)Kumon Aoki，還拉面店一片清凈。

Jin的對(duì)話都是AI“即興創(chuàng)作”的產(chǎn)物，只是視頻中的對(duì)話流程乏善可陳，和之前的游戲中NPC照本宣科般的對(duì)話似乎沒(méi)啥區(qū)別。Jin的確在結(jié)合世界觀作出發(fā)言，但玩家的問(wèn)題問(wèn)得太過(guò)簡(jiǎn)單，我們無(wú)從得知英偉達(dá)AI的實(shí)際性能及應(yīng)變能力。

不過(guò)，Jin對(duì)自然語(yǔ)言實(shí)時(shí)做出的面部反應(yīng)，或者說(shuō)口型，完全對(duì)得上他的發(fā)言，光這一點(diǎn)就足以技驚四座。

在ACE支持下的Jin“栩栩如生”，是英偉達(dá)的三種技術(shù)相輔相成的結(jié)果。

首先是NeMo，根據(jù)預(yù)先輸入的知識(shí)和角色背景故事，構(gòu)建、定制并部署語(yǔ)言模型，是NPC的大腦。

然后是Riva，用于識(shí)別玩家的語(yǔ)音、實(shí)現(xiàn)文本和語(yǔ)音互轉(zhuǎn)，讓NPC給出實(shí)時(shí)語(yǔ)音對(duì)話，是NPC的耳朵和嘴。

最后是Audio2Face，即時(shí)創(chuàng)建匹配語(yǔ)音的NPC面部動(dòng)畫(huà)，并直接添加到Epic的虛幻5引擎或其他工具中，可謂是NPC的面部神經(jīng)。

圖源英偉達(dá)官網(wǎng)

Nvidia GeForce平臺(tái)副總裁杰森·保羅（Jason Paul）在展前簡(jiǎn)報(bào)中表示，ACE可以一次用于多名AI角色，理論上甚至可以讓NPC之間相互交談。但他承認(rèn)，他還沒(méi)有看到過(guò)關(guān)于這方面的實(shí)際測(cè)試。

ACE是個(gè)代工服務(wù)，是英偉達(dá)向游戲開(kāi)發(fā)人員出售的技術(shù)，旨在“讓幾乎所有開(kāi)發(fā)人員都能以經(jīng)濟(jì)高效的方式設(shè)計(jì)由AI控制的NPC”。

當(dāng)然，構(gòu)成ACE的三項(xiàng)技術(shù)并非缺一不可，單買也沒(méi)問(wèn)題。據(jù)英偉達(dá)的新聞稿，一批游戲開(kāi)發(fā)商和初創(chuàng)公司，已經(jīng)在其工作流程中使用且僅使用了英偉達(dá)的Audio2Face技術(shù)。

例如，烏克蘭游戲開(kāi)發(fā)商GSC Game World，就準(zhǔn)備在由虛幻5引擎打造的《潛行者2：切爾諾貝利之心》中試用Audio2Face，讓NPC的口型對(duì)得上配音演員的聲音。

《潛行者2》開(kāi)發(fā)中畫(huà)面

老黃的演講能夠吸引多少游戲開(kāi)發(fā)者買下ACE、又有多少開(kāi)發(fā)者會(huì)因?yàn)檫@項(xiàng)技術(shù)革新受益或失業(yè)，暫且都是未知數(shù)。不過(guò)有一點(diǎn)可以確定：用于實(shí)現(xiàn)ACE效果的計(jì)算和渲染，需要更強(qiáng)大的顯卡性能支撐。但愿英偉達(dá)在將來(lái)推出的新顯卡，價(jià)格不會(huì)漲得太狠。

標(biāo)簽：

　　 原標(biāo)題：讓NPC和玩家實(shí)時(shí)交互？英偉達(dá)展示的新AI技術(shù)做到了 天天熱點(diǎn)