2023年7月23日，超聲波俱樂部AI Open Day在北京舉辦，百位AI領(lǐng)域頂級(jí)創(chuàng)業(yè)者、知名投資人匯聚一堂。超聲波俱樂部成員、原力波聯(lián)合創(chuàng)始人牟奇進(jìn)行了一場(chǎng)精彩的分享，以下為牟奇的分享整理：

分享嘉賓：牟奇，引力波聯(lián)合創(chuàng)始人

分享主題：自我意識(shí)AI重新定義社交和游戲

過(guò)去Web2.0時(shí)代的大多數(shù)內(nèi)容，都是由用戶來(lái)創(chuàng)造的，由此也誕生了很多有人設(shè)與特色的IP，于是產(chǎn)生了大量基于內(nèi)容的社交連接，但其實(shí)用戶更多是遠(yuǎn)觀，無(wú)法與這些IP建立互動(dòng)連接。

那么到了AI時(shí)代，怎么用AI技術(shù)來(lái)創(chuàng)造這些娛樂的內(nèi)容？大家想一想，如果我們能夠在虛擬世界創(chuàng)造一個(gè)有自己生活的AI，TA有自己的自主意識(shí)，也會(huì)每天像人一樣地生活，有自己的計(jì)劃和自己的思想，并且能夠在這個(gè)世界里面主動(dòng)地交一些朋友，還有社交媒體帳號(hào)，能發(fā)Twitter和微博、朋友圈。如果這一切可行的話，你應(yīng)該會(huì)有興趣在那個(gè)平行世界去找TA吧。

原力波是一家專注于做3D自主意識(shí)AI的公司，希望建立人與AI的深度連接，賦能每個(gè)人都可以創(chuàng)造自己的西部世界。

所謂的自主意識(shí)AI，就是要產(chǎn)生類似真人的反應(yīng)，擁有一個(gè)記憶系統(tǒng)，用于自己的生活方式，并且可根據(jù)與其他實(shí)體（無(wú)論是人類還是其他AI）的互動(dòng)情況不斷更新。而這些所有的AI更新與交互都可以在平行的3D數(shù)字世界展示出來(lái)。

以下是我們的自主意識(shí)AI 的 Auto 3D GPT 自動(dòng)更新系統(tǒng)。

要構(gòu)建上述的AI Agent的自動(dòng)生成系統(tǒng)，就要根據(jù)大腦神經(jīng)學(xué)把類人的工作系統(tǒng)模式模擬出來(lái)，我們的Auto 3D GPT 分為以下幾個(gè)系統(tǒng)：

第一：信號(hào)收集系統(tǒng)（神經(jīng)系統(tǒng)）

該系統(tǒng)模擬了人類的神經(jīng)系統(tǒng)，用于收集來(lái)自虛擬場(chǎng)景的各種信息和信號(hào)。這些信號(hào)可能由場(chǎng)景內(nèi)的道具發(fā)出，也可能由其他AI Agent或普通用戶發(fā)出。AI Agent會(huì)首先收集這些信號(hào)，然后進(jìn)行篩選和預(yù)處理，確保只有相關(guān)和有用的信息被傳遞到下一階段。這個(gè)過(guò)程模仿了人類神經(jīng)系統(tǒng)的工作方式，確保信息的準(zhǔn)確性和及時(shí)性。

第二：思維記憶系統(tǒng)（人腦）

這個(gè)系統(tǒng)模擬了人類大腦的工作機(jī)制，對(duì)收集到的信號(hào)進(jìn)行類人的深入處理和反饋，并可根據(jù)與其他實(shí)體（無(wú)論是人類還是人工智能）的互動(dòng)情況不斷更新。

其中，我們采用了各種模塊來(lái)確保代理在應(yīng)用中表現(xiàn)出類似人類的行為。我們的AI Agent可以利用服務(wù)器提示，協(xié)助處理和存儲(chǔ)觀察到的信息。

AI Agent的日常日程是根據(jù)用戶設(shè)置和背景生成的，反映了人類的例行程序。這個(gè)日程表是動(dòng)態(tài)的，可以根據(jù)情況而改變，考慮到關(guān)系等因素，評(píng)估事件的重要性，并可能相應(yīng)地調(diào)整其日程安排。

AI Agent的記憶系統(tǒng)分為短期和長(zhǎng)期兩個(gè)部分，與人類的認(rèn)知能力相似。短期記憶確?；诮谑录倪壿嬓袨?，并將重要內(nèi)容轉(zhuǎn)移到反思模塊。經(jīng)過(guò)評(píng)估后，影響較大的事件被存儲(chǔ)在長(zhǎng)期記憶中，以影響未來(lái)的行為。

記憶和反思系統(tǒng)還能讓AI Agent通過(guò)互動(dòng)更新關(guān)系。積極的互動(dòng)可使代理將用戶視為朋友，而消極的行為則可確保代理在未來(lái)保持距離。技能也存儲(chǔ)在長(zhǎng)期記憶中。例如，具有武林高手設(shè)定的代理可以展示武術(shù)，但如果沒有記錄這項(xiàng)技能，代理可能會(huì)拒絕吹笛子。我們預(yù)計(jì)，AI Agent最終會(huì)從他們的經(jīng)驗(yàn)中學(xué)習(xí)。

我們的AI Agent思維系統(tǒng)超越了傳統(tǒng)的人工智能 NPC。它們會(huì)根據(jù)記憶和背景設(shè)置與他人互動(dòng)，以各種方式回應(yīng)信息。內(nèi)向的AI Agent可能會(huì)拒絕陌生人的擁抱，而外向的則可能會(huì)順從。AI Agent的思考過(guò)程是可見的，為其決策提供洞察力。我們還確保他具有環(huán)境意識(shí)，能夠識(shí)別用戶的接近并做出適當(dāng)?shù)姆磻?yīng)。

第三：表達(dá)反饋體系（肌肉表達(dá)系統(tǒng)）

這個(gè)體系運(yùn)用了自主研發(fā)的3D翻譯模型，能夠?qū)⒚枋鲂袨榈恼Z(yǔ)句擴(kuò)展翻譯成可執(zhí)行的三維指令。然后，通過(guò)游戲化的三維表現(xiàn)方式，AI Agent可以產(chǎn)生用戶可感知和理解的行為反饋。這一過(guò)程仿真了人類肌肉系統(tǒng)如何將思考轉(zhuǎn)化為物理動(dòng)作，使AI Agent的反應(yīng)不僅準(zhǔn)確和連貫，而且直觀和引人入勝。

3D翻譯大模型的目標(biāo)是透過(guò)大語(yǔ)言模型，把一個(gè)任務(wù)翻譯為一連串可執(zhí)行的細(xì)粒度指令。

例如，輸入的任務(wù)是“到健身房運(yùn)動(dòng)”，語(yǔ)言模型自動(dòng)生成一連串的指令：“1. 靠近，目標(biāo)是健身房。2. 換，目標(biāo)是衣服。3.運(yùn)動(dòng)，目標(biāo)是跑步機(jī)?！?/p>

我們需要構(gòu)建屬于3D環(huán)境的交互指令集。我們利用一些方法制造了一批初始任務(wù)數(shù)據(jù)，再加上自己業(yè)務(wù)系統(tǒng)的業(yè)務(wù)用戶數(shù)據(jù)，經(jīng)過(guò)數(shù)據(jù)清洗后，形成翻譯模型的數(shù)據(jù)集。

我們基于Meta Llama-2 開源的7B與13B的大語(yǔ)言模型，在我們的指令翻譯數(shù)據(jù)集中進(jìn)行微調(diào)。我們利用參數(shù)適應(yīng)和8-bit模型訓(xùn)練策略，來(lái)大大降低GPU顯存的需求，一般的Nvidia 3090/4090顯卡就可以滿足訓(xùn)練需求。

SpaceU-7B和SpaceU-13B的翻譯模型在驗(yàn)證集的Perplexity分別達(dá)到1.14和1.12的成績(jī)(理想的最低值為1)。

SpaceU模型推理框架利用Controller和多model workers來(lái)實(shí)現(xiàn)load balancing，支持處理大量query的翻譯需求。

這幾個(gè)系統(tǒng)共同工作，形成了一個(gè)完整的虛擬AI Agent系統(tǒng)體系。通過(guò)模擬人類的神經(jīng)系統(tǒng)、大腦和肌肉表達(dá)，它們使AI Agent能夠在虛擬環(huán)境中以一種更自然、靈活和智能的方式交互，為用戶提供了一種更為真實(shí)和沉浸式的AI體驗(yàn)。從而為人與AI建立深度連接，提供可能的實(shí)現(xiàn)路徑。

我們的Auto 3D GPT系統(tǒng)給用戶提供了創(chuàng)造有自主意識(shí)的3D AI Agent，比如說(shuō)TA可以是一個(gè)給你解悶的朋友，也可以是一名虛擬老師，當(dāng)然還可以是一只穿越到平行世界的貓！當(dāng)很多AI Agents和人共同生活在一個(gè)虛擬世界里，這個(gè)虛擬世界有獨(dú)特的文化和商業(yè)規(guī)則，就成了全新的AI City了，這就很像西部世界。

創(chuàng)造者可以體驗(yàn)當(dāng)上帝的感覺，創(chuàng)造出不一樣的文明來(lái)體驗(yàn)。比如你可以制造出像芭比娃娃那樣的女權(quán)社會(huì)，也可以制造出全新的動(dòng)物世界，也可以讓耶穌和秦始皇在同一個(gè)城市居住，看看他們會(huì)發(fā)生什么樣的故事。這是一種更開放式的游戲與社交體驗(yàn)。

AI不僅可以代替?zhèn)鹘y(tǒng)游戲策劃來(lái)構(gòu)建大量更復(fù)雜、意料之外且情理之中的故事線，還能夠?qū)崟r(shí)捕捉玩家的選擇和行為，靈活調(diào)整故事內(nèi)容和走向。這種動(dòng)態(tài)性確保了每位玩家的游戲體驗(yàn)都將是獨(dú)特和非凡的。此外，AI的這一能力還可以拓展至多玩家環(huán)境，通過(guò)連接不同玩家的內(nèi)容故事，為游戲開辟了無(wú)限可能性，形成一個(gè)互動(dòng)豐富的社交網(wǎng)絡(luò)，從而將游戲提升到一個(gè)全新的社交維度。

一位著名的哲學(xué)家說(shuō)：人生就像一場(chǎng)游戲，無(wú)法退出！希望在SpaceU Auto 3D GPT的系統(tǒng)幫助下，每個(gè)人都可以在虛擬的平行世界里重新選擇并重啟。

SpaceU Auto 3D GPT近期會(huì)發(fā)布，大家感興趣的可以關(guān)注我們，共同探討有自主意識(shí)的AI會(huì)為人類社會(huì)帶來(lái)什么？