AI建模/場景/NPC/CG 【AI資訊簡報(bào) 第一期】23/4/12

本專欄開始搜集關(guān)于最近新出的AI資訊。信息來源主要是ytb或tt?平臺(tái)或其他新聞網(wǎng)站。做搬運(yùn)視頻太費(fèi)時(shí)間,所以用專欄的形式。
這是第一期。如果看的人多的話,后面每周更一次。

來自Y站@Matt Wolfe -This 3D AI Technology Is Getting Wild!視頻提要:
1,全息AI寵物 Uncle Rabbit實(shí)現(xiàn)和人的自然語音對(duì)話并支持ChatGPT的基礎(chǔ)功能。
(有條件自己去看視頻,語音非常自然)
官網(wǎng):lookingglassfactory.com/uncle-rabbit
門檻:需加入等候列表。且這是個(gè)相框一樣的硬件物體,應(yīng)該要購買才行。

2,Spline AI.?文字生成模型,看演示應(yīng)該支持常見幾何體和一些low poly物體,支持物理和材質(zhì)。
官網(wǎng):spline.design/ai
門檻:需加入等候列表。加入后有免費(fèi)和付費(fèi)服務(wù)。




3,英偉達(dá)發(fā)表演示使用ChatGPT插件在Omniverse中?用文字編輯場景,讓AI幫你擺模型。(基于素材庫資產(chǎn))

原文:medium.com/@nvidiaomniverse/chatgpt-and-gpt-4-for-3d-content-generation-9cbe5d17ec15#cid=ov01_so-yout_en-us
備注:插件未發(fā)布
4,OPUS.AI ,支持文字到3D場景創(chuàng)建。(基于素材庫資產(chǎn))
以下截圖來源官方網(wǎng)站右上角的demo演示。
官網(wǎng):opus.ai
門檻:需加入等候列表







來自Y站@Matt Wolfe -CRAZY AI Computer Graphic Technology!?視頻提要:
1,Meta公司發(fā)布圖像分塊AI,能夠準(zhǔn)確識(shí)別圖像中每一塊物體并標(biāo)記。將有望極大程度改善AI圖像/視頻生成流程或其他圖像相關(guān)的科技發(fā)展。
官網(wǎng):segment-anything.com
門檻:可在官網(wǎng)免費(fèi)使用demo,可自行上傳圖片測試


據(jù)悉國內(nèi)已有團(tuán)隊(duì)基于次做出的開源進(jìn)階版,叫 Grounded SAM
github.com/IDEA-Research/Grounded-Segment-Anything
2,Luma AI發(fā)布基于神經(jīng)輻射場NeRFs?的3D場景重建插件。用于UE5的插件,場景可直接在UE5中渲染查看。是一種掃描建模技術(shù),用戶可以用視頻創(chuàng)建一個(gè)3d場景。
官網(wǎng):lumalabs.ai
門檻:需要插件,軟件,或手機(jī)App。有免費(fèi)和付費(fèi)版。模型精度還是有點(diǎn)低。


3,Blackade Labs?發(fā)布支持 文字生成HDRi (天空盒貼圖/360度全景圖)
官網(wǎng):?skybox.blockadelabs.com
門檻:?免費(fèi)使用



來自Y站@Matt Wolfe -ANYONE Can Make Insane Visual Effects Now!視頻提要
1,主播獲取了Wonder Dynamics的?Wonder Studio資格,能夠直接拍視頻,然后選擇一個(gè)CG角色替換其中的演員。
AI會(huì)自動(dòng)處理CG角色的動(dòng)作,表情,光影,和背景修復(fù)問題。
官網(wǎng):wonderdynamics.com
門檻:需加入等候列表,有資格后,demo免費(fèi)使用


來自Y站@Matt Wolfe -?Autonomous AI: Are We Creating Westworld?視頻提要
1,Reverie,一個(gè)用AI驅(qū)動(dòng)的NPC,讓他們自動(dòng)生活的模擬游戲demo。
其中的所有NPC都是基于一個(gè)基礎(chǔ)人設(shè)后,自動(dòng)規(guī)劃任務(wù),執(zhí)行任務(wù),包括聊天,工作,學(xué)習(xí),生活,社交等。

你可以點(diǎn)擊每一個(gè)npc?查看他們正在做什么,位置,和對(duì)話。
官網(wǎng):reverie.herokuapp.com/arXiv_Demo/#
門檻:免費(fèi)查看,可暫停時(shí)間,暫無交互功能。

研究員在論文中指出:他們發(fā)現(xiàn),當(dāng)其中一個(gè)小人想舉辦情人節(jié)聚會(huì)時(shí),他們自發(fā)的籌備聚會(huì),人們開始尋找伴侶,約會(huì)并準(zhǔn)時(shí)參加派對(duì)。
2,Meta?AI聲稱,他們的機(jī)器人可通過虛擬3d演示的機(jī)器人抓取物體,學(xué)會(huì)在現(xiàn)實(shí)中到達(dá)對(duì)應(yīng)目標(biāo)點(diǎn),并抓取物體。

3, tt用戶 @rikvk01?發(fā)布自己開發(fā)的MemoryGPT,是擁有長期記憶的ChatGPT。能將你們的所有對(duì)話整理并準(zhǔn)確記憶,哪怕重啟頁面也能回想你告知他的個(gè)人信息。而不是像ChatGPT的短期記憶,或new bing一樣被清除。
原貼:twitter.com/rikvk01/status/1644787327057776645
門檻:需要加入等候列表

4,tt用戶@skirano發(fā)布?DesignerGPT,基于GPT4和插件系統(tǒng)的網(wǎng)頁設(shè)計(jì)插件。
能夠使用戶文字生成網(wǎng)站,GPT自動(dòng)調(diào)用圖像插件和網(wǎng)頁設(shè)計(jì)插件為你生成網(wǎng)頁
原貼:twitter.com/skirano/status/1645555893902397440
門檻: 需要GPT插件測試資格


5, SceneDreamer,?一個(gè)通過幾張風(fēng)景圖片創(chuàng)建無邊界3d地形的網(wǎng)站。
官網(wǎng):scene-dreamer.github.io
門檻:免費(fèi)

支持多種風(fēng)格。

雖然真實(shí)性上還有些差距,但已經(jīng)初具雛形了。



本期咨詢大多來自Matt Wolfe,如果各位還有其他咨詢來源推薦,歡迎留言。
如果信息有錯(cuò)請(qǐng)指正。另外B站的圖片注釋功能有bug,我編輯狀態(tài)看不見注釋,所以有幾個(gè)莫名其妙的字母就無視。
本期咨詢到此結(jié)束,歡迎點(diǎn)贊關(guān)注。