最新AI電影制作技術(shù)到達(dá)什么水平？看看AI電影節(jié)獲獎(jiǎng)作品
編譯｜小幀
Runway是人工智能工具開(kāi)發(fā)領(lǐng)域的領(lǐng)先公司之一，他們舉辦的首屆AI電影節(jié)評(píng)選出了獲獎(jiǎng)作品。在數(shù)百部參賽作品中，評(píng)委們挑選了十部入圍作品，并公之于眾。這場(chǎng)比賽的主要目標(biāo)是表彰“站在AI電影制作最前沿的藝術(shù)與藝術(shù)家”。我們好奇地分析了獲獎(jiǎng)電影如何將不同技術(shù)融入其中：從AI生成的藝術(shù)作品到整個(gè)3D場(chǎng)景掃描。讓我們來(lái)看看現(xiàn)在對(duì)任何創(chuàng)作者都可用的令人驚嘆的新技術(shù)。
比賽要求視頻時(shí)長(zhǎng)為1到10分鐘，自然，使用神經(jīng)網(wǎng)絡(luò)也是電影節(jié)評(píng)選的主要標(biāo)準(zhǔn)之一。沒(méi)有嚴(yán)格規(guī)定必須使用哪種AI或如何將其融入電影中，因此獲獎(jiǎng)視頻中所用工具的種類令人印象深刻。先進(jìn)技術(shù)的使用僅占電影成功的25% 。評(píng)委還考慮了電影整體構(gòu)成、原創(chuàng)性以及藝術(shù)信息的質(zhì)量。
作為AI電影制作的一部分，使用藝術(shù)生成器
我印象最深的一部短片是Laen Sanches的《PLSTC》?；旧?，這是數(shù)百幅圖片的快速剪輯，這些圖片展示了被塑料包裹、無(wú)法逃脫的不同海洋生物。導(dǎo)演使用AI藝術(shù)生成器Midjourney創(chuàng)作的強(qiáng)烈畫面，通過(guò)AI工具Topaz Labs將它們放大，并稍微加以動(dòng)畫。通過(guò)精確選擇匹配的視覺(jué)效果，他實(shí)現(xiàn)了一種非常明確且連貫的電影氛圍。雖然沒(méi)有說(shuō)一個(gè)字，但信息十分清晰，令人心痛。戲劇性的古典音樂(lè)也有助于喚起深刻的情感，結(jié)果是一個(gè)小型敘事奇跡。雖然沒(méi)有獲得任何獎(jiǎng)項(xiàng)，但絕對(duì)值得一看。暫時(shí)無(wú)法在飛書文檔外展示此內(nèi)容
我喜歡這個(gè)視頻的創(chuàng)意和最終效果的美學(xué)。但重要的是要注意：我認(rèn)為我們?cè)谥谱麟娪皶r(shí)不應(yīng)朝這個(gè)方向發(fā)展，至少目前不應(yīng)如此。關(guān)于在實(shí)際項(xiàng)目中使用AI生成的藝術(shù)作品，有很多討論。您應(yīng)該知道，像Midjourney或Stable Diffusion這樣的工具開(kāi)發(fā)者會(huì)在所有可能的內(nèi)容上訓(xùn)練他們的神經(jīng)網(wǎng)絡(luò)，而不考慮誰(shuí)擁有這些內(nèi)容的權(quán)利。因此，將輸出結(jié)果稱為自己的創(chuàng)作既不道德，也不公平，原創(chuàng)藝術(shù)家得不到認(rèn)可或補(bǔ)償。在我看來(lái)，將這些AI工具用于研究、情緒板或者在創(chuàng)意開(kāi)發(fā)階段是可以接受的。
使用類似文本提示的結(jié)果示例-Midjourney
盡管如此，還是有希望的。上周，Adobe推出了Firefly，旨在解決這個(gè)問(wèn)題。AI藝術(shù)生成器承諾只使用合法和包容性的數(shù)據(jù)集。例如，開(kāi)發(fā)人員在Adobe Stock圖像、開(kāi)放許可的素材和公共領(lǐng)域中的內(nèi)容（版權(quán)已過(guò)期）上訓(xùn)練了Firefly的深度學(xué)習(xí)模型。但仍有改進(jìn)的空間。一些電影制作人敦促Adobe為Stock創(chuàng)作者提供一個(gè)選擇如何以及是否希望使用他們的素材的選項(xiàng)，如果愿意的話，為其提供補(bǔ)償。
我認(rèn)為這是下一步，但軟件仍然非常新，目前還沒(méi)有對(duì)外開(kāi)放，需要申請(qǐng)測(cè)試版訪問(wèn)權(quán)限。
實(shí)景3D掃描 - 從不同角度看AI電影制作
另一個(gè)吸引我注意的節(jié)日作品是銀獎(jiǎng)獲得者Jake Oleson的《Given Again》。這部電影帶領(lǐng)觀眾穿越美麗的日常場(chǎng)景，它們看起來(lái)更像是夢(mèng)幻般的回憶，時(shí)間凝固。氛圍獨(dú)特、藝術(shù)性強(qiáng)，如夢(mèng)似幻，但與傳統(tǒng)敘事截然不同。最讓我印象深刻的是，所有序列都是完全使用Luma AI的NeRF技術(shù)創(chuàng)建的。先觀看它，然后我們將深入了解技術(shù)細(xì)節(jié)：
暫時(shí)無(wú)法在飛書文檔外展示此內(nèi)容
Luma AI讓您僅通過(guò)使用iPhone（11或更新版本）就可以輕松創(chuàng)建真實(shí)感極強(qiáng)、高質(zhì)量的3D模型。在他們的應(yīng)用程序中，您可以輕松捕捉物體、風(fēng)景或整個(gè)場(chǎng)景（就像上面的視頻示例那樣），然后將其轉(zhuǎn)化為詳細(xì)的3D環(huán)境。關(guān)于他們的掃描最有趣的是，它們基于所謂的NeRF技術(shù)，即“神經(jīng)輻射場(chǎng)”。簡(jiǎn)而言之，它通過(guò)深度神經(jīng)網(wǎng)絡(luò)分析從不同角度拍攝的圖像或視頻，學(xué)習(xí)物體的底層3D結(jié)構(gòu)。然后，機(jī)器預(yù)測(cè)3D空間中每個(gè)點(diǎn)的顏色和外觀，并可以合成高質(zhì)量、極為詳細(xì)的模型。
在創(chuàng)建3D掃描之后，您不僅可以回顧那一刻，還可以在后期制作中嘗試不可能的相機(jī)動(dòng)作?！癎iven Again”就是一個(gè)很好的例子，展示了這種AI技術(shù)如何在緊張的預(yù)算下增強(qiáng)電影制作。
在您的視頻中使用AI基礎(chǔ)特效
Runway的AI電影節(jié)大獎(jiǎng)得主是Riccardo Fusetti，他的作品名為《Generation》。這是一部非常具有表現(xiàn)力和抽象感的作品，將現(xiàn)代表演與大量視覺(jué)效果和哲學(xué)旁白文本相結(jié)合。暫時(shí)無(wú)法在飛書文檔外展示此內(nèi)容
我不能100%確定Riccardo在這個(gè)項(xiàng)目中使用了哪種AI技術(shù)，但通過(guò)例如Runway的Gen-1，可以獲得類似的效果。經(jīng)過(guò)相當(dāng)長(zhǎng)的測(cè)試階段，它終于向公眾開(kāi)放。注冊(cè)后，用戶可以免費(fèi)試用該技術(shù)，但信用額度有限。
Gen-1的初始想法是通過(guò)參考圖像或文本提示，從現(xiàn)有視頻中生成新視頻，因此可以將特定風(fēng)格應(yīng)用于您的片段。將簡(jiǎn)單形狀（如鞋盒）變成復(fù)雜物體（如摩天大樓），或僅調(diào)整蒙版物體。為每個(gè)人提供視覺(jué)特效，不讓任何人掉隊(duì)。
雖然聽(tīng)起來(lái)瘋狂，但這僅僅是個(gè)開(kāi)始。目前有很多研究項(xiàng)目正在嘗試使用AI從文本中創(chuàng)建整部電影。我們寫過(guò)谷歌的人工智能開(kāi)發(fā)，例如。Runway還宣布了他們的新產(chǎn)品Gen-2，它應(yīng)該能夠從零開(kāi)始制作視頻。一個(gè)全新的世界正在拐角處等待著我們：既令人興奮又令人恐懼。
通過(guò)AI工具使電影制作大眾化
在電影節(jié)頁(yè)面上有很多關(guān)于AI電影制作的例子。如果您對(duì)知名藝術(shù)家在這個(gè)話題上的觀點(diǎn)感興趣，可以觀看達(dá)倫·阿羅諾夫斯基等參與者的小組討論。
暫時(shí)無(wú)法在飛書文檔外展示此內(nèi)容
主要討論的是人工智能是一個(gè)非常年輕且迅速發(fā)展的領(lǐng)域，我們必須正確對(duì)待它。使用它的關(guān)鍵在于道德和將其視為創(chuàng)意助手，而不是取代我們的工作。與此同時(shí)，大家都認(rèn)為AI有助于電影制作的大眾化。新技術(shù)為獨(dú)立創(chuàng)作者或低預(yù)算制作提供了以前無(wú)法獲得的工具。
我認(rèn)為這是一個(gè)重要的觀點(diǎn)，AI電影節(jié)證實(shí)了這一點(diǎn)。在決賽選手中，您會(huì)看到A$AP Rocky的歌曲“Shittin’ Me”的官方音樂(lè)錄影帶（目前在YouTube上有650萬(wàn)次觀看），以及Sam Lawton的小型個(gè)人作品《Expanded Childhood》，他使用自己的檔案照片創(chuàng)建了具有錯(cuò)覺(jué)的AI擴(kuò)展環(huán)境。
電影制作的未來(lái)
決賽選手之一——簡(jiǎn)短的解釋性視頻《Checkpoint》——將人們對(duì)AI應(yīng)用的普遍反應(yīng)與19世紀(jì)30年代畫家對(duì)攝影發(fā)明的抗議進(jìn)行了比較。隨著時(shí)間的推移，他們學(xué)會(huì)了欣賞現(xiàn)代工具，甚至開(kāi)始將其作為一種新的藝術(shù)形式，重新定義其目標(biāo)和意義（不再必須是逼真的）。
毫無(wú)疑問(wèn)，仍有許多懸而未決的問(wèn)題，但人工智能的發(fā)展將影響電影制作。事實(shí)上已經(jīng)如此。因此，與其抗議，我們不如考慮如何最道德、最公平地使用它。如果我們能做到這一點(diǎn)，AI可以增強(qiáng)我們的創(chuàng)造力，為我們向前邁進(jìn)提供堅(jiān)實(shí)的基礎(chǔ)。
