特輯 櫻坂46 最新創(chuàng)意作品

于2023年6月28日發(fā)售的櫻坂46的第六張單曲「Start over!」。

將會對本次使用了NeRF技術(shù)作成的CD封面
作品等進(jìn)行介紹。從制作了封面的創(chuàng)作者們的視角來解析「Start over!」。

?

Interview01 創(chuàng)意總監(jiān)/藝術(shù)總監(jiān)

第六張單曲「Start over!」×最新技術(shù)NeRF
櫻坂46以“向世界傳達(dá)的噪聲”掀起風(fēng)潮

最開始采訪的是在此次企劃擔(dān)任創(chuàng)意總監(jiān)的工藤直也、藝術(shù)總監(jiān)的柴谷麻以和辻岡翔這三人。

講述了他們提出運(yùn)用目前實(shí)例較少的最新技術(shù)NeRF的始末以及制作時的插曲。

——請先做一下自我介紹吧。
工藤：我是來自 dentsu zero 的工藤直也。這次我擔(dān)任了創(chuàng)意總監(jiān)一職。
柴谷：我是擔(dān)任藝術(shù)總監(jiān)的柴谷。我以前負(fù)責(zé)過乃木坂46的MV，以及欅坂46出道時在mechakari這個品牌的廣告。
辻岡：我是所屬于電通 2CRP 的藝術(shù)總監(jiān)辻岡。最近的話我負(fù)責(zé) 了King &Prince 的logo和封面設(shè)計(jì)，我想這可能是邀請我的原因吧。
——聽說這次是通過比稿來決定的。面對方案發(fā)表，你們都做了什么樣的準(zhǔn)備呢？
工藤：距離這次的發(fā)表我們沒有太多時間，所以是大家先集思廣益，確定好方向，然后再迅速地準(zhǔn)備材料來提出一個方案這樣的感覺。我們的方向有「不受過去欅坂46 留下的印象所禁錮，而是將當(dāng)下這個瞬間的櫻坂46鮮活地描繪出來」，以及 「活用組合在全球也評價(jià)頗高的優(yōu)勢，通過櫻坂46向世界展現(xiàn)“全新的日本”」這兩點(diǎn)。
柴谷：最開始的時候，我們需要從過往的MV與封面中調(diào)研出可行的方向性。以前開始，櫻坂46就在挑戰(zhàn)著普通的偶像不會去表現(xiàn)的東西，因?yàn)橐恢庇羞@樣的感覺，我們也就抱有自信地提出了這樣的方案，去使用具有挑戰(zhàn)性的全新表現(xiàn)手法。
辻岡：考慮到是否可以從過去作品中得到的好的啟發(fā)時，想到從「欅」變到「櫻」之后如何來展示嶄新的一面，于是有了新的點(diǎn)子。
工藤：使用最后提出的NeRF(Neural Radiance Fields /神經(jīng)渲染）這項(xiàng)技術(shù)去表現(xiàn)“引起噪音”的概念，感覺效果應(yīng)該會不錯，所以就以它為主進(jìn)行了提案。

說到NeRF…是使用AI將從不同角度拍攝的諸多照片生成為立體的現(xiàn)實(shí)空間的一項(xiàng)技術(shù)。這次將原本不會被留下的噪點(diǎn)和模糊，以令人印象深刻的方式故意留下，于是櫻坂46被描繪成在被掃描的涉谷街道中引起噪音的存在。

——可以讓我了解一下將NeRF加入提案中的契機(jī)嗎？

辻岡：實(shí)際上，以前在其他的項(xiàng)目中也提出過使用NeRF技術(shù)，那時并沒被采用。然而，我個人覺得NeRF的噪音般的效果看上去十分的帥氣，一直都希望有朝一日可以運(yùn)用到。這次想著「正好很符合這個概念！」便提出了這個創(chuàng)意。
柴谷：我也和共事者使用過幾次NeRF，原本的重點(diǎn)通常都是「如何漂亮地掃描出照片來」，但反之它也能表現(xiàn)出噪音這樣的效果，辻岡先生提出了這一點(diǎn)之后我也覺得很有趣，于是一起熱烈地討論了。不過最初只是決定給背景添加噪音效果而人物卻保持清晰，但這樣做好不好呢，有過這方面的討論，但多虧了以今野先生為首的櫻坂46的運(yùn)營方認(rèn)為這個挑戰(zhàn)很具有吸引力，才得以嘗試制作更具有激進(jìn)性的視覺圖。

?

通過故意保留通常不會殘留下的噪點(diǎn)，讓其作為印象深刻的存在變得顯著

——在正式?jīng)Q定的階段時，有沒有什么重新梳理過的地方？
柴谷：我對于使用噪音這個提案會不會被接受而感到過不安，但被告知了「不如說用噪音才更加有趣」后，想法就以如何才能將理想中的噪音創(chuàng)作出來為中心被重塑了。
工藤：櫻坂46同時有作為偶像團(tuán)體的一面，所以也有著成員們的臉及身體都必須要好好保留下來這方面的考量，這方面比較難找到平衡點(diǎn)呢。另外，雖然在方案展示時說了「要全部使用NeRF技術(shù)」，但對于時間和體力來說都很難實(shí)現(xiàn)（笑），我們也就討論了要不然CD內(nèi)里的內(nèi)容就用類似的模擬來做吧。不過，“Make Awesome Noise”是先作為共通概念被推行的，主要就是在從欅坂46時代以來一直被作為圣地的澀谷，以「她們作為震源，來掀起美倫美奐而又狂野不羈的噪音！」這樣的氛圍作為目標(biāo)了。中頁的內(nèi)容也是想達(dá)成從她們開始向世界之中激起波紋并喚起噪音這樣的表現(xiàn)。
柴谷：這次，16頁的小冊子有5種形態(tài)，并且每一種都需要使用不同的圖像。CD封面和封底是使用NeRF制作的圖片，中頁則是以晃動的水面和扭曲的巨大鏡子模擬出了相同的噪音效果。其實(shí)中頁也有一部分是使用了NeRF的，但為了盡可能讓人看不出哪些是實(shí)像哪些是虛像，在如何能做出與NeRF類似的噪音效果這點(diǎn)上下了功夫。
——有什么事情是在攝影途中變更的嗎？
柴谷：在拍攝第二天左右，有個關(guān)于「如果背景不選在這個地方可能會更好」這個話題的小插曲。這次拍攝的具體方法是，先掃描背景的照片，人物則單獨(dú)在攝影棚拍攝，然后再用同樣的方法把人物進(jìn)行掃描，最后和背景整合在一起。因?yàn)楸尘笆强梢杂檬謾C(jī)掃描的，所以在提出外景地的時候就已經(jīng)同時做了掃描，在完善末稿的階段，就使用了計(jì)劃攝影地拍攝的素材進(jìn)行了方案提出。雖然NeRF有著掃描一次就可以從360度各種角度觀察的好處，但它大多時候沒辦法很好地生成掃描重點(diǎn)以外的地方。不過，這次為了找新的更好的角度，回看時檢查了原定地點(diǎn)的反面一側(cè)，就在檢查的時候，沒生成好的地方偶然地具有與印象派繪畫相似的配色，于是就活用這一點(diǎn)改變了方案。
工藤：如果拍實(shí)景照片的話要找出一個新的拍攝角度是比較麻煩的，但用NeRF的話就可以從數(shù)據(jù)上直接完成查找。原本的危機(jī)就轉(zhuǎn)換成了能找到更好的角度的契機(jī)，這大概也是多虧使用了NeRF才有的。

——在制作過程中，有什么對參與制作的其他工作人員提出的要求嗎？?

柴谷：具體例子的話，有要求服裝方面要容易制作出噪點(diǎn)，像是版型能讓剪影輪廓看起來更大一些的服裝。 在我負(fù)責(zé)的『東京時裝周』里，參與的品牌VIVIANO的服裝十分符合本次的概念，就給造型師看了很多相關(guān)資料，想讓成員們在內(nèi)頁中擺出連指尖都能展現(xiàn)美的姿態(tài)，就拜托了造型師根據(jù)每一個成員做了不同的美甲。?

——如果在拍攝時有印象深刻的事情還請告訴我們。

工藤 ：（擔(dān)任了Center的） 藤吉夏鈴小姐，在其他成員進(jìn)行拍攝時也粘在顯示器前面讓我很印象很深。打聽了一下，聽說她對于藝術(shù)作品及其表達(dá)的講究似乎比其他人要強(qiáng)烈一倍。念白也是到她能接受為止無數(shù)次地重錄，見識到了她的這份克己，很有 “藝術(shù)家”的氣質(zhì)。?

柴谷：這次，對于三期生的成員們來說概念照拍攝也是第一次，所以有做一些詳細(xì)的說明，這方面可能也有一些辛苦的部分。

——順帶一提，像本作這樣使用了NeRF的拍攝，到完成大概需要花多少時間呢。?

辻岡：如果加上潤色修飾等修圖這些的話，最好是希望能有2～3周的時間左右呢。因?yàn)檫@次時間有些緊湊， 事先也有和修圖師談好要把噪音加到什么程度。在最開始的階段，因?yàn)橐呀?jīng)決定好正式要使用的背景了， 就只需要事先核對要給人物加多少噪音了。

?——這次擔(dān)任制作了CD封面和CM，靜止畫和視頻在處理方法上有什么不同嗎？?

工藤：原本是不準(zhǔn)備制作CM的，但只在靜止畫上運(yùn)用NeRF實(shí)在是太奢侈了，于是就也想試試能不能做個視 頻出來讓世間看到。在發(fā)表階段的現(xiàn)場正好有機(jī)會展示視頻，在提到「這個可以用在什么視頻里嗎？」的時候，有說了因?yàn)闄C(jī)會難得所以就做成CM吧。?

柴谷：NeRF原本是運(yùn)用在電影上的技術(shù)，所以常有被說「為什么只運(yùn)用在平面的圖像上」。所以慎重起見， 就掃描了所有畫面，在現(xiàn)場也展示了用這些做出的視頻，有條不紊地演示了（笑）。?

辻岡：是的，在選背景時也是以動態(tài)的形式進(jìn)行的，所以也是同時帶著“包含這些動起來的部分也很帥氣吧”這樣的意圖在展示（笑）。?

工藤：實(shí)際上，我們也是第一次使用NeRF來制作，也曾猶豫過預(yù)算上的問題，我們可以不受拘束地在制作視 頻的方案上走多遠(yuǎn)。但是和實(shí)景拍攝不一樣，因?yàn)橛幸呀?jīng)掃描好的數(shù)據(jù)，所以可以把視頻制作作為圖像制作的一種延伸，就這樣完成了它。?

柴谷：NeRF雖然是要自己在360度環(huán)繞的世界中配置相機(jī)的，但是根據(jù)鏡頭的更改以及所輸入不同的坐標(biāo)， 能毫無違和感地將在不同地方掃描的場景連接起來，這一點(diǎn)十分有趣。在涉谷路口的正中間，通過從后方 加入巨大的燈泡進(jìn)行打光，并在3D空間里鋪設(shè)好過山車般的虛擬軌道，像這樣之后進(jìn)行了攝影。雖說是把 使用NeRF掃描好的東西放在虛幻引擎里表現(xiàn)出來，但技術(shù)人員看了渲染成果之后，如果有像是「再移動一 點(diǎn)」或者「再調(diào)亮一點(diǎn)」這樣的指示，也能如同在實(shí)景拍攝發(fā)出指示一般地去相應(yīng)完成調(diào)整。

?

當(dāng)向世界中展示日本的藝人時，如果能像這樣活用新的技術(shù)將會令人欣喜。

?

——今后，有什么想使用NeRF挑戰(zhàn)的事情嗎？
工藤：通常會根據(jù)企劃的需求來決定啟用無人機(jī)或者嘗試讓AI生成繪畫，但是這次是根據(jù)NeRF這項(xiàng)技術(shù)開始考慮能怎么呈現(xiàn)效果，并且是從概念開始倒推，從“掀起噪音”這樣的原概念開始進(jìn)行發(fā)散。從要運(yùn)用的技術(shù)開始構(gòu)思，通過這次也意識到了可以就此拓展各種方案及呈現(xiàn)方法的思路，今后也想在其他企劃中積極地運(yùn)用和嘗試。
柴谷：我在學(xué)生時代經(jīng)常優(yōu)先思考想要呈現(xiàn)的表現(xiàn)，之后再考慮附加一個概念上去，但在工作時則是先考慮概念的場合比較多。重新感受到了像這次一樣，以先接觸NeRF技術(shù)為契機(jī)，之后再去考慮概念的實(shí)行方法也很重要。這次正因?yàn)槲覀儾⒉皇亲鳛榧夹g(shù)擔(dān)當(dāng)，從這樣的視角才能發(fā)現(xiàn)「噪音，好帥??！」這種與通常不一樣的使用方法，我認(rèn)為就是像這樣才能和有趣的表現(xiàn)牽連起來。在此之外也想各方面都考慮一下，活用新技術(shù)，以及是否能做出有意思的表現(xiàn)呢等等。
辻岡：如果不知道NeRF，就不會誕生出這次的企劃。所以從今以后也不能僅限于NeRF，要時常汲取各類新的信息。就只論NeRF而言，這次是以人物為中心制作的，但技術(shù)本身的特點(diǎn)是可以生成3D空間，有沒有能夠更加活用所生成的空間的方法呢，所以今后也想尋找一些新的使用手法。
工藤：藝人團(tuán)體的MV和最新技術(shù)的相性非常好，事實(shí)上這次合作也引起了很大的反響。我想有很多藝人側(cè)對于這種表達(dá)方式上側(cè)重于R&D（研發(fā)）的方向還不是很熟悉，我們這邊從今往后也想要多多提出這樣的方案呢。我認(rèn)為今后也十分需要「藝人×使用新技術(shù)的表現(xiàn)方法」這樣的合作，當(dāng)向世界中展示日本的藝人時，如果能像這樣活用新的技術(shù)將會令人欣喜。

工藤直也 CM策劃/視覺傳達(dá)設(shè)計(jì)師。為Silver Tetsuya設(shè)計(jì)了企劃「親生孫子」而被熟知，85歲的Silver Tetsuya身著孫子的衣服而在一夜之間被世界矚目。?

柴谷麻以 藝術(shù)督導(dǎo)/設(shè)計(jì)師。從廣告到電視節(jié)目等廣泛領(lǐng)域的美術(shù)指導(dǎo)都在她的擅長范圍內(nèi)。乃木坂46中的unit炸雞姐妹的制作人。所屬于太陽電腦。?

辻岡翔 藝術(shù)督導(dǎo)/設(shè)計(jì)師。擅長以廣告視覺方面為中心，包含品牌營銷，CI（企業(yè)形象），包裝設(shè)計(jì)等寬泛領(lǐng)域的美術(shù)指導(dǎo)。

?

Interview02 技術(shù)督導(dǎo)

?

通過Luma AI與虛幻引擎有效率地運(yùn)用NeRF

提起「Start over！」的藝術(shù)集體照、封面藝術(shù)和預(yù)告視頻的創(chuàng)作過程，就要說到不可或缺的NeRF。
是如何在「Start over！」中活用這項(xiàng)最新技術(shù)的，向技術(shù)督導(dǎo)村田洋敏先生進(jìn)行了采訪。
?

——聽說NeRF在「Start over！」發(fā)表時，還是一種實(shí)例很少的表現(xiàn)方法
村田：原本，NeRF是一種利用從各種角度所拍攝的對象物的照片或視頻，后使用AI生成任意自由視點(diǎn)的圖像的技術(shù)。在3D環(huán)境中不管從360度哪個視點(diǎn)出發(fā)都能看到對象物，讓大膽的拍攝角度和手法也成為了可能。
「Start over！」與NeRF原本的目標(biāo)方向不同，故意讓AI生成的故障噪音效果也成為了創(chuàng)意要素的一部分。

——創(chuàng)作的流程是？?

村田：大體上來說，是先拍攝能成為原素材的照片與視頻，再導(dǎo)入進(jìn)3D捕捉軟件Luma AI來生成3D數(shù)據(jù)。然后將這些輸入進(jìn)虛幻引擎，再來創(chuàng)造出3D空間。分別拍攝作為背景的涉谷街道與櫻坂46的成員，經(jīng) Luma AI中生成后，在虛幻引擎中完成合成。 通過Luma AI，可以更輕松地在短時間內(nèi)生成3D模型，也讓NeRF的使用變得更加便利。另外，在接到這次 委托的時點(diǎn)上，正好Luma Ai的虛幻引擎插件也被發(fā)布了，也就能更加高效地推進(jìn)作業(yè)了。?

——作出故障干擾（噪音）效果的步驟是？?

村田：在構(gòu)建清晰的3D數(shù)據(jù)時，通常會讓AI學(xué)習(xí)從多個視點(diǎn)拍攝的照片與視頻，這次反而是只讓它讀取從有限的幾個視點(diǎn)拍攝的數(shù)據(jù)。

打比方來說，如果只使用從地面視角拍攝的照片與視頻進(jìn)行生成，在3D空間中如果向那些沒有被拍攝到的角度部署拍攝機(jī)位，AI則無法完全地去補(bǔ)全那些地方，就會產(chǎn)生出如抽象畫般的噪音效果。噪音的程度，是與藝術(shù)總監(jiān)一邊觀察虛幻引擎中的畫面，一邊尋找能產(chǎn)生恰到好處的噪音效果的機(jī)位視角，這樣來決定的。
由于噪音效果的生成是十分偶然且無法完全控制的，我們經(jīng)過反復(fù)的試驗(yàn)掌握了竅門后才去進(jìn)行了素材攝影。背景的拍攝是在涉谷的街道和大樓的樓頂進(jìn)行的。成員的拍攝則是在白色幕布下進(jìn)行的，各個站位隊(duì)形分別靜止不動約1分鐘，工作人員在她們周圍一邊繞著圈一邊使用iPhone拍攝視頻這樣進(jìn)行的。
以NeRF生成的噪音效果為本，修圖師進(jìn)行調(diào)整，再分別將其整合成為用于主視覺圖、封面、以及歌詞本的人像圖。

通過進(jìn)行反復(fù)多次的推敲，探尋“恰到好處的噪音”

——最初使用NeRF只是計(jì)劃將其作為表現(xiàn)平面上的噪音的手段，預(yù)告視頻是之后才有的提議對吧。
村田：因?yàn)镹eRF原本的魅力是在視頻映像中體現(xiàn)出自由自在的機(jī)位和攝影手法，所以提議通過了真是太好了。NeRF本身就是一種很嶄新的技術(shù)，這次更進(jìn)一步，在與原本截然不同的意圖下使用了，因此制作過程中也有很多坎坷。我很在意發(fā)表之后粉絲們的反應(yīng)，從社交媒體上的反應(yīng)來看似乎是積極的意見占了多數(shù)。
這次通過運(yùn)用最新的技術(shù)NeRF，也包含了對櫻坂46來說「今后也會去傳達(dá)新事物」這樣的訊息，基于櫻坂46迄今為止所累積的藝術(shù)創(chuàng)作等，我想粉絲們也會有更深刻的理解。
十分有幸可以參與這個具有挑戰(zhàn)性的企劃，讓我得到了很寶貴的經(jīng)驗(yàn)。

村田洋敏 Think&Craft 技術(shù)督導(dǎo)/工程師。側(cè)重于使用科技技術(shù)的影像演出/裝置藝術(shù)/live演出等

夏之風(fēng)鈴字幕組

翻譯：rainnie

校對：小綠?