120fps視頻工作流的一些探索
我一直有明顯的感覺,60fps的視頻比30fps的視頻順滑很多,而且跟快門角度沒有關系。30fps不論什么快門角度看起來都明顯沒有60fps順滑,只是360度快門看起來糊一點,小角度快門清楚一點但是一頓一頓的。雖然確定60fps比30fps好很多,但一直猶豫有沒有必要拍120fps。今天終于做了個雙盲實驗。我拍了一個8k 120fps的視頻,然后渲染成2k 120fps和60fps(不升格,就先加速成60fps后以60fps放映),在iphone的120Hz小屏幕上展示,想看看就算不摳細節(jié),只看運動整體,能不能分辨出來60fps和120fps。結果意外地發(fā)現(xiàn)百發(fā)百中——在數(shù)次實驗中,我可以以100%的準確率分辨120fps和60fps的視頻??磥砝^續(xù)增加fps真的有用,而且比我想象的更可感。
但是,當我實際開始剪輯拍攝好的120fps視頻時,遇到了很多困難。
1. 拍攝:無論是佳能R5的4K 120fps還是迅猛龍的8K 120fps,拍攝出來的視頻的基準幀率或者說播放的幀率并不是120,而是30或者60。因此,如果他們直接導入剪輯軟件,會呈現(xiàn)出一種升格的效果,或者說看起來像慢動作一樣??赡苁菫榱吮苊馍裨斐傻囊纛l的扭曲,這些視頻文件的音頻都是分開錄制的,會有一個額外的wav文件,而不是像其他幀率的拍攝,音頻跟視頻是完全同步的。對于迅猛龍來說,音頻和視頻甚至不一樣長(音頻會長兩秒),需要進行額外的裁剪工作。
2. 剪輯:因為音頻和視頻的速度不一樣,視頻有升格效果,但音頻沒有,所以不能直接對視頻剪輯,否則音頻和視頻會失去同步。如果想要得到正常的效果,需要先把音頻和視頻都拖入同一個timeline,然后加速視頻,再剪掉音頻多出的最后一節(jié),這樣音視頻就實現(xiàn)了同步。然后再在timeline里進行具體的剪輯。但是,因為整個音視頻都在timeline里,所以很多剪輯工具也無法使用,整個步驟非常繁瑣。
3. 上屏預覽:對于Mac用戶來說,這可能不是一個大問題,但對于Windows用戶來說,由于色彩管理的復雜性,如果不使用額外的硬件,在Windows上剪輯HDR視頻就無法實現(xiàn)所見即所得。一種經濟實惠的解決方案是使用一個名為Blackmagic Remote Monitor的應用程序,它可以將iPhone或iPad作為一個額外的監(jiān)視器,用于渲染HDR視頻調色后的效果。但是,這個應用程序最高只支持60fps,當對120fps的視頻進行調色時,它會報錯并無法預覽。因此,當我們在Windows上對120fps的HDR視頻進行調色時,沒有辦法實現(xiàn)所見即所得。
4. 播放:目前,120Hz的顯示設備還很少見,主要集中在電競領域。但是,這些電競領域的顯示器通常只強調高刷新率和低延遲,并不特別強調動態(tài)范圍和高分辨率等特性。尤其是8K 120fps 10位HDR的顯示設備幾乎沒有。因此,即使我們拍攝了這些視頻,也只能在有限的設備上以更低的分辨率進行觀看。
? ?
經過一段時間的摸索,我找到了一種使用達芬奇進行剪輯和調色的方法。雖然這個方法有些繁瑣,但是浪費的時間相對有限,我認為這是一個相對較好的工作流程(有時間我可以拍個演示視頻)。
對于拍攝和播放,我們基本上做不了什么,只能使用相機的現(xiàn)有功能將音頻和視頻分開存儲。
1. 剪輯:在剪輯時,我們可以將clip的fps設置為120,這樣在后續(xù)操作中,達芬奇會自動處理視頻的長度,無需我們手動加速。然后,我們可以選擇對應的音頻和視頻,選擇“音視頻同步”,使用timecode進行同步,這會生成一個新的clip。這個clip是一個同步后的多視角視頻,其中包含兩條音軌。一條音軌是相機拍攝的視頻中自帶的音軌,也就是沒有聲音的音軌。另一條音軌是額外生成的一個wav文件。下面我們就可以使用這個新生成的clip進行正常的剪輯。但是,在默認情況下,它使用的是靜音的音軌。所以,在剪輯完成后,我們還需要在timeline中解鎖音視頻,然后將音頻切換到視角2,也就是wev文件。
2. 上屏:在上屏方面,我們可以先創(chuàng)建一個60fps的timeline進行正常剪輯。由于clip的fps已經設置為正確的120,所以當我們將clip拖入時,時間是正確的,無需加速,達芬奇會自動進行抽幀或混合。這時,我們就可以正常使用blackmagic remote monitor這個app進行上屏調色。在調色完成后,我們可以創(chuàng)建一個120fps的timeline,將60fps的timeline的所有內容全選復制粘貼過去,然后進行正常的120fps的渲染。
??
總的來說,我覺得在支持120fps的設備下,120fps相比于60fps的改進是非常明顯的,這種改進比4K到8K的改進更為顯著。然而,無論是Windows還是Mac,幾乎沒有支持120fps+廣色域+高分辨率+高動態(tài)+高色準的屏幕。這可能主要是由于DP等接口的傳輸速率限制?,F(xiàn)在,我們只能先進行拍攝和剪輯,等待技術的進步戰(zhàn)未來了。