最近半個(gè)月vivo可謂是“火力全開(kāi)”，一口氣接連舉辦了vivo影像戰(zhàn)略溝通會(huì)、2022 vivo開(kāi)發(fā)者大會(huì)與vivo雙芯x影像溝通會(huì)三場(chǎng)技術(shù)峰會(huì)。顯然vivo正以按捺不住的熱情為vivo X系列十周年之作，年度重磅旗艦vivo X90系列的正式降臨陸續(xù)鋪墊——實(shí)際上以傳播的角度來(lái)看，以這3場(chǎng)活動(dòng)可觀的信息密度而言也確實(shí)有必要提前分解vivo X90系列發(fā)布活動(dòng)的外圍內(nèi)容以便聚焦于產(chǎn)品之上——前兩場(chǎng)活動(dòng)分別闡釋了vivo未來(lái)影像戰(zhàn)略+下一代影像技術(shù)預(yù)告、下一代軟件系統(tǒng)OriginOS 3的革新變化這類(lèi)偏方向與功能性的內(nèi)容，相較之下今天的vivo雙芯x影像溝通會(huì)應(yīng)該會(huì)更令消費(fèi)者興奮，vivo幾乎毫無(wú)保留地為觀眾展現(xiàn)了vivo X90系列的核心所在，這便是vivo全新自研芯片 V2與下一代雙芯影像，這也讓這場(chǎng)溝通會(huì)內(nèi)容的“硬核”達(dá)到了一個(gè)新的高度。

這其中既有vivo 自研芯片V2的技術(shù)架構(gòu)與三大突破性設(shè)計(jì)，也有vivo如何實(shí)現(xiàn)下一代雙芯系統(tǒng)的創(chuàng)新與改善，還揭示基于全新V2芯片vivo X90系列可以帶來(lái)何種程度的影像升級(jí)，這其中的細(xì)節(jié)更是數(shù)不勝數(shù)。當(dāng)然我并不想照本宣科復(fù)述一遍發(fā)布會(huì)內(nèi)容，但通過(guò)解讀這些“硬核”向的內(nèi)容，你確實(shí)可以大致描繪出一個(gè)vivo X90系列的基本輪廓——一個(gè)遠(yuǎn)遠(yuǎn)超出用戶預(yù)期，刷新了vivo歷代產(chǎn)品頂峰高度的未來(lái)剪影。

自研芯片V2加持 鑄造vivo史上最強(qiáng)旗艦

顯而易見(jiàn)，作為vivo全新自研芯片V2無(wú)疑是這場(chǎng)溝通會(huì)的主角，它既是下一代“雙芯旗艦”的核“芯”之一，也是下一代“雙芯影像”的最基礎(chǔ)也最重要的硬件基石。對(duì)此vivo自然也是傾盡全力，vivo并未簡(jiǎn)單地提升制程規(guī)模加入更多算法交差了事，反而是對(duì)外掛ISP芯片這種目前較為成熟的自研芯片應(yīng)用形式進(jìn)行了深度思考。簡(jiǎn)單來(lái)講，vivo V1/V1+自研芯片通過(guò)將影像算法直接硬化在芯片上，很好地解決了以往平臺(tái)SoC專注于通用計(jì)算，專用算力不足能耗不佳的問(wèn)題，具體到用戶體驗(yàn)上就是拍照更快、效果更好、更省電、發(fā)熱更低，包括在夜景取景等直接影響用戶拍照體驗(yàn)的細(xì)節(jié)上，也能提供優(yōu)更好的用戶感知。但同時(shí)vivo也發(fā)覺(jué)自己摸到了傳統(tǒng)外掛ISP芯片的天花板，受限于V系列芯片與平臺(tái)SoC架構(gòu)指令集不同（ASIC/ARM），兩者可以分別處理大密度AI運(yùn)算或復(fù)雜小模型運(yùn)算，但無(wú)法協(xié)同互補(bǔ)，即便強(qiáng)行分工也因?yàn)閷?shí)際上的“兩地分居”會(huì)導(dǎo)致延遲增加，無(wú)法滿足視頻拍攝對(duì)每幀畫(huà)面處理的時(shí)延要求。那有沒(méi)有一種可能，可以將兩者的能力合二為一，實(shí)現(xiàn)真正意義上的異構(gòu)多芯片計(jì)算呢？

vivo給出了肯定的回答——全新的“雙芯影像”的思路，不應(yīng)該是大家各自為政埋頭苦干，而應(yīng)該是有機(jī)協(xié)同的 “1+1＞2”。

為了實(shí)現(xiàn)雙芯互補(bǔ)，vivo開(kāi)創(chuàng)性地為V2帶來(lái)了AI-ISP架構(gòu)，這其中實(shí)現(xiàn)了3項(xiàng)突破，分別是解決了不同架構(gòu)芯片之間互聯(lián)協(xié)作并將V2融入平臺(tái)SoC-NPU流水線的FIT雙芯互聯(lián)技術(shù)、釋放平臺(tái)算力潛力的近存DLA技術(shù)、比DDR外存更快速節(jié)能的片上SRAM。簡(jiǎn)單翻譯一下，vivo將以往一般只由一顆芯片負(fù)責(zé)的大型復(fù)雜AI算法拆分為算力要求高吞吐密集的“大問(wèn)題”與復(fù)雜但算力需求低的“小難題”，然后通過(guò)SoC-NPU智能分配給V2與自身運(yùn)算各自擅長(zhǎng)的部分，其中V2的計(jì)算的結(jié)果可以通過(guò)能在1/100秒內(nèi)完成雙芯同步的FIT雙芯互聯(lián)技術(shù)實(shí)時(shí)嵌入到SoC-NPU的流水線中，實(shí)現(xiàn)了遠(yuǎn)超一顆芯片的運(yùn)算效果與接近的時(shí)延水平；而為了滿足AI運(yùn)算的龐大算力需求，V2加入了近存DLA（深度學(xué)習(xí)加速器）與配套的容量提升40%能效提升200%片上SRAM（可以理解為桌面CPU的系統(tǒng)緩存Cache），帶來(lái)了2-3倍的8bit算力密度、4-6倍的10bit算力密度，這也是下文中vivo之所能能實(shí)現(xiàn)長(zhǎng)焦、夜拍、抓拍新突破的根本原因所在。

實(shí)際上深入干涉平臺(tái)SoC-NPU的運(yùn)作方式，正是vivo歷經(jīng)2代雙芯旗艦積累磨合后對(duì)雙芯中另一顆芯片掌控更為得心應(yīng)手的佐證，所以此次首發(fā)天璣9200旗艦平臺(tái)，vivo頗有底氣地表示做到了雙芯“聯(lián)合研發(fā)”而不僅僅是“聯(lián)合調(diào)?！绷?。這也讓vivo可以在天璣9200本身過(guò)硬素質(zhì)之外（10% CPU/32% GPU性能提升，20%/41%功耗優(yōu)化），帶來(lái)了諸如不公平調(diào)度、芯片護(hù)眼、AI機(jī)場(chǎng)模式等解決用戶具體場(chǎng)景痛點(diǎn)多項(xiàng)創(chuàng)新。很明顯，無(wú)論是V2、天璣9200還是諸多新功能，都將成為下一代旗艦vivo X90系列優(yōu)秀體驗(yàn)的最佳注腳之一。

與蔡司攜手 用AI突破長(zhǎng)焦畫(huà)質(zhì)極限

作為推出首部開(kāi)售的潛望式長(zhǎng)焦鏡頭的5G手機(jī)的品牌，vivo在移動(dòng)影像全焦段上的耕耘與積累自不必說(shuō)，即便是近年多攝退潮，許多產(chǎn)品乃至旗艦紛紛舍棄長(zhǎng)焦焦段的日子里，vivo也一直堅(jiān)持在旗艦產(chǎn)品序列中保留下了完整且不湊數(shù)的超廣角、廣角、人像、長(zhǎng)焦的全焦段規(guī)格——雖然在 vivo X80 Pro 上，800萬(wàn)像素的5X 潛望式長(zhǎng)焦硬件規(guī)格并不算高。但從去年的 X70 Pro+ 開(kāi)始，借助 SuperRAW 這樣的 RAW 域多幀”強(qiáng)力算法“支撐，這顆硬件素質(zhì)其實(shí)不高的 800 萬(wàn)像素 5X 長(zhǎng)焦在銳度、解析力、噪點(diǎn)控制上基本算上做到了 800萬(wàn) 5X 長(zhǎng)焦的“天花板水平”。但話說(shuō)回來(lái)，長(zhǎng)焦焦段之所以會(huì)逐漸被品牌與用戶忽略也是有原因的——拍不清和拍不穩(wěn)是困擾用戶使用長(zhǎng)焦最大的2個(gè)問(wèn)題?？剂康绞謾C(jī)體積所限，即使廠商們都在非常努力的提升長(zhǎng)焦傳感器和模組的硬件規(guī)格，也沒(méi)有辦法做到和主攝一樣的“平起平坐”，更別提成像素質(zhì)本身了——況且，即使對(duì)相機(jī)產(chǎn)品而言，5X以上的倍率下往往也需要輔助腳架才能實(shí)現(xiàn)較高的成片率，更何況傳感器尺寸與防抖設(shè)計(jì)嚴(yán)重受限手機(jī)呢？

但手機(jī)畢竟是有著強(qiáng)大算力的“計(jì)算設(shè)備”，長(zhǎng)焦硬件的桎梏，繼續(xù)由計(jì)算來(lái)補(bǔ)。這一次的V2，將另一個(gè)重點(diǎn)放在了手機(jī)影像的老大難問(wèn)題——長(zhǎng)焦成像素質(zhì)的改善上。

在V2自研芯片的加持下，vivo終于有機(jī)會(huì)解決長(zhǎng)久以來(lái)困擾手機(jī)長(zhǎng)焦體驗(yàn)的2個(gè)問(wèn)題，這便是能突破光學(xué)極限實(shí)現(xiàn)超清長(zhǎng)焦的“超清畫(huà)質(zhì)引擎”與“Ultra Zoom EIS技術(shù)”。先聊聊超清畫(huà)質(zhì)引擎，這本質(zhì)上是“腦補(bǔ)”，通過(guò)算法來(lái)還原長(zhǎng)焦影像在光路中損失的畫(huà)面細(xì)節(jié)。先別急著對(duì)“腦補(bǔ)”二字嗤之以鼻，因?yàn)樨?fù)責(zé)“腦補(bǔ)”的不是別人，正是百年光學(xué)巨擘卡爾蔡司。此次vivo攜手蔡司聯(lián)合研發(fā)了一種全新計(jì)算光學(xué)算法——蔡司光學(xué)超分算法，為此vivo從底層改寫(xiě)了ISP圖像處理鏈路，將圖像處理AI化，將超清畫(huà)質(zhì)引擎包含其中。蔡司光學(xué)超分算法能根據(jù)每個(gè)手機(jī)的模組特性做建模分析，通過(guò)逆運(yùn)算動(dòng)態(tài)調(diào)整，補(bǔ)償光學(xué)信息，結(jié)合Denoise降噪、Demosaic細(xì)節(jié)恢復(fù)、Deblur去模糊三大模塊，可以提高5x以上焦段35%的解析力表現(xiàn)。

至于Ultra Zoom EIS則是一套綜合的長(zhǎng)焦防抖技術(shù)，包含了可以檢測(cè)抖動(dòng)的IMU慣性測(cè)量單元（即手機(jī)導(dǎo)航經(jīng)常會(huì)用到的慣性傳感器），OIS光學(xué)防抖與EIS電子防抖，原理很簡(jiǎn)單，即通過(guò)IMU檢測(cè)手機(jī)抖動(dòng)，根據(jù)抖動(dòng)結(jié)果讓OIS/EIS進(jìn)行相應(yīng)抵消，物理/電子防抖雙保險(xiǎn)，效果也相當(dāng)不俗，vivo表示Ultra Zoom EIS可以抵消20x以上倍率的抖動(dòng)，即便手持也可穩(wěn)定運(yùn)鏡，而且不僅于此，vivo還預(yù)告vivo X90系列長(zhǎng)焦將帶來(lái)硬件升級(jí)，搭配超清畫(huà)質(zhì)引擎，vivo很有可能成為第一個(gè)實(shí)用化手機(jī)超長(zhǎng)焦拍攝的品牌，真正實(shí)現(xiàn)天涯咫尺提手就拍的拍攝體驗(yàn)。

夜拍抓拍大升級(jí) 開(kāi)創(chuàng)移動(dòng)影像“芯”未來(lái)

既然可以憑借V2芯片改寫(xiě)ISP圖像處理鏈路，就相當(dāng)于vivo獲得了手機(jī)圖像處理過(guò)程的“root權(quán)限”。憑借著這項(xiàng)獨(dú)門(mén)絕技，vivo得以對(duì)手機(jī)抓拍進(jìn)行優(yōu)化，提升了圖像傳感器的啟動(dòng)速度，將原本170-300ms的快門(mén)延遲降低至30ms內(nèi)，做到了接近相機(jī)水平的“零延時(shí)”抓拍。在快門(mén)延遲優(yōu)化的基礎(chǔ)上，vivo著重改善了運(yùn)動(dòng)抓拍與暗光抓拍效果，為vivo X90系列帶來(lái)了夜拍/運(yùn)動(dòng)抓拍大升級(jí)。

在早前的 X 系列產(chǎn)品中，借助微云臺(tái)和防抖能力和抓拍算法的合力，vivo 引入了“抓拍模式”，解決了不少用戶平日抓拍孩子、寵物等“活躍目標(biāo)”的日常拍攝問(wèn)題，頗受好評(píng)。而這一次，vivo帶來(lái)了新一代運(yùn)動(dòng)測(cè)量與跳躍檢測(cè)算法，支持肢體運(yùn)動(dòng)強(qiáng)度檢測(cè)+跟蹤四肢小運(yùn)動(dòng)，準(zhǔn)確率提升10%，此外還有物體檢測(cè)盒萬(wàn)物追蹤算法、高頻軌跡偵測(cè)對(duì)焦算法，在這些算法的加持下，可以通過(guò)深度學(xué)習(xí)讓手機(jī)“學(xué)會(huì)”預(yù)判畫(huà)面走向并及時(shí)鎖定畫(huà)面，實(shí)現(xiàn)了運(yùn)動(dòng)畫(huà)面定格能力提升58%的效果。這對(duì)于日常使用中經(jīng)常需要拍攝多動(dòng)人類(lèi)幼崽的父母而言，無(wú)疑是一個(gè)更為受用的新特性。

而在影響抓拍問(wèn)題頗大的另一個(gè)因素傳感器上，vivo 也試圖通過(guò)“軟硬兼施”的方式令其在抓拍場(chǎng)景上得到了體驗(yàn)提升，簡(jiǎn)單的說(shuō)就是可以實(shí)現(xiàn)盡可能短的曝光時(shí)間以減少拖影問(wèn)題——同樣的進(jìn)光量，如果曝光時(shí)間短了，那就需要傳感器有著更高 ISO 的成像能力以及在高 ISO 指標(biāo)下更好的成像素質(zhì)。為此vivo聯(lián)合傳感器廠商，將傳感器可實(shí)現(xiàn)的ISO拍攝能力從16000直接提升至102400，大幅提高了暗光場(chǎng)景下的感光能力，同時(shí)vivo還不可思議地做到了在如此高的感光度下，畫(huà)面細(xì)節(jié)提升17.3%，畫(huà)面噪點(diǎn)降低46%的效果——而這與vivo疊加多個(gè)算法不無(wú)關(guān)系，V2確實(shí)為vivo在影像上的設(shè)計(jì)提供了廣闊的揮灑空間。在要求更嚴(yán)苛的暗光運(yùn)動(dòng)場(chǎng)景，vivo還帶來(lái)了自研的RawEnhance2.0算法，可以采用自適應(yīng)多幀融合技術(shù)，一次快門(mén)生成多幀運(yùn)動(dòng)畫(huà)面，把每一幀有用信息疊加在一起，讓暗光運(yùn)動(dòng)場(chǎng)景的“拖影”成為“過(guò)去時(shí)”。

經(jīng)過(guò)V1 / V1+的成功實(shí)踐，vivo對(duì)于“雙芯”的理解與運(yùn)用在vivo X70/80系列的基礎(chǔ)上實(shí)現(xiàn)了質(zhì)的飛躍，V2自研芯片不再是平臺(tái)SoC在運(yùn)行特定算法的全職“輔助”，反而將自身職能延伸至SoC-ISP/NPU中，做到了V2與天璣9200在任務(wù)分配、算力提升、能耗優(yōu)化上的有機(jī)協(xié)作與統(tǒng)一，實(shí)現(xiàn)了1+1＞2的效果。而基于V2深入系統(tǒng)與圖像鏈條底層的計(jì)算能力，vivo終于可以按照自己的方式著手改善與優(yōu)化成像效果，疊加算法也無(wú)需束手束腳，帶來(lái)了超清畫(huà)質(zhì)引擎、提升快門(mén)延遲、運(yùn)動(dòng)測(cè)量與跳躍檢測(cè)算法等諸多創(chuàng)新。而在影像硬件上，也有著全新長(zhǎng)焦升級(jí)、102400超高ISO圖像傳感器等一眾讓人興奮的消息。

所以，對(duì)于很多人翹首以待的 X90 系列而言，它即是一部 vivo 深入前端算法算力、和更多供應(yīng)鏈廠商精誠(chéng)合作、聯(lián)合研發(fā)的“雙芯旗艦”，也是一部在超清長(zhǎng)焦、運(yùn)動(dòng)抓拍、暗光抓拍上實(shí)現(xiàn)突破的雙芯影像旗艦，更是一部史上最強(qiáng)的vivo X系列旗艦。這也是 vivo 在“雙芯”道路上的新階段——但這遠(yuǎn)非“雙芯”的終點(diǎn)。聯(lián)想到前幾天我在vivo開(kāi)發(fā)者大會(huì)參加vivo副總裁周?chē)鷮ＴL時(shí)，周?chē)壬虼蠹彝嘎兜膙ivo系統(tǒng)級(jí)定制芯片計(jì)劃，可以篤定的說(shuō)，vivo正昂首闊步的邁在自研芯片戰(zhàn)略與雙芯影像的精進(jìn)之路上。而在接下來(lái)的日子里，我們也能在這條精進(jìn)之路，看見(jiàn)更多綺麗的“新風(fēng)景”。