2023年5月26日，上海市科學技術獎勵大會隆重召開，由上海交通大學牽頭，中國科學院深圳先進技術研究院、咪咕視訊科技有限公司、華為技術有限公司、上海云視科技股份有限公司、上海人工智能創(chuàng)新中心、上海媒智科技有限公司、上海數(shù)字電視國家工程研究中心有限公司共同完成的“真實世界視頻智能增強技術及國產化應用”項目榮獲上海市技術發(fā)明一等獎。

隨著人們對圖片、視頻的質量追求越來越高，超高清沉浸式體驗成為視頻媒體發(fā)展的重要趨勢。雖然超高清沉浸式視頻的全鏈路技術已基本成熟，但由于成本和效率等原因，原生超高清內容生產能力已難以匹配終端市場的發(fā)展，而歷史累積的海量視頻資源傳承與用戶對極致體驗追求之間的矛盾也越來越凸顯。

為提升超高清沉浸式視頻的制作效率、維護歷史經典的生命力，“真實世界視頻智能增強技術及國產化應用”項目針對高效智能視頻增強技術和系統(tǒng)發(fā)起攻關，取得一系列創(chuàng)新成果。真實世界視頻內容和退化的多樣性對智能視頻增強技術的泛化應用帶來挑戰(zhàn)。

為此，該項目從高階退化仿真、復雜運動建模、場景自適應、深度感知等方面突破系列技術瓶頸，實現(xiàn)了對真實世界跨年代、多類型、多場景視頻內容的自動適配。在昇騰AI處理器與異構計算架構CANN的加持下，研制了全流程自主可控的高效AI視頻增強平臺，并同步建立了視頻增強的軟硬件自主生態(tài)，有效支撐了超高清產業(yè)的蓬勃發(fā)展。

先驗自適應視頻超分辨率技術

視頻超分辨率技術通過人工智能深度學習方法將低分辨率視頻重建成高分辨率視頻。超分辨率算法需要融合視頻前后幀上下文信息，經過復雜的數(shù)據(jù)提取和計算， 獲取與目標幀最相關的信息加以利用。在視頻超分過程中，先驗與真實數(shù)據(jù)的匹配程度會大大影響超分效果，該項目采用退化先驗的技術，解決了噪聲放大、圖像紋理雜亂失真的問題；通過語義分割嵌入?yún)^(qū)域的語義先驗，實現(xiàn)內容自適應個性化超分。先驗自適應超分辨率技術的應用，大大提升了視覺效果。

昇騰AI基礎軟硬件平臺原動力注入

除了先驗自適應視頻超分辨技術，該項目還解決了視頻處理算力需求巨大，需要高效自主可產業(yè)化推廣計算架構的關鍵性問題?；跁N騰AI基礎軟硬件平臺，從頂層算法到底層算子垂直優(yōu)化，通過多算子自動流水技術以及算子融合技術，大大提升了超分辨率算法的執(zhí)行效率，視頻畫面質量顯著提升。

基于昇騰AI的視頻增強平臺，已成功應用于歷史視頻的超高清修復，為建黨百年慶典和一大紀念館展覽等重大文化工程提供了支持，多地人工智能中心也陸續(xù)上線相關服務。

昇騰AI基礎軟硬件平臺的軟硬協(xié)同優(yōu)化能力，為視頻增強技術的應用及生態(tài)發(fā)展奠定了堅實的基礎，通過AI高速計算原動力的注入，繁榮超高清產業(yè)的生態(tài)發(fā)展。