9月22日晚,榮耀召開了“Magic3系列影像技術釋出會”。釋出會上,趙明介紹了Magic3系列手機創新的“多主攝融合計算攝影”技術。
我來用幾分鐘的時間,結合我個人的理解,給大家介紹一下這個技術 到底是怎麼回事,可能比看釋出會來的更直觀!
榮耀Magic3至臻版攝像頭及感測器
首先說一下“多主攝”的概念。以榮耀Magic3至臻版為例,總共有6個攝像頭和感測器。從廣角、超廣角和潛望式攝像頭,可以獲得影象的RGB彩色資料,從黑白攝像頭可以獲得灰階資料,從多光譜色溫感測器可以獲取光譜資料,從dTOF感測器可以獲得深度資料。而且Magic3的每一個鏡頭都達到了主攝級別。
傳統手機相機只能根據使用場景,選擇其中一個鏡頭感測器進行影象拍攝。而此次榮耀釋出的新技術,可以同時開啟多個鏡頭和感測器,獲取多維的資料,再透過演算法和人工智慧,合成出增強的影象。這個就是榮耀所謂的“多主攝融合計算攝影”。
而趙明所說的“多主攝融合計算攝影”,我們可以分成“多主攝融合”+“計算攝影”兩部分來看。
“多主攝融合”,看這張ppt就可以。根據我的理解,用直白一點的語言解釋,就是根據拍攝所使用的的焦段,從廣角到長焦,在不同焦段採用不同的鏡頭組合,獲得更好的拍攝效果。
具體來說,分成以下4個焦段:
Fusion2(彩色+超廣角)
在0.8x-1x焦段(Fusion2),使用主廣角鏡頭加超廣角鏡頭,可使畫面中心區域清晰度提升80%;Fusion1(彩色+黑白)
1x焦段(Fusion1),使用主廣角鏡頭加黑白鏡頭,可使畫面整體清晰度提升18%,進光量提升13%。Fusion3(彩色+長焦)Fusion3(彩色+長焦)
2x-3.5x焦段(Fusion3),使用主廣角鏡頭加潛望式長焦鏡頭,在54-94mm焦段,可以提升畫面清晰度180%;3.5x-100x焦段(Fusion4),則採用潛望式長焦鏡頭的多幀融合方案。這裡順便科普一下,為什麼手機的黑白鏡頭可以大幅提升畫面清晰度?大家還記得“天問一號”探測器發回的首張火星照片嗎?就是這張黑白照片。
人眼對色彩的感知,是透過人眼中的三種視錐細胞,分別感知紅、綠、藍三種顏色的光波。
人眼的紅綠藍三色視錐細胞
而手機上的相機感測器並沒有視錐細胞,因此相機要透過紅、綠、藍三個濾光器來分別獲取3個色彩的畫面,再插值合成,輸出彩色照片。光線透過濾光器之後,會有部分細節損失。
相機透過濾光器獲取色彩資訊
而黑白感測器則不使用任何濾光器,可以捕獲所有光子,所以解析度、清晰度、對比度,都要高於彩色照片。因此“天問一號”上搭載的高畫質攝像機使用的也是黑白感測器。
榮耀magic3透過黑白鏡頭獲取的影象,與主攝像頭的影象進行融合計算,就可以獲得更高解析度的影象。
至於“多主攝融合計算攝影”,的“計算攝影”,則涉及到各種人工智慧和演算法。
這方面趙明並沒有展開講,不過背景的PPT上已經透漏出Image Engine所使用的幾個主要演算法,包括:
可以透過多幀動態範圍增強演算法,獲得增強的畫面動態範圍。可以透過語義降噪和先驗資訊,降低紋理噪聲。可以透過光線重建,增強影象的顏色氛圍。基於場景和習慣的色彩矯正,可以提供更多的風格化攝影。可以看一下幾個多主攝融合的案例:
另外,趙明還特別提到AI智慧區域平滑演算法,可以使畫面細節大幅提升。
以上內容就是這次釋出會的精髓。
可惜的是,攝影師展現的照片過於平淡,過於生活。雖然可以看出magic3的拍攝效果非常好,但是我們感受不到驚豔!
而那個舞臺劇導演,整整講了10分鐘廢話!我之前看過她編導的《印象劉三姐》。如果她能用手中的magic3,拍攝一小段《印象劉三姐》的演出畫面,相信一定能撼動全場。這才是我們想看到的。當時的彈幕也幾乎失控!希望榮耀釋出會下次改進!
不過,瑕不掩瑜,10月份榮耀將向全系Magic3手機,全網推送“多主攝融合計算攝影”功能。而且趙明宣佈,正式開啟“榮耀影像計劃”,全體榮耀手機使用者都可以參與影像大賽,投稿時間從9月22日到11月30日。
我們期待從投稿的作品中,發現更美好的世界!