vivo X90s 影像模組

(相關資料圖)

進入2023年下半年，智能手機市場在影像上的軍備競賽有增無減。更大面積的傳感器、光學防抖、全焦距的焦段覆蓋，正在成為高端智能手機的標配，也有著逐漸普及的趨勢。

然而智能手機畢竟是一種大眾消費品，重量和體積都會制約影像配置的無限增長。而在消費者端，用戶往往對于影像原理不甚了解。因此就需要廠商不斷在軟件、算法層面，去解決實際的問題。

7月底，vivo首次向外界展示了其位于重慶工廠的3D影像實驗室，并宣布相關技術將會率先應用在下一代X系列旗艦手機上。

vivo 3D影像實驗室內部

vivo 3D影像實驗室，主要是由100余臺單反相機，配合閃光燈、處理器、控制器和服務器所組成。通過采集大量的人體軀干、面部信息，最終實現對于智能手機人像拍攝的提高。

采集人體信息時，vivo 3D影像實驗室會同時調動100多臺單反相機，從不同的角度進行拍攝，生成100余張2D圖片，隨后通過局域網上傳至存儲服務器，再通過2D圖片進行3D匹配，生成3D模型。

基于生成的3D模型，vivo可以實現對于算法的訓練，提升人像模式下，模擬背景虛化的精確性。據vivo工作人員介紹，預計每年將會有上萬組3D人像模型。

傳統的智能手機人像虛化算法，往往是在2D層面，判斷人的輪廓來實現虛化，不具備3D層面的深度信息，因此主體與背景之間往往會過渡的比較生硬，“摳”出來的背景也會缺少層次。

通過大量的3D模型進行預訓練，vivo的算法可以變得更加智能，智能手機可以更好的判斷人的縱深信息，使得虛化更具有漸進感也更加細膩。

vivo X90s樣片

此外3D模型加入之后，智能手機的人像虛化算法應用范圍可以進一步擴大。目前人像虛化算法由于缺乏深度方向的信息，只能拍攝全身像或是半身像，未來則可以近距離貼臉拍攝眼睛的特寫虛化畫面。

在3D模型之外，vivo有一套“重打光”的設備。由96個可編程的同步光源搭配vivo的工業相機。與拍照工作站以及服務器共同組成，可以模擬不同光照條件下的成像圖片，為自研人像算法做數據支撐，促進3D重建和3D算法方面的開發和預研，提升手機上的算法效果。

例如在加入重打光技術后，vivo手機可以對前期拍攝到的“逆光黑臉”進行高精度補光，甚至是調整光線的冷暖色溫。生成式人像編輯則能通過紋理重建與光照估計算法等技術，讓用戶基于自身喜好對光照、年齡、發型、表情等內容進行重新編輯。

vivo影像活動現場

基于人像3D重建感知能力，vivo還可以疊加AIGC算法，通過vivo手機即可拍攝出虛擬與實景結合更為自然的照片，實現“足不出戶拍出四季人像大片”的人性化體驗。

在此之外，3D影像的相關技術可以應用在如今火爆的3D虛擬人應用上。包括抖音上比較火的3D數字人直播、3D表情驅動、3D的虛擬場景編輯以及相應的一個動畫制作。

此外還有基于3D影像衍生的3D換裝應用，可以根據采集者的人體模型，在虛擬場景內實現足球游戲，目前在vivo手機和平板電腦上已經可以進行演示。

vivo 3D影像實驗室于2022年下半年組建，全球共有7個實驗室。預期2023年下半年到2024年將會采集幾萬組數據。這些高質量的數據未來將會與vivo全球的用戶一起組建兼顧質量和數量的龐大數據庫。據vivo工作人員介紹，相關技術落地，將會在vivo X系列的下一代產品上率先應用。

鈦媒體App了解到，類似vivo這種通過大量采集數據，建立數據庫以優化算法的實驗室，在傳統相機領域早已有之，但vivo應該是通過3D模型實現多重優化以及AIGC相關應用的第一家智能手機廠商。

某種意義上，自建影像實驗室標志著vivo在影像領域的研究進入了深水區，而能夠借助AI的東風，擴展智能手機影像的邊界，則是vivo探索出來的一條創新之路，也許會開拓出智能手機影像的全新方向。（本文首發鈦媒體App 作者/吳泓磊 編輯/鐘毅）

關鍵詞：