快訊 來源：騰訊網(wǎng) 2023-08-01 00:57:43
vivo X90s 影像模組
【資料圖】
進入2023年下半年，智能手機市場在影像上的軍備競賽有增無減。更大面積的傳感器、光學防抖、全焦距的焦段覆蓋，正在成為高端智能手機的標配，也有著逐漸普及的趨勢。
然而智能手機畢竟是一種大眾消費品，重量和體積都會制約影像配置的無限增長。而在消費者端，用戶往往對于影像原理不甚了解。因此就需要廠商不斷在軟件、算法層面，去解決實際的問題。
7月底，vivo首次向外界展示了其位于重慶工廠的3D影像實驗室，并宣布相關技術將會率先應用在下一代X系列旗艦手機上。
vivo 3D影像實驗室內部
vivo 3D影像實驗室，主要是由100余臺單反相機，配合閃光燈、處理器、控制器和服務器所組成。通過采集大量的人體軀干、面部信息，最終實現(xiàn)對于智能手機人像拍攝的提高。
采集人體信息時，vivo 3D影像實驗室會同時調動100多臺單反相機，從不同的角度進行拍攝，生成100余張2D圖片，隨后通過局域網(wǎng)上傳至存儲服務器，再通過2D圖片進行3D匹配，生成3D模型。
基于生成的3D模型，vivo可以實現(xiàn)對于算法的訓練，提升人像模式下，模擬背景虛化的精確性。據(jù)vivo工作人員介紹，預計每年將會有上萬組3D人像模型。
傳統(tǒng)的智能手機人像虛化算法，往往是在2D層面，判斷人的輪廓來實現(xiàn)虛化，不具備3D層面的深度信息，因此主體與背景之間往往會過渡的比較生硬，“摳”出來的背景也會缺少層次。
通過大量的3D模型進行預訓練，vivo的算法可以變得更加智能，智能手機可以更好的判斷人的縱深信息，使得虛化更具有漸進感也更加細膩。
vivo X90s樣片
此外3D模型加入之后，智能手機的人像虛化算法應用范圍可以進一步擴大。目前人像虛化算法由于缺乏深度方向的信息，只能拍攝全身像或是半身像，未來則可以近距離貼臉拍攝眼睛的特寫虛化畫面。
在3D模型之外，vivo有一套“重打光”的設備。由96個可編程的同步光源搭配vivo的工業(yè)相機。與拍照工作站以及服務器共同組成，可以模擬不同光照條件下的成像圖片，為自研人像算法做數(shù)據(jù)支撐，促進3D重建和3D算法方面的開發(fā)和預研，提升手機上的算法效果。
例如在加入重打光技術后，vivo手機可以對前期拍攝到的“逆光黑臉”進行高精度補光，甚至是調整光線的冷暖色溫。生成式人像編輯則能通過紋理重建與光照估計算法等技術，讓用戶基于自身喜好對光照、年齡、發(fā)型、表情等內容進行重新編輯。
vivo影像活動現(xiàn)場
基于人像3D重建感知能力，vivo還可以疊加AIGC算法，通過vivo手機即可拍攝出虛擬與實景結合更為自然的照片，實現(xiàn)“足不出戶拍出四季人像大片”的人性化體驗。
在此之外，3D影像的相關技術可以應用在如今火爆的3D虛擬人應用上。包括抖音上比較火的3D數(shù)字人直播、3D表情驅動、3D的虛擬場景編輯以及相應的一個動畫制作。
此外還有基于3D影像衍生的3D換裝應用，可以根據(jù)采集者的人體模型，在虛擬場景內實現(xiàn)足球游戲，目前在vivo手機和平板電腦上已經(jīng)可以進行演示。
vivo 3D影像實驗室于2022年下半年組建，全球共有7個實驗室。預期2023年下半年到2024年將會采集幾萬組數(shù)據(jù)。這些高質量的數(shù)據(jù)未來將會與vivo全球的用戶一起組建兼顧質量和數(shù)量的龐大數(shù)據(jù)庫。據(jù)vivo工作人員介紹，相關技術落地，將會在vivo X系列的下一代產(chǎn)品上率先應用。
鈦媒體App了解到，類似vivo這種通過大量采集數(shù)據(jù)，建立數(shù)據(jù)庫以優(yōu)化算法的實驗室，在傳統(tǒng)相機領域早已有之，但vivo應該是通過3D模型實現(xiàn)多重優(yōu)化以及AIGC相關應用的第一家智能手機廠商。
某種意義上，自建影像實驗室標志著vivo在影像領域的研究進入了深水區(qū)，而能夠借助AI的東風，擴展智能手機影像的邊界，則是vivo探索出來的一條創(chuàng)新之路，也許會開拓出智能手機影像的全新方向。（本文首發(fā)鈦媒體App 作者/吳泓磊 編輯/鐘毅）
標簽：
免責聲明：市場有風險，選擇需謹慎！此文僅供參考，不作買賣依據(jù)。
