OPPO發(fā)布FDF全維人像視頻技術(shù)系統(tǒng)
OPPO FDF 全維人像視頻技術(shù)系統(tǒng)由感知人像和畫質(zhì)增強兩大引擎組成,分別針對人像拍攝時的人物主體和整體畫面進行針對性優(yōu)化,共同實現(xiàn)人美、景美的拍攝效果,不管是單人還是多人,白天、夜間還是逆光,都可以實現(xiàn)全時段視頻創(chuàng)作自由。
感知人像引擎擁有AI人臉檢測、AI超清人像、OFL膚質(zhì)優(yōu)化算法、人臉畸變矯正等功能,拒絕千篇一律,讓拍攝的作品更自然、真實、動人。
AI人臉檢測通過對網(wǎng)絡模型的優(yōu)化,實現(xiàn)99.78%的檢測準確率和25ms的單幀檢測耗時,不管是拍視頻還是拍照,都能快速的檢測出人臉區(qū)域,為后續(xù)臉部優(yōu)化圈定精確的范圍。同時,AI算法在人臉區(qū)域標記了296個關(guān)鍵點來實現(xiàn)五官和輪廓細節(jié)的區(qū)分,并加入關(guān)鍵點是否可見判斷、人臉角度判斷等輔助信息,最終在業(yè)界權(quán)威的WFLW數(shù)據(jù)集上實現(xiàn)低至4.71%的NME,這套算法在移動平臺上的運行幀率達到了200fps以上。
AI超清人像在深度神經(jīng)網(wǎng)絡模型中設計了3個子模塊對人臉進行超分計算、降噪優(yōu)化和銳度優(yōu)化。即使在暗光環(huán)境下,也能通過算法精準檢測臉部和鄰近區(qū)域并進行增強處理,提升臉部清晰度的同時,細節(jié)處理更精致。
OFL膚質(zhì)優(yōu)化算法能分別對膚色和膚質(zhì)進行AI處理,拍攝時幫助用戶去掉臉部瑕疵、優(yōu)化皮膚表現(xiàn)、讓整體氣色更出眾。這套算法可實現(xiàn)96.5%的皮膚區(qū)域的分割,面部皮膚精度達到了97.4%。“膚色檢測”范圍不僅包括臉部皮膚,也包括脖子和手部的皮膚,幾乎涵蓋在拍攝人像視頻時會露出的所有皮膚區(qū)域。
OFL膚質(zhì)優(yōu)化算法還能實現(xiàn)AI祛瑕疵效果,智能識別區(qū)分天生特征和后天瑕疵的特征,實現(xiàn)更自然地祛瑕疵效果。斑、痘、眼袋等后天瑕疵會被去掉,淚痣等天生臉部特征得到保留。
人臉畸變矯正在處理人臉畸變時,取透視投影中的背景部分,同時對人臉區(qū)域進行切割分離、再做一次球面投影,讓人臉保持正常的、符合人眼觀看習慣的形狀,最終將兩個畫面疊加,從而得到人臉和背景都正常的畫面,讓整體效果更自然、真實。
畫質(zhì)增強引擎包含新一代超級防抖算法、移動延時攝影、超級夜景視頻、DOL-HDR等功能,可在畫面抖動較大、光線不足/過亮等場景下保障拍出滿意畫面。
超級防抖算法加入場景檢測過程,通過抓取陀螺儀、加速度計和Sensor的數(shù)據(jù)分別對運動軌跡、姿態(tài)和曝光進行判斷,從而區(qū)分不同場景,匹配不同的防抖策略。
針對手持移動延時攝影,OPPO在超級防抖算法中加入運動趨勢判斷,不僅可以使被抽取的多幀畫面之間的過渡更平滑,還可以實現(xiàn)更長時間跨度的防抖,讓移動延時攝影的實拍表現(xiàn)幾乎達到云臺效果。
超級夜景視頻在前代算法基礎上和HDR算法進行融合,針對亮度調(diào)整曲線進行區(qū)分調(diào)試,算法先會根據(jù)當前的亮度環(huán)境智能判斷啟用夜景還是HDR亮度調(diào)整曲線,實現(xiàn)更通透、觀感更好的視頻效果。
DOL-HDR方案解決用戶逆光拍攝痛點,其長短曝光幀幾乎是同時進行,大幅縮減了前后幀的間隔時間,大大改善鬼影問題,實現(xiàn)更好的HDR視頻拍攝效果。
首款搭載OPPO人像視頻技術(shù)系統(tǒng)的新品將于12月份問世。(溫麗雅)
網(wǎng)友評論
獨家原創(chuàng)排行
延伸閱讀
- OPPO成溫網(wǎng)首個亞洲贊助商 簽約五年發(fā)力國際化
- OPPO率先實現(xiàn)5G商用落地:OPPO Reno 5G版在瑞士發(fā)售
- realme X手機本月發(fā)布 realme系原OPPO海外品牌
- realme X發(fā)布 媒體:紅米榮耀壓力大
- OPPO啟動5G星火計劃 在北上深設立5G體驗中心
- OPPO K系列新手機K3發(fā)布 千元“硬核少年”有多剛?
- OPPO Reno玩轉(zhuǎn)色彩 推出橙色手機
- OPPO加入中國增強現(xiàn)實核心技術(shù)產(chǎn)業(yè)聯(lián)盟 發(fā)力AR研發(fā)
- OPPO透視全景屏和無網(wǎng)絡通信技術(shù)亮相2019MWC 吸引觀
- OPPO Reno 5G版獲得中國5G終端電信設備進網(wǎng)許可證