2020年11月18日,中國,深圳—今日,OPPO在以“躍遷·致善”為主題的未來科技大會(huì)2020(OPPO INNO DAY 2020)上,首次推出OPPO FDF 全維人像視頻技術(shù)系統(tǒng),這是OPPO多年美顏技術(shù)積累的一次釋放,是人像美學(xué)領(lǐng)域的一次進(jìn)化,也是5G視頻時(shí)代的一次革新。
樹立5G時(shí)代全場景視頻美顏新標(biāo)桿
影像產(chǎn)品經(jīng)理田智堅(jiān)表示“影像一直是OPPO堅(jiān)持并且將長期堅(jiān)持的賽道,在影像產(chǎn)品定義上始終堅(jiān)持從用戶出發(fā),為讓用戶拍出自然、自信、動(dòng)人的人像作品,我們在內(nèi)部啟動(dòng)了魔鏡專項(xiàng),在不同的城市和Reno系列老用戶、終端導(dǎo)購、人像精修師和妝容專家深入探討他們認(rèn)為拍得好的人像視頻。出乎意料的是,幾乎所有人都認(rèn)為,好的人像視頻不僅要做到人美,還要景美?;谶@樣的洞察,我們打造了OPPO FDF 全維人像視頻技術(shù)系統(tǒng)。當(dāng)然,這也是我們在人像拍攝上一直秉承的理念 —— 讓美自然生長。”
OPPO FDF 全維人像視頻技術(shù)系統(tǒng)由感知人像和畫質(zhì)增強(qiáng)兩大引擎組成,分別針對人像拍攝時(shí)的人物主體和整體畫面進(jìn)行針對性優(yōu)化,共同實(shí)現(xiàn)人美、景美的拍攝效果,不管是單人還是多人,白天、夜間還是逆光,都可以實(shí)現(xiàn)全時(shí)段視頻創(chuàng)作自由。
拒絕千篇一律 讓美更自然
感知人像引擎擁有AI人臉檢測、AI超清人像、OFL膚質(zhì)優(yōu)化算法、人臉畸變矯正等功能,拒絕千篇一律,讓拍攝的作品更自然、真實(shí)、動(dòng)人。
AI人臉檢測通過對網(wǎng)絡(luò)模型的優(yōu)化,實(shí)現(xiàn)99.78%的檢測準(zhǔn)確率和25ms的單幀檢測耗時(shí),不管是拍視頻還是拍照,都能快速的檢測出人臉區(qū)域,為后續(xù)臉部優(yōu)化圈定精確的范圍。同時(shí),AI算法在人臉區(qū)域標(biāo)記了296個(gè)關(guān)鍵點(diǎn)來實(shí)現(xiàn)五官和輪廓細(xì)節(jié)的區(qū)分,并加入關(guān)鍵點(diǎn)是否可見判斷、人臉角度判斷等輔助信息,最終在業(yè)界權(quán)威的WFLW數(shù)據(jù)集上實(shí)現(xiàn)低至4.71%的NME,這套算法在移動(dòng)平臺上的運(yùn)行幀率達(dá)到了200fps以上。
AI超清人像在深度神經(jīng)網(wǎng)絡(luò)模型中設(shè)計(jì)了3個(gè)子模塊對人臉進(jìn)行超分計(jì)算、降噪優(yōu)化和銳度優(yōu)化。即使在暗光環(huán)境下,也能通過算法精準(zhǔn)檢測臉部和鄰近區(qū)域并進(jìn)行增強(qiáng)處理,提升臉部清晰度的同時(shí),細(xì)節(jié)處理更精致。
OFL膚質(zhì)優(yōu)化算法能分別對膚色和膚質(zhì)進(jìn)行AI處理,拍攝時(shí)幫助用戶去掉臉部瑕疵、優(yōu)化皮膚表現(xiàn)、讓整體氣色更出眾。這套算法可實(shí)現(xiàn)96.5%的皮膚區(qū)域的分割,面部皮膚精度達(dá)到了97.4%。“膚色檢測”范圍不僅包括臉部皮膚,也包括脖子和手部的皮膚,幾乎涵蓋在拍攝人像視頻時(shí)會(huì)露出的所有皮膚區(qū)域。
OFL膚質(zhì)優(yōu)化算法還能實(shí)現(xiàn)AI祛瑕疵效果,智能識別區(qū)分天生特征和后天瑕疵的特征,實(shí)現(xiàn)更自然地祛瑕疵效果。斑、痘、眼袋等后天瑕疵會(huì)被去掉,淚痣等天生臉部特征得到保留。
人臉畸變矯正在處理人臉畸變時(shí),取透視投影中的背景部分,同時(shí)對人臉區(qū)域進(jìn)行切割分離、再做一次球面投影,讓人臉保持正常的、符合人眼觀看習(xí)慣的形狀,最終將兩個(gè)畫面疊加,從而得到人臉和背景都正常的畫面,讓整體效果更自然、真實(shí)。
全場景全天候拍攝 創(chuàng)作更自由
畫質(zhì)增強(qiáng)引擎包含新一代超級防抖算法、移動(dòng)延時(shí)攝影、超級夜景視頻、DOL-HDR等功能,可在畫面抖動(dòng)較大、光線不足/過亮等場景下保障拍出滿意畫面。
超級防抖算法加入場景檢測過程,通過抓取陀螺儀、加速度計(jì)和Sensor的數(shù)據(jù)分別對運(yùn)動(dòng)軌跡、姿態(tài)和曝光進(jìn)行判斷,從而區(qū)分不同場景,匹配不同的防抖策略。
針對手持移動(dòng)延時(shí)攝影,OPPO在超級防抖算法中加入運(yùn)動(dòng)趨勢判斷,不僅可以使被抽取的多幀畫面之間的過渡更平滑,還可以實(shí)現(xiàn)更長時(shí)間跨度的防抖,讓移動(dòng)延時(shí)攝影的實(shí)拍表現(xiàn)幾乎達(dá)到云臺效果。
超級夜景視頻在前代算法基礎(chǔ)上和HDR算法進(jìn)行融合,針對亮度調(diào)整曲線進(jìn)行區(qū)分調(diào)試,算法先會(huì)根據(jù)當(dāng)前的亮度環(huán)境智能判斷啟用夜景還是HDR亮度調(diào)整曲線,實(shí)現(xiàn)更通透、觀感更好的視頻效果。
DOL-HDR方案解決用戶逆光拍攝痛點(diǎn),其長短曝光幀幾乎是同時(shí)進(jìn)行,大幅縮減了前后幀的間隔時(shí)間,大大改善鬼影問題,實(shí)現(xiàn)更好的HDR視頻拍攝效果。
開放共享,首款產(chǎn)品12月問世
從照片時(shí)代起,OPPO就在美顏領(lǐng)域投入大量研究,經(jīng)過幾年迭代升級,OPPO將積累的技術(shù)運(yùn)用到視頻領(lǐng)域,只為讓用戶拍出自然、自信、動(dòng)人的人像作品,讓美自然生長。可以說,OPPO FDF 全維人像視頻技術(shù)系統(tǒng)是開啟5G人像視頻時(shí)代的密匙,將在行業(yè)樹立全場景視頻美顏新標(biāo)桿。
首款搭載OPPO人像視頻技術(shù)系統(tǒng)的新品將于12月份問世。OPPO也將堅(jiān)持技術(shù)共享、技術(shù)普惠精神,目前OPPO在HDR、夜景、超級防抖等方面的技術(shù)已經(jīng)陸續(xù)開放給抖音和快手等第三方平臺使用,賦能生態(tài)伙伴,讓更多人享受到科技的魅力。
申請創(chuàng)業(yè)報(bào)道,分享創(chuàng)業(yè)好點(diǎn)子。點(diǎn)擊此處,共同探討創(chuàng)業(yè)新機(jī)遇!