OPPO發(fā)布FDF全維人像視頻技術(shù)系統(tǒng)

　　OPPO FDF 全維人像視頻技術(shù)系統(tǒng)由感知人像和畫(huà)質(zhì)增強(qiáng)兩大引擎組成，分別針對(duì)人像拍攝時(shí)的人物主體和整體畫(huà)面進(jìn)行針對(duì)性優(yōu)化，共同實(shí)現(xiàn)人美、景美的拍攝效果，不管是單人還是多人，白天、夜間還是逆光，都可以實(shí)現(xiàn)全時(shí)段視頻創(chuàng)作自由。

　　感知人像引擎擁有AI人臉檢測(cè)、AI超清人像、OFL膚質(zhì)優(yōu)化算法、人臉畸變矯正等功能，拒絕千篇一律，讓拍攝的作品更自然、真實(shí)、動(dòng)人。

　　AI人臉檢測(cè)通過(guò)對(duì)網(wǎng)絡(luò)模型的優(yōu)化，實(shí)現(xiàn)99.78%的檢測(cè)準(zhǔn)確率和25ms的單幀檢測(cè)耗時(shí)，不管是拍視頻還是拍照，都能快速的檢測(cè)出人臉區(qū)域，為后續(xù)臉部?jī)?yōu)化圈定精確的范圍。同時(shí)，AI算法在人臉區(qū)域標(biāo)記了296個(gè)關(guān)鍵點(diǎn)來(lái)實(shí)現(xiàn)五官和輪廓細(xì)節(jié)的區(qū)分，并加入關(guān)鍵點(diǎn)是否可見(jiàn)判斷、人臉角度判斷等輔助信息，最終在業(yè)界權(quán)威的WFLW數(shù)據(jù)集上實(shí)現(xiàn)低至4.71%的NME，這套算法在移動(dòng)平臺(tái)上的運(yùn)行幀率達(dá)到了200fps以上。

　　AI超清人像在深度神經(jīng)網(wǎng)絡(luò)模型中設(shè)計(jì)了3個(gè)子模塊對(duì)人臉進(jìn)行超分計(jì)算、降噪優(yōu)化和銳度優(yōu)化。即使在暗光環(huán)境下，也能通過(guò)算法精準(zhǔn)檢測(cè)臉部和鄰近區(qū)域并進(jìn)行增強(qiáng)處理，提升臉部清晰度的同時(shí)，細(xì)節(jié)處理更精致。

　　OFL膚質(zhì)優(yōu)化算法能分別對(duì)膚色和膚質(zhì)進(jìn)行AI處理，拍攝時(shí)幫助用戶去掉臉部瑕疵、優(yōu)化皮膚表現(xiàn)、讓整體氣色更出眾。這套算法可實(shí)現(xiàn)96.5%的皮膚區(qū)域的分割，面部皮膚精度達(dá)到了97.4%。“膚色檢測(cè)”范圍不僅包括臉部皮膚，也包括脖子和手部的皮膚，幾乎涵蓋在拍攝人像視頻時(shí)會(huì)露出的所有皮膚區(qū)域。

　　OFL膚質(zhì)優(yōu)化算法還能實(shí)現(xiàn)AI祛瑕疵效果，智能識(shí)別區(qū)分天生特征和后天瑕疵的特征，實(shí)現(xiàn)更自然地祛瑕疵效果。斑、痘、眼袋等后天瑕疵會(huì)被去掉，淚痣等天生臉部特征得到保留。

　　人臉畸變矯正在處理人臉畸變時(shí)，取透視投影中的背景部分，同時(shí)對(duì)人臉區(qū)域進(jìn)行切割分離、再做一次球面投影，讓人臉保持正常的、符合人眼觀看習(xí)慣的形狀，最終將兩個(gè)畫(huà)面疊加，從而得到人臉和背景都正常的畫(huà)面，讓整體效果更自然、真實(shí)。

　　畫(huà)質(zhì)增強(qiáng)引擎包含新一代超級(jí)防抖算法、移動(dòng)延時(shí)攝影、超級(jí)夜景視頻、DOL-HDR等功能，可在畫(huà)面抖動(dòng)較大、光線不足/過(guò)亮等場(chǎng)景下保障拍出滿意畫(huà)面。

　　超級(jí)防抖算法加入場(chǎng)景檢測(cè)過(guò)程，通過(guò)抓取陀螺儀、加速度計(jì)和Sensor的數(shù)據(jù)分別對(duì)運(yùn)動(dòng)軌跡、姿態(tài)和曝光進(jìn)行判斷，從而區(qū)分不同場(chǎng)景，匹配不同的防抖策略。

　　針對(duì)手持移動(dòng)延時(shí)攝影，OPPO在超級(jí)防抖算法中加入運(yùn)動(dòng)趨勢(shì)判斷，不僅可以使被抽取的多幀畫(huà)面之間的過(guò)渡更平滑，還可以實(shí)現(xiàn)更長(zhǎng)時(shí)間跨度的防抖，讓移動(dòng)延時(shí)攝影的實(shí)拍表現(xiàn)幾乎達(dá)到云臺(tái)效果。

　　超級(jí)夜景視頻在前代算法基礎(chǔ)上和HDR算法進(jìn)行融合，針對(duì)亮度調(diào)整曲線進(jìn)行區(qū)分調(diào)試，算法先會(huì)根據(jù)當(dāng)前的亮度環(huán)境智能判斷啟用夜景還是HDR亮度調(diào)整曲線，實(shí)現(xiàn)更通透、觀感更好的視頻效果。

　　DOL-HDR方案解決用戶逆光拍攝痛點(diǎn)，其長(zhǎng)短曝光幀幾乎是同時(shí)進(jìn)行，大幅縮減了前后幀的間隔時(shí)間，大大改善鬼影問(wèn)題，實(shí)現(xiàn)更好的HDR視頻拍攝效果。

　　首款搭載OPPO人像視頻技術(shù)系統(tǒng)的新品將于12月份問(wèn)世。(溫麗雅)