找回密码
 注册
11月份电巢直播计划
查看: 94|回复: 0

专业级打造 OPPO推出FDF全维人像视频技术系统

[复制链接]

该用户从未签到

发表于 2020-11-20 13:37 | 显示全部楼层 |阅读模式

EDA365欢迎您登录!

您需要 登录 才可以下载或查看,没有帐号?注册

x
本帖最后由 fish1352 于 2020-11-20 13:41 编辑
& u2 F7 y, j8 j. T& `8 c* W6 I  A2 A' s3 W; l' Z
11月18日,OPPO正式在ODC 2020(OPPO开发者大会)上正式推出了全新的OPPO FDF人像视频技术系统。这也是OPPO近年来针对视频拍摄领域的最大一次技术迭代。OPPO顺应5G时代人像拍摄从照片转向视频的大趋势,综合了“魔镜专项”技术调研结果与已有的技术成果,推出了OPPO FDF 全维人像视频技术系统。该技术旨在优化人物主体与整体画面的实拍表现,并针对性开发出了感知人像引擎与画质增强引擎,覆盖了人像视频拍摄的方方面面,让美自然生长。
9 m. l3 |5 e# B- C4 @; k; \6 U" M/ {

9 [8 @3 v$ I' U: p: ~# r
8 m# J1 _- b8 x$ D. O4 m
0 ~! |9 a, K( O

& h) s9 r) W0 K
! E, T, R/ s- j; M" T$ A

) ?+ B$ n! h1 s# i& A+ ~ 其中,感知人像引擎旨在针对拍摄时的人像区域进行优化。OPPO研发团队通过AI算法,搭建深度神经网络,精准检测人脸区域。理论上,感知人像引擎可实现99.78%的检测准确率以及25ms的单帧检测耗时,进而精准构建人脸优化范围。与此同时,在AI算法作用下,感知人像引擎还可利用296个人脸关键点实现五官和轮廓细节区分,加入判断辅助信息,实现了低至4.71%的模型损耗,并在移动平台上实现了200fps以上的运行帧率。这与OPPO计算机视觉团队出色的技术实力密不可分。
: q2 x+ E8 e4 U/ [3 Q1 _
: E2 O4 T* g" U" j( N& Y
( C/ }1 ~& f  b4 c# V
6 w( S' C/ _3 B9 P8 L( d9 H
+ a. a  T" d' t( M. i, F  H

1 e* }$ P6 B2 a 在人脸优化环节中,OPPO FDF全维人像视频技术系统利用AI算法,实现了超清人像功能,并利用深度神经网络子模块对人脸进行超分计算、降噪优化和锐度优化。这样做的优势在于可以轻松直出高码率的视频作品,视频细节更加禁得起考量。在OFL肤质优化算法的加持下,OPPO可利用轻量化AI模型,重新设计Loss函数,综合用户大数据模型进行AI训练,最终实现对肤色肤质的精准把控,实现96.5%的皮肤区域分割准确率以及97.4%的面部皮肤精度,甚至还可对全身皮肤区域进行精准标记与精确优化。
8 |6 h$ j: G7 h; m0 f& b# R
$ \( G- m* l* K# M

2 }2 t9 h3 }2 V6 y8 Q& t$ v" W  \9 e/ @/ |& r1 m! P

" n4 L/ y& q2 Q" @5 q' U/ v7 S' B. v1 t
AI祛瑕疵功能则可区分天生特征与后天瑕疵,实现真实、个性的人像风格呈现。这一功能的加入,使得不同地区的用户均可进行个性化的审美表达。人像畸变矫正则可利用透视投影和球面投影之间的逻辑关系,在矫正人脸畸变时也能够对背景画面进行针对性畸变优化,以保证画面的真实感,增加广角画面感染力。可以说,OPPO FDF 全维人像视频技术系统的感知人像引擎将常规人像修图的复杂过程融入到了拍摄过程中,使得视频的每一帧都能够还原人像的动人之处。" x; b: _$ r5 \" V) F9 w
7 P* t7 X' _) u" U- {5 b
/ a8 y+ S; S8 _6 o

( r+ G/ u/ u9 T  D8 U 而画质增强引擎则可通过对画面防抖、夜景视频和HDR视频的灵活把控,保证背景画面自然真实。其中,新一代的防抖算法继承了HIS混和视频防抖以及超级防抖功能的技术底蕴,加入了场景检测过程,通过抓取陀螺仪、加速度计和Sensor的数据判断运动轨迹、姿态和曝光条件,针对XYZ三轴抖动进行针对性优化。这对于手机延时摄影、动态画面拍摄、第一人称视频拍摄等特定场景有重大意义,可使得多帧过渡更加平滑,实现了类似于手持云台的动态拍摄效果。
# ^) N9 r- _" ?7 ~+ }+ C
( E* e7 W8 j% [" s

+ y# B( M" s% d
# ~! _! I, c2 Y7 \ 画质增强引擎还继承了OPPO Reno4系列的超级夜景视频技术,优化视频算法,并对夜景视频和HDR算法进行了融合,优化过程包括整体提亮、局部提亮和多帧融合,能够更好降低时域噪声,提高亮度过渡平滑性,适合拍摄夜景、逆光之类的大光比场景。其搭载的新一代融合算法在亮度、色彩与降噪方面均有不错的表现。值得一提的是,该技术还被应用到了前置摄像头,使得前置夜景人像的效果获得了史无前例的巨大提升。% T* ]5 Q4 T  j. w. s

8 v. U0 |" V5 l1 U& w
) e4 @- G- H/ |

# c* J6 a5 Q8 f/ ?1 O8 Z 在挑战性更高的逆光场景下,OPPO结合自己打磨3HDR以及Smart- HDR的技术积累,推出了全新的DOL- HDR方案,同时进行长短曝光,减少前后帧间隔时间,改善鬼影问题。值得一提的是,画质增强引擎的开放性不仅仅在于前后拍摄兼容,还可以适配第三方软件。这也就意味着拍摄者可能在快手、抖音、微视等第三方平台上无缝体验这一新技术,跳过了繁琐的处理过程,Vlog视觉效果也能够因此获得显著提升。
0 i6 C5 A0 G. Q" p# V" z
  X# Q# g# _' W% r& g- R7 H$ a  ^
# r* b! C7 C5 U

& p; i/ T, U1 q# k: f9 r3 A3 d 在人像拍摄方面,OPPO有着充足的技术积累以及独到的审美取向。从2009年OPPO P51的500万像素摄像头以及LOMO风格滤镜再到OPPO R系列的极致美颜与AI智能拍照功能,OPPO无时无刻不在引领人像拍摄的技术潮流,其在人像美颜、虚化、防抖、夜景等影像技术的专利申请总数超过700件,发明专利占比80%。 这在人像视频需求越发旺盛的5G时代无疑是难能可贵的。
# \% c- d4 r. i0 n0 [3 a
7 }5 Y% K  z5 l" l

0 b+ i4 |" M! \# I8 J" b0 j" Z) v. z  R4 D/ X: P3 ?( \. ^5 E
对于手机行业来讲,OPPO FDF 全维人像视频技术俨然跳出了单一照片、人眼追焦、语义分层优化以及传统人眼精修的范畴,也不再纠结于真实感和视觉美感的平衡点,直击专业人像拍摄的要点,在保证体验的基础上实现了“傻瓜操作”。这对于“还处于第一层的广大厂商、第三方软件提供方来讲,说得上是降维打击,一定会引发一股人像拍摄技术进化的狂潮,并有望扩展器在5G条件下的应用场景。据悉,OPPO有望在今年12月份推出搭载OPPO FDF 全维人像视频技术系统的新品,让我们一起拭目以待吧!
* |' V/ q* Y7 A『本文转载自网络,版权归原作者所有,如有侵权请联系删除』
您需要登录后才可以回帖 登录 | 注册

本版积分规则

关闭

推荐内容上一条 /1 下一条

EDA365公众号

关于我们|手机版|EDA365电子论坛网 ( 粤ICP备18020198号 )

GMT+8, 2020-12-1 10:59 , Processed in 0.078125 second(s), 21 queries , Gzip On.

深圳市墨知创新科技有限公司

地址:深圳市南山区科技生态园2栋A座805 电话:19925233282

快速回复 返回顶部 返回列表