11月17日,OPPO未来科技大会2020如约而至,今年的OPPO未来科技大会将持续两天。在刚刚过去的17日,OPPO发布了新的手机形态OPPOX2021卷轴屏概念手机、轻盈的分体式AR眼镜OPPOARGlass2021以及AR应用CybeReal。

相比17日所发布的产品,18日的将要发布的是偏向于底层的技术,虽然不像产品那样引人注目,但技术的升级对于产品的用户体验无疑是至关重要的,因此18日的发布会也同样充满看点。

首先是全链路色彩管理系统,随着OLED屏幕的普及以及显示技术的提升,手机屏幕的色域都有了大幅度的提升,部分旗舰机如OPPOFindX2Pro还用上了10bit的色深,通常情况下,更广的色域以及更高色的色深可以让手机显示更多的色彩,更多的色彩也意味着显示效果能够更加接近真实世界。但实际上,截至目前无论是社交平台还是手机的实际拍摄,仍然有不少内容在使用窄色域以及低色深,如果没有优秀的色彩管理,那么色彩在映射的过程中就可能发生较大偏离,导致偏色等情况。同时,如何让手机自身所产生的内容能够适应新屏幕的需求,不仅可以提升影像系统的体验,对于整个内容行业也是一次推进。

全链路是指整套色彩管理系统覆盖从图像/视频的采集,到处理器的运算、编码,再到储存、解码、渲染,最后经由显示屏展示给用户的全过程。

OPPO全链路色彩管理系统拥有10bit色深的图像、视频采集能力。并且OPPO还推出了DOL-HDR技术,OPPO宣称,DOL-HDR相比传统多帧合成的HDR算法拥有更好的信噪比,甚至还能规避鬼影现象。当然,作为HDR技术,DOL-HDR在动态范围自然拥有出色的表现。

对于拍摄内容的运算编码阶段,OPPO投入了20多种影像算法,以发挥10bit色深的优势。在新的系统中,HEIF格式将作为新的照片存储格式,这是一种比传统JPEG更加先进的格式,它支持16bit的色深(JPEG仅支持8bit)、支持动图、甚至还拥有相对更小的体积。

接下来是对内容进行解码和渲染,OPPO重构了原生图像解码器,研发出了兼容10bit的解码方案,并围绕新的解码方案做了适配工作。在最后一步的显示阶段,OPPO对屏幕进行了大量的调试,调试内容包括色相、饱和度、伽马等等,并重新校准了白点。针对我们前面所提到的窄色域内容在广色域屏幕的映射问题,OPPO也进行了针对性的优化,确保不同色域的图片在广色域屏幕上都能够准确显示。值得一提的是,OPPO还表示将在后续开放色彩管理的SDK给开发者,这将进一步提升安卓阵营的色彩管理生态。

最后,OPPO还针对色弱人士开发了色彩补偿系统2.0,提供765种方案供用户选择,让色弱人士也尽可能看到优秀的画面。

人像拍摄是OPPO的传统强项,这一次OPPO希望将这个优势带到视频拍摄中去,于是OPPOFDF全维人像视频技术系统诞生了。OPPO经过大量的调研之后发现,要拍好人像,不仅要把人拍好看,也要把景拍好看。因此,FDF全维人像视频技术系统对这两方面进行针对性的优化。

对于被摄主体——人的优化,OPPO开发了感知人像引擎,这是一个以AI技术为基础的人像优化系统。在视频拍摄中,系统首先会对人脸进行检测,据官方数据,OPPO的模型目前已经能够做到99.78%的检测准确率以及25ms的单帧帧率,并且在WFLW数据集上,这套模型的跑出了4.71%的NME(NormalizedMeanError)。识别到人脸之后,这套系统会针对人脸进行优化,其中包括超分算法,降噪优化算法等,这是为了保证人像在弱光条件下也能有清晰的呈现,并且最大限度保证整个视频画质的纯净度。在此之后,算法会对皮肤进行处理,在皮肤区域的检测准确率上,感知人像引擎可以做到96.5%,识别到的皮肤会通过神经网络引擎进行分阶采样,最终达成保留皮肤天生特征,去除后天瑕疵的美颜效果。最后,针对广角镜头拍摄时常见的边缘畸变问题,OPPO也专门做了一套算法进行优化。

优化完了人像,接下来就是对于场景的优化。在过去的几年里,OPPO对于视频防抖投入了非常多的资源,这使得OPPOFDF全维人像视频技术系统能够在拍摄时就取得一个稳定可用的画面。此外,OPPO也在视频中也加入了前面提到的DOL-HDR算法,提升画面的动态范围,收入更多的画面信息。针对低照度环境下的视频拍摄,OPPO也优化了超级夜景视频算法,这套算法可以与HDR高动态范围算法进行融合,针对不同的场景智能选择不同的模式。

目前这些算法已经基本成熟,OPPO表示,针对人像视频拍摄的FDF全维人像视频技术系统在今年12月就能落地到实际的产品中,而全链路色彩管理系统也会在明年随OPPOFindX3系列一同面世。

在这两项技术中,我们听到的最多的词应该就是AI了,由此我们也可以看到,人工智能现在已经深入到各种算法之中。同时我们也可以看到手机未来的两个趋势,一个对于精细化体验的注重,在过去很长一段时间里,色彩管理一直都是安卓阵营所忽略的,因为它需要进行庞大而复杂的工作,而它对于营销宣传的作用却并不高,只有注重用户实际上手体验,才会投入大量的资源去做这件事。我们很高兴OPPO做了一套全链路的,拥有体验闭环的色彩管理系统,这对于OPPO手机的体验甚至是整个内容行业的推进都有着重要的意义。另一个行业趋势是计算摄影已经逐渐转向计算视频,视频作为更高维度的影像内容,对于信息承载和传播的效果要更加出色,但对于算法和算力的要求更高,FDF全维人像视频技术系统的优化效果看起来十分出彩,让我们更加期待后续落地产品的实际效果。