ZKX's LAB

麒麟9000融合架构ISP+NPU助力手机影像系统接近边界

2020-12-01新闻21

原标题:麒麟9000融合架构ISP+NPU助力手机影像系统接近边界

搭档RYYB CFA助力实现更强夜摄效果与色彩还原

① 三个重要的模块决定了照片的颜色还原和细节还原

② ISP+NPU融合架构完美支持新型CFA RYYB,实现更精准的色彩还原

数据与信息直通

实现实时视频的像素级处理

麒麟9000首创ISP+NPU融合架构,通过精密设计的融合架构将ISP处理流水线和NPU矩阵计算有效结合,实现了实时视频的像素级处理。ISP+NPU融合架构的最大优势在于数据和信息的直通。

我们所看到的视频是通过静态帧连续变化组成的,手机在处理一段24帧/秒的视频时,意味着需要每秒处理24张静态画面,因此处理视频远比处理静态照片更复杂, 像素级实时视频处理更是需要ISP与NPU协同完成,并且对协同效率提出了更高要求。

高效联合计算优化

性能与能效收益更优

麒麟9000之所以有良好能效。一方面,麒麟9000针对大输入的数据场景做了智能切块处理,能够大幅降低网络中间层计算内存的需求,能够很好的控制功耗。同时,麒麟9000还可以在通过FP16高精度计算保证计算精度的情况下,通过量化工具智能寻找数据进行低比特混合量化,进一步降低功耗最高达20%。此外,Slice级的数据交互有效地控制了算法时延,降低了NN计算的输入大小,有利于发挥SmartCache的低功耗能力,使得视频场景下具有更好的功耗收益。

综合来看,麒麟9000在赋能手机在影像系统能力升级的情况下,功耗依然可控,使广大用户能够尽情挥洒影像创意,而无需担心手机续航问题。

#麒麟#影像#架构

随机阅读

qrcode
访问手机版