影像|传感器堆料热退去,手机影像该看AI芯片了?

影像|传感器堆料热退去,手机影像该看AI芯片了?
文章插图
图片来源:视觉中国
「你知道一部智能手机有多少颗芯片吗?」
作为当下每个人最离不开的电子设备,一部智能手机虽然只有巴掌大小,但它内部却至少集成了100颗以上的芯片。其中,大家最熟悉的自然还是SoC了,SoC被称为系统级芯片,其集成了CPU、GPU、ISP、NPU等,因此我们可以说SoC是手机的“核心处理器”。
这么多的芯片中,NPU(神经网络处理器)的名字不像CPU和GPU那么响亮,但它扮演的却是最聪明的角色,专门负责实现AI运算和AI应用,直接影响手机AI能力的强弱。NPU具备的AI能力可以显著改变现有的手机功能,而影像就是一个极富应用前景的领域。
影像|传感器堆料热退去,手机影像该看AI芯片了?
文章插图
在12月14日的OPPO 2021年度未来科技大会上,OPPO就发布了首个自研NPU芯片马里亚纳 MariSilicon X,这颗芯片是全球首颗为影像而生的专用NPU芯片,它的出现将极大提升计算摄影的能力和参与程度。其背后展示了OPPO对于“自研芯片”的决心,也透露出其未来发展的新思路。
至此,中国智能手机四大头部厂商也均加入了自研芯片的「芯」赛道。
以自己最擅长的领域,探索更深的「马里亚纳」智能手机中蕴含的芯片有很多,也表示着手机厂商在自研芯片的选择上有非常多的方向,为何OPPO偏偏选择了影像NPU作为其首个自研的方向呢?其背后的发展逻辑与OPPO坚持的技术赛道密不可分。
影像|传感器堆料热退去,手机影像该看AI芯片了?
文章插图
OPPO Find X3
很长一段时间里,用户对智能手机最高的需求就是对于影像品质的追求。对于手机品牌而言,要满足用户需求,就必然要在影像技术上实现关键性突破。
影像|传感器堆料热退去,手机影像该看AI芯片了?
文章插图
要想增强影像能力,最直接的方式就是换用尺寸更大的传感器,但机身空间有限的智能手机注定不允许动辄三四个硕大的影像传感器的存在;再加之尺寸更大的传感器需要更长的物理焦距,维持等效27mm左右的主流焦距时会让手机的厚度同步激增,这注定不是一个可持续的发展方向。
OPPO经过过去R系列、Reno系列、Find系列数年在影像技术上的探索,发现想要从传感器、镜头等光学方面继续提升移动影像素质已经遇到了瓶颈。只有通过影像专用NPU,才能解决目前ISP功能局限和通用算力不足、传感器尺寸和镜组光学素质止步不前的难题,这也是未来影像发展的主流方向。
而且,目前来看上游供应商提供的通用芯片以及NPU芯片都无法满足AI对计算影像提出的算力和能效要求。因此,要兼顾高算力和低能耗,OPPO也不得不自研影像专用的NPU。
此次OPPO之所以将项目的名称定为「马里亚纳」也颇为形象,其背后有两个原因。其一,如果想要达到OPPO期待的移动端优质AI影像体验,更加成熟的芯片生产制程(如12nm)已经无法满足,所以其首个自研芯片就直接上马6nm制程工艺,这对于OPPO整个自研芯片团队都是一个极大的挑战。
另一方面,「马里亚纳」的名字也是OPPO对于自研芯片挑战的一个决心,同时也表达了OPPO将以自己最擅长的领域,对手机最底层的芯片发起冲击。
马里亚纳 MariSilicon X有何绝活被OPPO寄予厚望的马里亚纳 MariSilicon X到底是怎样的一款芯片呢?
首先,我们要了解马里亚纳 MariSilicon X是一款NPU芯片,而不是ISP模块,有着后者所不具备的AI计算能力,能够用神经网络实现影像的降噪和细节提升。它采用了AI时代的DSA新黄金架构理念,旨在针对OPPO的AI影像需求,放弃对次要能力的兼容,而是将全部芯片面积和算力都投入影像领域中,也就是所谓的“专芯专用”,任务更明确,性能自然也就更强。目前全球前沿科技公司都在采用DSA做AI,比如Google的TPU。但是,使用DSA架构也意味着这颗芯片的专用性,对于厂商的芯片方向规划要求极高,需要提前预判在芯片研发到商用的几年内,影像风口究竟在哪里。

推荐阅读