芯片|手机厂商都在造影像芯片,是因为它最没难度?

去年手机领域刮起了“芯片”风,头部的手机厂商都齐刷刷的发布了各家的自研芯片。无论是vivo的ISP 芯片V1、小米的澎湃C1,还是OPPO的影像NPU马里亚纳 X,国产厂商所发布的芯片似乎都聚焦在了影像领域上。
随着自研芯片逐渐进入大众领域,一个问题也冒了出来:为什么手机厂商们执着于造影像芯片,是因为它最没难度吗?
与专业影像设备不同的发展路径 近年来,手机影像传感器的尺寸不断增加,高像素镜头、微云台等精密元器件不断加码,手机影像在硬件方面不断向专业摄影设备靠拢。然而,专业相机的发展路径却不会原封不动的出现在手机影像能力进阶的历程中。
变焦、防抖、高感光,这些相机的影像能力背后是超长的镜头和沉重的相机机身。对于手机而言,更立体的景深和虚化意味着主摄镜头数量的增加、进光量的提升意味着传感器尺寸的拓展,这些都对手机内部空间提出了更高的要求和挑战。
作为人们使用频率最高的日常媒介,手机在硬件的可拓展空间上存在着天然的劣势。从当前传感器尺寸上也可以看出,对标索尼黑卡的小米 11 Ultra的传感器尺寸为1/1.12,依然没有突破1英寸的限制,而手机硬件拓展空间的“天花板”却越来越近了。
在硬件这条发展路径上,手机影像似乎完全没有赢过相机的可能。
而随着芯片算力的增强,更多的影像功能得以通过算法实现,从而突破手机在硬件上的限制,手机影像能力也开始了真正意义上的变革,开启了“计算摄影”的新阶段。
华为P50 Pro在3.5倍的光学变焦硬件基础下通过了算法实现了近10倍的光学变焦效果;在摄影细节这个专项上,Google Pixel 6 Pro基于自身一直以来的算法优势,让夜拍效果更还原,也实现了18bit的动态范围,打败了不少用硬件“堆料”的其他选手。
芯片|手机厂商都在造影像芯片,是因为它最没难度?
文章插图
从技术维度来看,“计算摄影”对于图像信息的处理是基于算力的支持,理论上只要能够不断提高算力,手机影像的算法也就能带来更好的画面效果。然而,高算力对于手机而言,同样会带来高能耗与手机发热的问题。因此,芯片的自研就成为了平衡画面效果和能耗问题的关键。
以OPPO的自研影像NPU马里亚纳 X为例,通过集成的自研神经网络核心MariNeuro,芯片的有效算力高达18tops(@1GHz),能够实现像素级的图像处理。与此同时,手机AI能效却罕见地实现了双位数的每瓦性能,整体能效比控制在11.6 TOPS/W。在AI降噪算法场景下,40fps的运行速度,而功耗只有不到0.8W,这也证明了自研影像芯片的必要性。
而P50 Pro、Pixel 6 Pro这些广受好评的影像旗舰,其出色的成像效果背后,同样也离不开麒麟9000、Tensor SoC的芯片支持。通过自研芯片打通技术链路,实现影像能力的垂直整合,似乎成为了计算摄影的必然要求。
造影像芯片也是在算一笔经济账计算摄影这项技术,终究不只是将芯片的算法赋能手机那么简单,其背后同样涉及到复杂的商业逻辑。
我们拆开手机看到的那颗芯片,其实已经涉及了“造芯”链条许多板块的配合。首先要将软性算法转化到IP(影像处理);其次涉及到芯片硬件本身的设计,将IP与芯片集成;而后需要制造工厂的流片和实验室的测试;最后才是芯片封装和产出。
每个环节都涉及到不同主体之间的配合,而这众多的变量都是大量的成本投入。
根据外围爆料,OPPO的马里亚纳 X芯片研发团队超2000人,单次流片费用就高达一个亿;而vivo内部的ISP芯片人才年薪甚至达到180万元。由此可见,自研芯片本身就是一场投入产出比的赌局和冒险。

推荐阅读