钛极客|传感器堆料热退去,手机影像该看AI芯片了?( 二 )


此次OPPO之所以将项目的名称定为「马里亚纳」也颇为形象 , 其背后有两个原因 。其一 , 如果想要达到OPPO期待的移动端优质AI影像体验 , 更加成熟的芯片生产制程(如12nm)已经无法满足 , 所以其首个自研芯片就直接上马6nm制程工艺 , 这对于OPPO整个自研芯片团队都是一个极大的挑战 。
另一方面 , 「马里亚纳」的名字也是OPPO对于自研芯片挑战的一个决心 , 同时也表达了OPPO将以自己最擅长的领域 , 对手机最底层的芯片发起冲击 。
马里亚纳 MariSilicon X有何绝活被OPPO寄予厚望的马里亚纳 MariSilicon X到底是怎样的一款芯片呢?
首先 , 我们要了解马里亚纳 MariSilicon X是一款NPU芯片 , 而不是ISP模块 , 有着后者所不具备的AI计算能力 , 能够用神经网络实现影像的降噪和细节提升 。它采用了AI时代的DSA新黄金架构理念 , 旨在针对OPPO的AI影像需求 , 放弃对次要能力的兼容 , 而是将全部芯片面积和算力都投入影像领域中 , 也就是所谓的“专芯专用” , 任务更明确 , 性能自然也就更强 。目前全球前沿科技公司都在采用DSA做AI , 比如Google的TPU 。但是 , 使用DSA架构也意味着这颗芯片的专用性 , 对于厂商的芯片方向规划要求极高 , 需要提前预判在芯片研发到商用的几年内 , 影像风口究竟在哪里 。
钛极客|传感器堆料热退去,手机影像该看AI芯片了?
文章图片

其内部架构由“MariNeuro”自研AI计算单元、“MariLumi”自研影像处理单元、配套的影像专用内存子系统和I/O组件等组成 。
此外 , 马里亚纳 MariSilicon X制程方面直接上马目前行业非常先进的6nm制程工艺 , 由台积电进行代工 。选择6nm虽然可以带来更强的性能表现 , 但随之而来的高投入、高风险、高难度和高不确定性不言而喻 。
据行业报道 , 6nm芯片1次流片费用高达1个亿 , 正式流片实验前没人知道是否成功 , 一旦失败就面临推倒重来 。好在OPPO在流片阶段一次就成功了 , 据OPPO芯片产品高级总监姜波回忆:“记得流片拿回来之后没有丝毫耽误 , 点亮过程中就是24小时 , 整个研发团队都非常激动 , 我们完成了一个巨大的挑战!”
对于用户实际使用上的提升 , 马里亚纳 MariSilicon X将主要用AI技术解决传统手机影像难题——弱光视频画质 , 将计算摄影推向了4K+20bit RAW+AI+Ultra HDR的新极限 。对于不懂摄影的人来说这串复杂的名词可能难以理解 , 说白了就是要让画面拥有丰富细节(4k分辨率是主流1080p的4倍 , 画面细节更丰富)、高宽容度(画面中非常亮的部分与极暗的部分都清晰可见)、纯净画面(通过AI计算实现近乎无噪点的夜景视频)和无损计算(影像数据损耗小 , 保留更多信息和细节 , 对后期更友好) , 尽可能保证画面的「原汁原味」 。
钛极客|传感器堆料热退去,手机影像该看AI芯片了?
文章图片

举个简单的例子 , 比如我们在一个昏暗的剧场中拍照 , 如果是没有AI计算摄影 , 整个画面中可能是全部黑暗 , 又或者只能看到微弱的色彩 。而未来有了马里亚纳 MariSilicon X , OPPO可以借助其“MariLumi”影像处理单元 , 显著提升HDR(高动态范围成像)能力表现 , 让剧场中拍摄的画面 , 都可以还原出人眼看到的状态 。

推荐阅读