影像|传感器堆料热退去,手机影像该看AI芯片了?( 二 )


影像|传感器堆料热退去,手机影像该看AI芯片了?
文章插图
其内部架构由“MariNeuro”自研AI计算单元、“MariLumi”自研影像处理单元、配套的影像专用内存子系统和I/O组件等组成。
此外,马里亚纳 MariSilicon X制程方面直接上马目前行业非常先进的6nm制程工艺,由台积电进行代工。选择6nm虽然可以带来更强的性能表现,但随之而来的高投入、高风险、高难度和高不确定性不言而喻。
据行业报道,6nm芯片1次流片费用高达1个亿,正式流片实验前没人知道是否成功,一旦失败就面临推倒重来。好在OPPO在流片阶段一次就成功了,据OPPO芯片产品高级总监姜波回忆:“记得流片拿回来之后没有丝毫耽误,点亮过程中就是24小时,整个研发团队都非常激动,我们完成了一个巨大的挑战!”
对于用户实际使用上的提升,马里亚纳 MariSilicon X将主要用AI技术解决传统手机影像难题——弱光视频画质,将计算摄影推向了4K+20bit RAW+AI+Ultra HDR的新极限。对于不懂摄影的人来说这串复杂的名词可能难以理解,说白了就是要让画面拥有丰富细节(4k分辨率是主流1080p的4倍,画面细节更丰富)、高宽容度(画面中非常亮的部分与极暗的部分都清晰可见)、纯净画面(通过AI计算实现近乎无噪点的夜景视频)和无损计算(影像数据损耗小,保留更多信息和细节,对后期更友好),尽可能保证画面的「原汁原味」。
影像|传感器堆料热退去,手机影像该看AI芯片了?
文章插图
举个简单的例子,比如我们在一个昏暗的剧场中拍照,如果是没有AI计算摄影,整个画面中可能是全部黑暗,又或者只能看到微弱的色彩。而未来有了马里亚纳 MariSilicon X,OPPO可以借助其“MariLumi”影像处理单元,显著提升HDR(高动态范围成像)能力表现,让剧场中拍摄的画面,都可以还原出人眼看到的状态。
听起来这个改变很简单,但其背后是非常困难的研发过程。要知道现在安卓旗舰平台骁龙8也仅支持18bit HDR,OPPO这第一次自研芯片,就可以将其位宽提高到20Bit。这2Bit之间,画面宽容度整整提升4倍(2的20次方与2的18次方对比),直接从原来的25万:1,提升到100万:1。
影像|传感器堆料热退去,手机影像该看AI芯片了?
文章插图
此外,马里亚纳 MariSilicon X还可以实现4K 30帧AI夜景。拍照比拼已难分胜负,视频是下一个竞争赛道,而视频的实时处理特性,令其难度远大于照片的先拍后算。OPPO能同时实现4K+AI+HDR规格夜景视频,已经摸到了目前手机影像性能的天花板。
在发布之初,OPPO还公布了一段「马里亚纳 MariSilicon X原型机」、iPhone 13 Pro Max以及OPPO Find X3 Pro三台手机在4K极限暗环境下实拍对比。从中我们可以看到,无论是亮度、色彩以及细节的还原,三者之间差距都非常明显。
之所以能实现如此优异表现,也离不开马里亚纳 MariSilicon X高达18TOPS@int8的计算能力,它的表现比搭载骁龙888的OPPO Find X3快了20倍,单从AI算力上来讲,它已经超越苹果目前最新的A15 SoC处理器,后者AI算力约15.8TOPS。
当然,马里亚纳 MariSilicon X 能力不止这一方面,其还拥有实时RAW计算、RGBW Pro以及双层存储等等很多的特点。简单理解的话,马里亚纳 MariSilicon X未来在智能手机中的应用将独立于SoC存在,而不是替代SoC中AI能力,最终目的是对手机影像的独立提升,实现1+1>2的结果。
双芯或成为自研芯片超车的主流选择影像|传感器堆料热退去,手机影像该看AI芯片了?
文章插图
目前的手机行业中,大多采用的都是主流SoC的平台架构,其承载了手机运行过程中的主要处理工作,其实它也是集成了CPU、GPU以及NPU等不同的芯片模块,只是封装到同一颗芯片而已。

推荐阅读