三年,这芯片我等了整整三年

2022年2月28日 385点热度 0人点赞 0条评论

图片

上周,微信更新了一个史诗级的功能!


无论是安卓还是 iOS,现在都已经正式支持 4K HDR 视频传输,而且还能点击原视频。(限制 1GB 大小)


机哥玩了一整天,就当是好好地出一口 200MB 的恶气。图片


斗图有什么意思。


斗 4K 视频呀!把微信服务器的硬盘和带宽都给我吃满它!


图片


但是!我说但是了!


在互相发送/接收了一堆 4K 视频之后,机哥发现了一个问题。


虽然抽屉里有几百台手机,但除了 iPhone,我好像找不出多少能把 4K 视频拍好的手机。图片


注意,不是拍,而是拍好。


特别是夜景视频,只要夜景功能一开就是 1080P…那怎么可以的呀?


库克赢麻了…


图片


正当我抱怨的时候。


远在对面的阿姜抬起了头:除了 iPhone,好像还有一个可以试试。

图片?OPPO Find X5 Pro?


机哥的第一反应,就是「我不信」。


但当我真的拿起手机,出门拍了些 4K 视频之后。图片

好像有一点点不同。

图片

它,支持 4K 夜景视频。图片

它,也支持 4K HDR 视频。图片

而且,还是 20bit 的高画质 4K 视频!图片

图片

这是从视频中截取的一帧,机友们注意康康广州塔本身的细节和地面灯带的细节以及夜空的纯净度。图片

图片

别看右边好像总是会更亮,但你康康画面文字、灯光的高光控制,右上角暗部飘过的泛红噪点,OPPO 的表现明显都要更好一些。图片

为了把 4K 视频拍好,OPPO 在 Find X5 Pro 上多装了一颗芯片,就是之前那鼎鼎大名的「马里亚纳 Marisilicon X」。

可以说,Find X5 Pro 的影像这么强,这颗芯片有一半的功劳。图片

经过上周的发布会,大家应该已经初步了解了「马里亚纳 X」是什么东西。

图片

但,机哥觉得还可以补充一下。

扒光马里亚纳 Marisilicon X

马里亚纳 X,是一颗 DSA 架构的,影像专用的, NPU 芯片

别跑,我稍微举个例子你就懂了!图片

DSA 架构,是通过专用的运算性能来专门负责某项运算「加速」的新一代架构。

我拿洗衣服来举例子,衣服就是手机要处理的数据,那洗衣液就是 CPU/GPU。

DSA 架构的芯片,就是在洗衣服的时候,额外增加的去渍剂,它只针对污渍增强洗衣服的效果。图片

也就是说,它是点对点增强某一项处理性能的。

所以,未来你可能还会看到很多各种各样的 DSA 架构芯片,那时候你得记着,OPPO 这颗马里亚纳 X,是里面专门用来加速图像运算的类型。

图片

再举一个可能不太合适的例子,这颗额外的 NPU 芯片就像是你的头里面多长了一颗小小的,特别特别会算数学题的小脑袋一样。

这颗脑子虽然小,但它整个脑子都只做数学相关的处理和对应带来的数学计算,由于专脑专用,它还带来了一些它才有的特性。

比如算数学特别快…之类的。

马里亚纳 X 也一样。

图片它在 AI 运算性能方面有着碾压式的表现,运算性能达到 18TOPS,每秒可以进行 18 万亿次运算


它还提供了超过目前行业通用平台 4 倍的 ISP 位宽以及动态范围,支持 20bit 处理位宽和 20bit 的动态范围。

图片

在这一项性能上,它真的是超过苹果 A15 的,就是库克来了也得这么说。

图片用上这颗芯片后,OPPO Find X5 Pro 就能够通过更强且专门为影像所用的算力,去更快地运算自己的算法,拍出好的影像内容。

这下明白了吧~

图片

除了更快更强,马里亚纳 X 还有一个优点。 

由于工作更专注,这些 DSA 芯片的功耗还会更低,或者说能耗比更高。图片

有了这颗功耗更低、算力更强、运算速度更快的 Marisilicon X 芯片后,OPPO 开始着手在之前不太好处理的 RAW 域进行图像优化。


图片

Emmm,又会有一点点复杂,机哥尽量简单一些把它说清楚。


首先,用手机拍摄影像是需要经过好几次转换的。


它需要把从传感器得到的 RAW 图像转换为 RGB 图像;

图片在 RGB 域后,再次经过编码,转换为 YUV 域的图像。

在 YUV 域的时候,相机的 AI 算法会介入,对图像进行处理。

最后,再输出一张我们看到的照片。

图片

但是!


每一次转换,数据都会有损失。


到 YUV 域的时候,在手机的算法参与优化图像的之前,这些图像因为算法转换已经有损了。图片

怎么说呢,它就像是做饭,在你烹饪之前,这些食材已经经过了冷冻/长途运输。

拿着这些食材,你废更多的功夫,往往也不如新鲜食材的口味好。


懂行的广东人都知道,食材要吃新鲜的。

图片

那我们的算法可不可以在图像还没转换到 RGB 之前就参与处理一遍呢?

可以,但工序更多。


提前在 RAW 域处理意味着手机要处理更为庞大的数据量。


图片

再加上要很快地出图,很多手机厂商都没有把运算前置到 RAW 域进行。图片

但额外增加这颗马里亚纳 X 芯片,可以支持高达 20bit 位宽的 RAW 域数据处理,4 倍于行业通用平台的性能,就能很好地解决这个问题。

目前高通骁龙8 处理器的 ISP 能提供 18bit 的处理能力。图片

特别提醒:用了马里亚纳 X,也是可以接着调用高通骁龙 8 的这颗 ISP 滴,两颗芯片都用,才是 OPPO Find X5 Pro 的核心方向。

图片

由于马里亚纳 X 是能够提供 20bit 实时计算的,所以,OPPO Find X5 Pro 还支持 4K 20bit Ultra HDR 视频录制。图片

啊对!OPPO 后期还会 OTA 一个实时预览的功能,在拍摄页面就能清楚看到视频处理后的效果。图片

除了芯片外,如何处理影像的算法也是一个很重要的事情。


上回说 Marisilicon X 的时候,有机友说 OPPO 不如好好搞搞自己的算法


图片算法这事儿啊,其实,在 OPPO Find X5 Pro 上,也做了。


自主研发 3A 算法

手机上一直有一套固定的算法,叫 3A 算法。图片

所谓 3A 算法,就是自动对焦(AF)、自动曝光(AE)和自动白平衡(AWB)算法。

这三个自动算法决定着色彩、细节、清晰度等等的诸多内容,它有多重要,懂的都懂。

图片

目前我们手里的手机,很多都以芯片/平台提供的 3A 算法为主。

这就出现了一个情况:由于产品迭代速度的问题,厂商针对算法的开发和训练的时间是很短的。图片

短时间内,往往很难发挥出 100% 的效果。

这和处理器的调校一样,很多厂商往往在中后期才会说自己「100%发挥性能」、「满血榨干」。图片

图片

但是呢,你有没有发现这个「100% 发挥性能」只有特定厂商才用?

像华为、苹果、谷歌,你基本不会想说他们能不能发挥 100% 的性能,除了经验老到,还有一个原因:因为芯片是他们自己做的。图片

换句话说,假如 3A 算法也是由厂商自研,这个问题是不是就能解决了?

OPPO:是的。

所以 OPPO 在 Find X5 Pro 上自主研发了一套 3A 算法,通过自主研发去针对性地解决产品上的一些问题。图片

图片

加上自主研发的马里亚纳 X 芯片,保障了手机的影像算法能发挥更强的性能。

不过啊,会后群访里 OPPO 自己也说了,马里亚纳 X 的能力实在太强,目前开发程度其实只有 30% 左右。

未来,还长呢!图片

除了这个 3A 算法,还有前面提到的 RAW 域 AI 算法,也是 OPPO Find X5 Pro 的一个重点。

有了这些算法和芯片的加持,OPPO Find X5 Pro 还可以进一步增强 APP 的影像表现。

包括直接用微信拍照、抖音拍摄视频等,都可以通过 RAW 域算法和芯片进行画质的优化。图片

图片

这些,应该搞明白了吧?

马里亚纳 Marisilicon X 带来的不只是算力


除了提供算力之外,Marisilicon X 其实还给 OPPO 带来了更多的东西。


图片它,是第一颗由 OPPO 从 0 到 1 自主研发的高性能 6nm NPU 芯片。

它的量产上市,意味着 OPPO 真正具备了自主研发这类行业领先的高性能芯片的实力。

当然,这也意味着 OPPO 多年的芯片投入有了回报。


我记得之前聊马里亚纳 X 芯片的时候,有个机友留言是这么说的。


图片

其实也没错,OPPO 之前也说把第一颗自研芯片叫做马里亚纳 X,正是表明了它的研发难度像马里亚纳海沟一样。


图片说起来,最早曝光 OPPO 要研发自主芯片的时间点差不多是 2018 年,那会儿 OPPO 的自研芯片团队还在「挖人」。


年底的科技大会上,OPPO 宣布加大技术研发投入,从 40 亿一下子提升到 100 亿


图片


到 2019 年底,「马里亚纳计划」这一内部信息曝光。


在未来科技大会后的采访里,OPPO 直接告诉媒体:OPPO 已经具备芯片级能力。


2020 年底,大家都等着 OPPO 掏出这颗自主研发芯片,但…没有。


只是那时,OPPO 又悄悄把未来三年的研发费用调整到了 500 亿图片


图片


一直到消息曝光的三年后,也就是 2021 年底,这颗芯片才终于发布。


有三年磨一剑那味儿了吧?但这三年磨一剑,还是没能完全磨好。


又是几个月后的现在,Find X5 Pro 上这颗马里亚纳 X 芯片也仅发挥了 30% 左右,这颗芯片的生命周期估计至少有两年左右。

从这些故事,你应该能看出来这颗芯片有多难做。图片

庆幸的是,它还是做了出来。

图片

图片这怎么看,都是一件好事吧。

图片来自网络

这次学到干货了吧?

↘↘↘

65610三年,这芯片我等了整整三年

这个人很懒,什么都没留下

文章评论