【Tech】啥是DeepFusion?看完这篇你就懂了!

简介: 【Tech】啥是DeepFusion?看完这篇你就懂了!

2019年10月29号的大半夜,苹果放出了iOS 13.2正式版的更新,顺手还更新了一波AirPods。之前发布会上提到的iPhone 11专属的Deep Fusion也正式上线,利用A13的神经网络引擎,可以在低光照环境下获得噪点更低的照片。


1.jpg


更新介绍讲的超级简单,但是小口袋知道这一切并不是那么简单!这篇文章讲讲Deep Fusion到底是个啥?用来干嘛的。


DeepFusion(深度融合)简介


DeepFusion中文翻译应该叫深度融合,那么是怎么个融合法呢?看图:


2.jpg


简而言之,9图合成1图。DeepFusion采用的技术简单来说就是,当你按下快门,相机会先拍4张短时间曝光的照片,然后再以正常标准曝光拍4张,最后拍一张长曝光获取暗部细节,然后将这九张照片自动分析,选择其中解析力最高的部分进行合成。 在A13的加持下,合成速度只需要半秒到一秒半秒左右(其他处理器由于缺少对于ISP,无法实现该功能)。最终可以得到一张2400万像素的照片(2.6MB的HEIC格式,正常情况下的Smart HDR照片约为1.4MB HEIC格式)    不得不说,苹果这一次的技术革新让我们耳目一新,当一众厂商还在疯狂堆积像素时,苹果试图用1200万像素的镜头,诠释什么才是手机相机应该有的样子。也许从一开始,苹果就与其他手机不在一条赛道上。


怎么开启DeepFusion?


DeepFusion开启不需要任何调节,拍摄方式一如既往的简单:按下快门即可,其余交给苹果。只要光照在10-600lux就会自动打开,并会在打开后自动关闭超取景模式。 值得注意的是,DeepFusion由于需要大量的计算量,连拍模式下连A13都会吃不消,因此开启时连拍会变慢,并且拍摄到照片在相册中会暂时显示为预览图,需要过一段时间才能获得处理过的完整照片。 事实上苹果故意弱化了连拍功能,以前连拍长按拍照按钮就可以了,现在用iPhone 11你再试试?


3.jpg


是的,iPhone 11将长按拍照按钮变成了快速录像,而连拍功能则需要在按下快门后快速向左滑动。这也是为了有效避免用户不小心长按拍摄按钮,导致DeepFusion疯狂开启后大量消耗资源的妥协之策。
也正是因此,DeepFusion只能用于拍照,并不能用于视频拍摄,A13再强也扛不住,如果A12X能拍DeepFusion,估计也扛不住用来拍视频。


照片对比


4.jpg


可以很明显看出,开启DeepFusion后照片清晰度大幅度提升,主要原因之一是DeepFusion照片像素是2400万的,比正常拍摄像素提升了一倍!via


5.jpg


其他细节一览


小口袋特地做了一个图片,解释一下iPhone 11系列(iPhone11  iPhone 11 Pro和Pro Max)在拍照时到底是怎么一回事:


6.png


   由于DeepFusion的功能实在太过强大,甚至有人怀疑iPhone是不是采用了一枚4800万像素的镜头进行超采样输出,然后合成为2400万像素的照片。  

  这也是目前DxOMark至今不敢给出iPhone 11系列拍照得分的原因:iPhone 11相机的能力,可能还有待开发,每一次升级系统都可能带来巨大的提升,这让评分变成了一件很尴尬的事情。


   这也让我们对苹果似乎有了些不一样的认识,Deep Fusion似乎是对其他一众设备上的相机的嘲讽,在其对ISP芯片和NPU的深度挖掘下,几乎没有厂商目前有能力与其抗衡。而苹果将其如此强大的处理器和相机性能,用来做了一件极其平凡而又不平凡的事情,提升当前分辨率下照片的绝对清晰度,这让我们感觉到曾经的苹果似乎回来了。


   我们对下一次iOS 13.3的大更新也有了更多期待,iPhone 11上究竟还有什么神奇的黑科技有待开发呢?比如至今苹果只字未提的U1超宽频芯片,或者是Wi-Fi 6带来的强大能力?敬请期待吧!


大家觉得DeepFusion这个功能怎么样呢?下次苹果又会更新什么黑科技呢?                             欢迎留言讨论~

目录
相关文章
|
6月前
|
SQL 机器学习/深度学习 缓存
心得经验总结:深入Dapper.NET源码(文长)
心得经验总结:深入Dapper.NET源码(文长)
91 0
阿里大牛1个月肝出一份35万字Security实战笔记,GitHub标星47k+
很多时候,一个系统的安全性完全取决于系统开发人员的安全意识。例如,在我们从未听过SQL注入时,如何意识到要对SQL注入做防护?关于Web系统安全的攻击方式非常多,诸如XSS、CSRF等,未来还会暴露出更多的攻击方式,我们只有在充分了解其攻击原理后,才能提出完善而有效的防护策略。在笔者看来,学习Spring Security并非局限于降低Java应用的安全开发成本,通过Spring Security了解常见的安全攻击手段以及对应的防护方法也尤为重要,这些是脱离具体开发语言而存在的。
阿里大牛1个月肝出一份35万字Security实战笔记,GitHub标星47k+
《More Effective C# 》读书笔记 第一章
《More Effective C# 》读书笔记 第一章
|
SQL 开发框架 算法
【读书笔记】《Effective C#》50条建议笔记整理
对《Effective C#:改善C#代码的50个有效方法》一书整理的读书笔记。
28227 5
【读书笔记】《Effective C#》50条建议笔记整理
|
机器学习/深度学习 人工智能 算法
【花书笔记】 之 Chapter01 引言
【花书笔记】 之 Chapter01 引言
【花书笔记】 之 Chapter01 引言
|
机器学习/深度学习 人工智能 算法
重磅 | 吴恩达新书《Machine Learning Yearning》1-52 最新章节分享
重磅 | 吴恩达新书《Machine Learning Yearning》1-52 最新章节分享
172 0
重磅 | 吴恩达新书《Machine Learning Yearning》1-52 最新章节分享
tech| 开源之路: github PR 走起
想快速提高编程能力, 还不快来 「全球最大同性交友社区」~
127 0
|
架构师 C++
开源项目推荐:libunibreak,现代C++实战30讲作者,吴咏炜
开源项目推荐:libunibreak,现代C++实战30讲作者,吴咏炜
671 0
|
算法 测试技术 C++
Google Interview University - 坚持完成这套学习手册,你就可以去 Google 面试了
本文讲的是Google Interview University - 坚持完成这套学习手册,你就可以去 Google 面试了,这是我为了从 web 开发者(自学、非计算机科学学位)蜕变至 Google 软件工程师所制定的计划,其内容历时数月。
3189 0
源代码下载 作者:王先荣(Xianrong Wang)
作者:王先荣(Xianrong Wang) 下面是我的一些源代码: 1. 图像处理学习系列源代码——包括该系列文章的几乎所有代码; 1.5. 图像处理学习系列中用到的dll文件包——将这个解压缩之后放到Debug或者Release目录中; 2. OpenCV2.1的新特征; 3. 直方图; 4. 非参数背景生成; 5. 特征检测; 6.RANSAC示例。
928 0