谷歌在计算摄影上震惊苹果：“这不是疯狂的科学”

 
即使我是iPhone的长期用户，每年Google都会举办其年度Pixel手机盛会时，我还是要注意，因为这是Android手机制造商必须说服我做出重大转变的两个机会之一-三星的Galaxy Unpacked活动S系列电话是另一种。三星通常会推出尖端的硬件-漂亮的屏幕，快速的无线功能和新的摄像头-Google则采取了不同的策略。 Pixel团队的Sabrina Ellis在介绍Pixel 4时说：“硬件不是使我们的相机如此出色的要素。使我们的Pixel相机与众不同的特殊之处在于我们的计算摄影。”
计算摄影无疑已经成为Pixel手机的主要卖点。去年令我嫉妒的Pixel 3一项功能是Night Sight，这是Google开发的机器学习技巧，可以立即将亮度和色彩还原为昏暗的照片。还有另一种鲜为人知的，称为Super Res Zoom的Pixel 3功能，该功能使用多次曝光来代替普通的“数字变焦”性能。简而言之，高速移动处理器和相机从根本上重新定义了日常摄影，而且每年似乎Google都在引领潮流。
当苹果营销主管Phil Schiller上个月上台讨论Deep Fusion(一种新的iPhone神经引擎技巧，可以从9次曝光中提取更多细节)时，他将其称为“计算摄影疯狂的科学”，引起了观众的欢呼和掌声。 。但是在今天的“ Google制造的19周年”活动中，Google研究人员和斯坦福大学名誉教授马克·勒沃伊(Marc Levoy)向营销人员发出了一个有趣的镜头：“这不是’疯狂的科学’，而是简单的物理学。”
一方面，我可以了解Levoy教授的来历：当您花费数年时间开发出色的Google计算摄影技巧时，例如单镜头人像模式，合成补光，夜视和Super Res Zoom，被描述为一个快速跟上竞争对手的疯狂科学家(甚至是在开玩笑)可能会感到不敬。我也可以理解响应的渴望，尤其是对创新背后的基础科学的精辟参考。这是一个很好的报价，引起了我的注意，并遮住了苹果，所以……任务完成了吗?
但另一方面，这些创新的最好细节已经远远超出了普通人的理解范围，可以说到明年，最好使用单独的主题后摄像头聚光灯来更好地服务于Google和Apple这样的智能手机发布活动。与从单个镜头中提取更多细节的AI技术相比，添加第二个镜头要容易得多。我认为席勒(Schiller)对“疯狂的科学”的轻描淡写是“以难以解释和梦想的方式进行创新”的简写，实际上，大多数观察者对苹果公司的活动一无所知，甚至不知道Deep Fusion是如何工作的或它所做的事，而不是“添加更多细节”。
有趣的是，这就是计算摄影的关键所在。结合多次曝光以提取更多细节的“简单物理学”不仅已成为生成更好照片的可行方法，而且已成为足以用于年度智能手机更新的强大卖点，并且几乎扼杀了基本独立相机的销售。正如我在前一篇文章中提到的那样，Apple的Deep Fusion详细介绍了多曝光高动态范围(HDR)照片对亮度和色彩所做的处理，它使用数学和机器学习来确定并保留多幅图像中的最佳像素。 Google的最新产品，例如长时间曝光的天文摄影模式，实时HDR +预览和双重曝光拍摄，都使用软件来与竞争对手匹敌，甚至不超过最新，最昂贵的数码单反相机。
机器学习，设备上的神经引擎以及组件性能的整体改进确实结合在一起，彻底改变了袖珍摄影技术。 Pixel团队可能会低估其相机解决方案中硬件的相对重要性，并且的确，Pixels的镜头数量不及iPhone 11 Pro机型，也没有百万像素的其他Android竞争对手。但这是毫秒级相机传感器和图像处理器响应能力，高性能神经分析以及富有创意的，受过良好训练的照片软件的完整套件，使普通人能够“瞄准并拍摄”自己的方式来获得清晰，细腻的图像。用他们的手机。
致使这些创新成为可能的疯狂科学家们，就在这里。对于开发人员来说，这可能只是简单的物理学，但对于我们中越来越依赖于您的相机中的计算摄影技术的那些人，结果的确似乎越来越像魔术而不是科学。我迫不及待地想知道下一场演出您会发现哪些新花样。