首页 > 科技未来 > 内容

苹果为iPhone 12系列的影像系统带来了哪些创新?

发布于:2024-06-21 编辑:匿名 来源:网络

Jon McCormack 担任苹果公司的软件副总裁。

他的重要工作是:进一步改进 iPhone 的成像系统。

在测试了 iPhone 12 和 12 Pro 后,我对成像系统的改进感到兴奋,计算摄影的加入是一个巨大的成功。

同时,我也有很多疑问。

在与乔恩·麦科马克的跨洋通话中,他尽可能详细地回答了问题。

参与采访的还有iPhone 12产品经理Vitor席尔瓦。

以下为采访内容: 问:这几天在试用iPhone 12系列的过程中,我感觉到照片和视频拍摄的质量有了很大的提升,这是很高兴的。

您能先请Vitor简单介绍一下今年iPhone 12系列的改进吗?首先,我们在 iPhone 12 和 12 Pro 上安装了 f/1.6 光圈的主摄像头。

这是 iPhone 上光圈最大的相机。

因此,您的照片和视频将具有更明亮的图像和更少的噪音。

而且我们这次使用了7片租赁镜头,进一步提升了画面质量。

然后,我们在 iPhone 12 Pro 上搭载了一项新技术——LiDAR。

它的全称是“光探测与测距”。

通过检测光束发射和返回所需的时间,可以确定到物体的距离。

由于LiDAR可以在黑暗中工作,我们可以用它来加快相机在夜景中的对焦时间,最多可加快6倍。

这些新功能的背后是 iPhone 最新的 A14 Bionic 芯片,这是所有手机中速度最快的芯片。

以及新的图像信号处理器,它可以更好地整合图像,减少早期毛刺,并带来更好的 HDR 视频功能。

有了这些硬件的支持,我们就进入了第三步,就是软件系统。

乔恩·麦科马克会告诉你更多。

问:在今年的 iPhone 发布会上,我们听到了很多关于“计算摄影”的话题。

乔恩是软件界的副总裁。

请告诉我,苹果如何看待“计算”和“摄影”之间的关系?过去,我们想要拍出质量更好的照片,只能在“拍摄”环节改进硬件。

我们买非常非常大的胶卷——大画幅相机的底片真的很大,安装起来很麻烦——我们买非常非常贵的镜头,我们手动控制景深和曝光,我们按小心快门。

但我们现在用的iPhone,镜头就这么小,感光元件也只有指甲盖那么大。

那么我们如何找回模拟时代的体验呢?我们需要依靠“计算”,让手机做很多数学题。

通过从各种传感器(例如新添加的激光雷达)获得的信息,手机可以自动完成过去在“数字暗室”中手动完成的工作。

问:那么,“击败专业单反和电影摄影机”是你的目标吗?这不是我们的想法。

在iPhone 12样片拍摄过程中,我们能够将拍摄团队缩减到非常小的规模,只有几个人就完成了样片拍摄。

以前想要拍这样的镜头,需要很多人。

有些人会携带机器,有些人会测量光线,有些人会聚焦,有些人会操作电影摄影机。

这种改变是我们工作的核心。

我们的目标是让每个人都能讲述自己的故事,并让每个人都能获得最好的技术——比如杜比视界。

他们可以从口袋里拿出一部小巧的手机,拍摄周围温馨的场景,进行编辑,然后分享。

整个过程就是一段“杜比视界HDR”视频。

体验非常棒。

Q:不过,目前的手机视频似乎还没有像手机照片那样在“计算摄影”方面达到很高的完成度。

这里的瓶颈是什么?拍摄视频与拍摄照片不太一样。

拍照时,手机有足够的时间进行后期处理计算。

但拍摄视频时,每秒有30甚至60帧,需要完成的计算任务非常多。

这几年手机视频中色调的成像质量已经解决得很好了,大家都处于差不多的水平。

嗯,挑战主要是围绕阴影和高光。

如果你注意的话,今年的 iPhone 屏幕暗部的噪点少了很多,而且屏幕也干净很多。

此外,今年我们将视频的颜色深度从 8 位增加到 10 位。

我们利用了多次录音中记录的色彩信息来更好地还原高光部分。

另外,我们今年在延时摄影中加入了“夜景模式”。

这实际上是视频的类别,而不是拍摄静态照片。

这和照片的“夜景模式”实际上是两套不同的代码,因为拍摄视频需要更快的处理。

照片和视频的“夜景模式”共享很多计算逻辑和知识,但本质上还是有很大不同的。

Q:您认为目前手机感光元件的实际动态范围能够养活HDR视频所能承载的动态范围吗?移动视频的提升是一条非常漫长的路。

A14芯片对于HDR视频拍摄能力有很多优化。

其神经网络引擎速度提升80%,提供强大的多帧融合能力。

当你将 iPhone 12 Pro 上的视频与上一代进行比较时,它已经是一个巨大的进步。

将来,您将看到这方面的更多改进。

问:当我观看当前 iPhone 的“杜比视界 HDR”视频时,传输到电脑后会显示一条 HLG 曲线。

这似乎与我们过去处理过的“杜比视界”材质不同——它们都使用记录绝对亮度值的 PQ 曲线。

为什么要这样做?在iPhone内部,这就是一个完整的“杜比视界”拍摄过程。

这是该标准的新 8.4 版本。

我们和杜比有过深入的合作。

该标准将得到更广泛的应用,更多的设备将从中受益。

你看到的HLG曲线是为了更好的兼容性。

我们希望导出的视频文件可以在各种设备和屏幕上观看,HLG 曲线满足了这一需求。

Q:我看现在的HDR视频时,如果直接从手机传输到社交网络,颜色会有点偏差。

如何解决这个兼容性问题呢?在iPhone内部的视频过程中,我们保存了两组元数据,一组对应HDR,一组对应SDR。

随着 iPhone 12 和 12 Pro 的推出,我们将推送新的 iOS 版本。

届时,将会有一个新的API,允许应用程序告诉系统是否支持杜比视界HDR视频,以便系统上传正确的动态范围。

的版本.问:我觉得今年的 HDR 照片与去年的 HDR 照片有所不同。

亮点好像更亮了?是这样吗?与 iPhone 11 Pro 拍摄的 HDR 照片相比,我们今年还在存储的照片文件中添加了“高光图”。

这可以充分利用我们今年推出的Super Retina XDR Display来显示两档更高的亮点,让用户直接在手机屏幕上看到更大的动态范围。

这就是为什么,当你看手机上拍的蓝天白云时,你会觉得云彩比以前手机上的更亮。

访者注:在测试过程中,我们看到iPhone 12系列拍摄的视频的HDR格式为“杜比视界,版本1.0,dvhe.08.04,BL+RPU,HLG兼容”。

在“dvhe.08.04”字符串中,“dvhe”指杜比视界高效率。

根据白皮书《Dolby Vision Profiles and Levels Version 1.3.2》中的信息,“08”表示Profile版本为8,“04”表示级别为x @ 30。

Profile 8的编码为“10-bit HEVC”,信号兼容性是“1、2或4”,即HDR10、SDR以及一种“适用于特定广播和移动设备”和“针对某些特定设备进行优化”的标准。

(引自杜比9月16日发布的公开信息, 2018.)“BL+RPU”指的是“基础层+参考图片单元”,我们推测iPhone拍摄的HDR视频可能在HLG曲线之外,为播放设备提供正确分析SDR的参考信息(RPU)。

苹果为iPhone 12系列的影像系统带来了哪些创新?

和 HDR 颜色,并重新分析 HLG 曲线记录的颜色——正如 Jon McCormack 所说的“两组元数据”。

事实上,iPhone 12 录制的视频中有三组元数据。

我们目前不知道它们的元数据。

截至发稿,尚未找到有关 iOS、macOS 和 tvOS 上的“Dolby Vision Profile 8.4”和“Dolby Vision New API”的更多信息。

苹果为iPhone 12系列的影像系统带来了哪些创新?

站长声明

版权声明:本文内容由互联网用户自发贡献,本站不拥有所有权,不承担相关法律责任。如果发现本站有涉嫌抄袭的内容,欢迎发送邮件 举报,并提供相关证据,一经查实,本站将立刻删除涉嫌侵权内容。

标签:

相关文章

  • 南方电网建鑫成功发起设立南方电网双碳绿色电力基金

    南方电网建鑫成功发起设立南方电网双碳绿色电力基金

    投资界(ID:pedaily)据12月8日消息,近日,南方电网建鑫基金管理有限公司发起设立南方电网双碳绿色电力基金< titlesplit >投资界(ID:pedaily)。 南方电网资本控股有限公司旗下子公司南方电网有限公司(以下简称“南方电网”)成功发起设立南方电网双碳绿色电力基金并参与

    06-18

  • 【每日投资事件】上市遇难半年涌现1914起并购案例

    【每日投资事件】上市遇难半年涌现1914起并购案例

    半年涌现案例A股市场掀起史上最大规模并购浪潮  近段时间,国内资本市场掀起了轰轰烈烈的并购热潮,双汇收购美国史密斯菲尔德公司、蒙牛收购雅士利、森马收购GXG等几起大型并购案引起了市场的高度关注。 事实上,在IPO长期暂停、PE生存艰难的情况下,中国资本市场的并购早已

    06-18

  • 罗永浩透露,即将完成新一轮10亿美元融资, 2016年锤子危险“复活”后

    罗永浩透露,即将完成新一轮10亿美元融资, 2016年锤子危险“复活”后

    据投资界8月6日晚消息,在今天的极客公园大会上,罗永浩透露了锤子手机新一轮融资规模。 10亿元人民币左右。 “这意味着,从明年开始,我们将像一家已经进入扑克牌桌的正规手机制造商一样,每年推出高、中、低三个品类5-6款产品,成为一家正规的手机制造商。 ” ”   他笑着

    06-17

  • 国家中小企业发展基金第二批两只新子基金签约实施,认购规模50亿元

    国家中小企业发展基金第二批两只新子基金签约实施,认购规模50亿元

    创造头条新闻近日,第二批第五、第六只子基金签约落地国家中小企业发展基金有限公司完成合同签订,中标子基金管理机构为深创投、联想创投,认购规模为50亿元。 第二批国家中小企业发展基金新设两只子基金:中小企业发展基金深圳创业投资(新疆)有限合伙企业、中小企业发展基

    06-18

  • vivo X Fold折叠屏体验:目前最给力的全尺寸折叠屏

    vivo X Fold折叠屏体验:目前最给力的全尺寸折叠屏

    “这款手机要一万多块钱了”。 这是我刚拿到vivo X Fold后脑子里突然冒出来的一个想法。 ▲ 抽屉式包装,质感十足。 在和同事讨论的过程中,vivo X Fold的机身质感几乎是通用的,而且有一种高端商务的感觉。 ▲ vivo X Fold给人的第一印象就是“坚固”,其次是边框的磨砂材质

    06-21

  • 阿里云创新中心正式发布“云创基金开放合作计划”

    阿里云创新中心正式发布“云创基金开放合作计划”

    闃块噷浜戝垱鏂颁腑蹇冩寮忓彂甯冣?滀簯鍒涘熀閲戝紑鏀惧悎浣滆鍒掆?濄??2020骞?0鏈?9鏃ワ紝闃块噷浜戜簯鏍栧ぇ浼氱洓澶紑骞曘?傛湰娆″ぇ浼氫互鈥滃墠娌挎帰绱笌鎯宠薄鈥濅负涓婚锛屼細瑙佷簡浼楀閲嶈鍢夊鍜岀鎶?鐖卞ソ鑰呫??銆佷骇涓氫紮浼淬?佹姇璧勬満鏋

    06-17

  • 路透社:三星电子将合并移动和消费电子部门

    路透社:三星电子将合并移动和消费电子部门

    12月7日,三星电子表示,公司将合并移动和消费电子部门,重点发展逻辑芯片业务。 这一重大举措是这家全球最大存储芯片和智能手机制造商在副董事长李在镕 (Jay Y. Lee) 因贿赂指控于 8 月假释后发生变化的最新迹象。 三星视觉显示业务负责人韩钟熙 (Han Jong-hee) 晋升为副董事

    06-08

  • 谷歌街景发现了躲藏二十年的逃犯

    谷歌街景发现了躲藏二十年的逃犯

    互联网技术这几十年的发展,引领世界进入大数据时代。 人们可以轻松地找到他们想要的信息,即使是曾经生活在异国他乡的人。 只在书本上见过的地名。 尤其是近年来,人们的出行已经不像以前那么方便了。 一些人已经开始利用街景地图开启“云出行”。 街景相机拍摄的真实场景可

    06-21

  • 360财经宣布推出360水客新品牌

    360财经宣布推出360水客新品牌

    北京时间8月7日,金融科技平台财经正式宣布品牌升级,推出“水客”新品牌。 为了应对金融科技2.0时代的新挑战,舒客去年启动了战略升级。 经过与上海交通大学共建人工智能联合实验室、引入首席科学家、搭建数据AI中台、改变组织架构等一系列科技投入措施,品牌升级已成为公司

    06-17

  • 蜗牛支持IPO

    蜗牛支持IPO

    A股博彩业的利润创造者王吉比特到处复制他的小而美模式。 他孵化的第一款成熟“作品”青瓷游戏已经通过听证会,即将在港交所上市。 。 和吉比特一样,青瓷游戏仅凭借一款爆款产品就实现了业绩的飙升,但问题也由此而来——当护城河只有产品时,如何保证不断有爆款产品?当《最

    06-17

  • 华研精机为LP,联合发起新基金

    华研精机为LP,联合发起新基金

    投资圈——解码LP消息,9月9日,华研精机公告称,公司将以自有资金1万元作为有限公司与广州南粤合作、澳德股权投资基金管理有限公司、广州兴增股权投资合伙企业(有限合伙)、广州南粤基金集团有限公司共同发起设立广州兴科创业投资合伙企业(有限合伙)(暂定)名称,最终名

    06-18

  • 贵阳市产业发展基金招募GP(2023年第三批)

    贵阳市产业发展基金招募GP(2023年第三批)

    为进一步做好贵阳市产业发展基金(以下简称“产业发展基金”)子基金管理机构公选工作,充分发挥发挥市场资源配置作用和财政资金的引导和放大作用,引导社会资本投资贵阳、贵安重点产业领域,支持“省会强省”战略的实施,推动贵阳、贵安等省市的实施。 贵安市“产业倍增行动

    06-17