首页 > 科技未来 > 内容

当你按下快门拍照时,你的手机正在做数学题

发布于:2024-06-21 编辑:匿名 来源:网络

如果你穷,你就会流体力学,如果你伟大,你就会不知所措。

这是航空界流传的一个笑话。

▲ MiG-25:一块不锈钢的旅程。

指的是苏联将32吨不锈钢飞行到3.2马赫的故事,让当时的美国“震惊”。

与黑科技十足的SR-71黑鸟侦察机相比,米格25的做法直接有效,直接使用两台火箭发动机来解决问题。

按照工程师对苏联的非常规思维,“砖”形飞机可以轻松地以超音速飞行。

▲ 马斯克号星舰SN6。

图片来自:cnet 现在的“大砖头飞”的例子应该是马斯克的星舰原型。

它的做法和米格25一样,力量大就能创造奇迹。

如果将航空圈的趣谈转移到影像领域,也可以相应。

在数字时代,图像输出的质量几乎与传感器的尺寸成正比。

规模越大,自然优势就越大。

再加上传统物理光学的制约,很难“逆袭”。

智能手机传感器只有“指甲盖”大小,且尺寸有限,让镜头设计陷入困境。

用传统的成像思维,感觉就像是两面夹击,很难突破物理学的上限,更别说做出一些流行的创新了。

▲ 被认为是“计算摄影之父”的 Marc Levoy 直到第一代 Google Pixel 发布才夺得 DxOMark 桂冠。

那时,人们逐渐意识到“计算摄影”的魅力。

在 iPhone 12 系列发布会上,苹果花了很长时间介绍“计算摄影”在 iPhone 上带来的进步以及功能上的改进。

可以说计算摄影此时已经成为一种趋势。

与传统物理光学的停滞相比,它似乎具有更大的潜力。

甚至仅仅依靠算法就可以达到“强力砖头飞”的境界。

以前,算法可能只是锦上添花,让画面色彩更好看、夜景更纯净、逆光更清晰。

不过,最近,MIX 4 和 iOS 15 对“图像”的处理不仅仅停留在“好看”的层面。

▲小米MIX 4。

小米MIX 4最大的亮点可以说是屏下摄像头技术实现的全面屏。

全屏的概念正在逐步落地。

除了屏幕技术的突破之外,计算摄影在其中也发挥了很大的作用。

如今,CUP面积屏采用“小像素”、“透明导线”等技术来避免衍射效应,增强透光率,但与普通OLED屏幕相比,其透光率仍不足20%。

▲ OPPO 屏下摄像头原型机。

在小米MIX 4之前,OPPO也公布了自家的屏下摄像头原型机,并表示下一步目标是将透光率提升到40%,但距离传统的90%还有很大差距。

有很多空间。

这个空白留给了“计算摄影”,将物理光学转化为数学问题。

根据小米的分享,MIX4的摄像头在产线时会根据屏幕进行一一校准,然后利用“衍射模型”削弱衍射效应,并进行多帧HDR、降噪、去雾等操作。

在最终成像之前,还会进行一系列的细节、色彩优化等。

▲ 小米MIX 4调用QQ自拍。

通过我们之前的实测,这个操作基本上可以达到接近80%的自拍效果。

但这些算法的调用仅限于自带相机App,尚未向第三方开放或第三方进行针对性优化。

第三方应用程序很容易调用前端并“暴露”它。

在 iOS 15 中,苹果还使用“算法”来消除 iPhone 摄像头的光学缺陷。

▲ iPhone 拍摄。

图片来自:Reddit 从 iPhone 11 系列开始,由于镜头设计的原因,在使用点光源拍摄时,尤其是在夜间,会出现“重影”,就好像现实世界中存在透明的一面一样。

镜子很一般。

无论是在微博还是Reddit上,都引发了不少讨论。

直到iPhone 12系列发布,苹果依然没有对其做出改变,鬼魂依旧。

▲ 右图为 iOS 15 Beta 4。

当你按下快门拍照时,你的手机正在做数学题

图片来自:Reddit 在 iOS 15 Beta 4 更新中,苹果使用了算法来处理一些照片中的重影问题。

除了擦除之外,iOS 15 Beta 4 的这项功能还会根据图像内容自动识别重影。

从这一点来看,风景照片更容易判断,但在室内,可能就没那么有效了,重影仍然存在。

▲ 右图为 iOS 15 Beta 4。

图片来自:Reddit,并且在 Reddit 上的相关帖子下,重影从 iPhone XS 到 iPhone 12 Pro Max 都可以优化,而不仅仅是最新机型。

随着9月份iOS 15正式版的到来,相信“重影”问题将会得到更好的消除。

在传统成像领域,“重影”只能通过光学设计避免而难以完全消除。

超广角镜头采用夸张的大镜片,以及各种内非球面镜片等特殊镜片来避免“缺陷”。

苹果利用算法来解决光学缺陷可以说是一种新的做法,脱离了传统影像厂商在镜头上堆材料来解决缺陷的惯性思维。

▲ 乔恩·麦科马克。

记得在 iPhone 12 系列发布会后接受采访时,苹果软件副总裁、同时负责 iPhone 影像系统的乔恩·麦科马克 (Jon McCormack) 表示,“苹果的思维方式与专业的传统影像制造商不同”,“我们的目标是让每个人讲述自己的故事。

“换句话来说,相比无反相机、单反等具有工具属性的产品,智能手机图像更多地基于用户的视角,比如通过算法、多帧合成来优化色彩。

” “夜景”、HDR等。

同时,智能手机是目前唯一能够兼顾采集、编辑、处理、分享的设备,具有特殊的地位。

这也是“计算摄影”诞生的原因,在传统摄影领域被认为是一种“古怪”的做法。

与如今的专业影像厂商包括手机厂商不同,他们其实一直在探索相机3.0的革命性创新。

(相机1.0是胶片时代,2.0是数字时代,从化学领域走向物理领域。

) ▲Light L16。

图片来自:theVergeLight L16 多镜头相机被《华尔街日报》称为“相机的未来”,《国家地理》甚至称其为革命性相机。

其采集原理类似于现在智能手机的多摄像头系统。

16个镜头(广角、长焦、中长焦等)共同参与成像,最终输出一张“完美”的照片。

▲ Light L16最终成像时使用的不同镜头。

Light L16的概念一出,就成为媒体的宠儿,还获得了谷歌风投1万美元的投资。

然而,该产品的推出却不断延期和推迟。

最终推出的Light L16相机并没有实现最初的愿景,只是硬件和软件都一团糟。

台湾Mobile01的相机编辑Ki_min经过测试发现,所谓的多镜头算法合成其实就是简单的数字裁剪,很多功能都没有实现。

最关键的是,Light L16不具备任何计算能力来解决机器内的“一站式”处理,仍然需要PC级计算平台的辅助来完成最终的输出。

现在回想起来,Light L16应该只是一个半成品。

缺少的其实是计算平台和算法。

能够成功吸引大量媒体关注,成为媒体宠儿,其实依赖的是成像概念,也就是算法,现在被称为“计算摄影”。

“计算摄影”最初的出现是为了弥补手机中感光元件较小的缺陷。

随着芯片算力的提升,智能手机成像逐渐成为竞争赛道,让“计算摄影”全面提升。

如今,随着算法的优化,CUP全面屏已经成熟,曾经困扰镜头设计者的“重影”已经消失。

计算摄影不再扮演“优化”的角色,而是逐渐走到了风口浪尖,成为提升图像质量和成像品质的关键一环。

如果当时的Light L16有今天的“算法”,我想它可能是相机未来的一种可能,但它不是Camera 3.0,“计算摄影”才是。

当你按下快门拍照时,你的手机正在做数学题

站长声明

版权声明:本文内容由互联网用户自发贡献,本站不拥有所有权,不承担相关法律责任。如果发现本站有涉嫌抄袭的内容,欢迎发送邮件 举报,并提供相关证据,一经查实,本站将立刻删除涉嫌侵权内容。

标签:

相关文章

  • 国际顶级学术会议CIKM2019即将在北京开幕,重量级嘉宾带你一睹人工智能前沿

    国际顶级学术会议CIKM2019即将在北京开幕,重量级嘉宾带你一睹人工智能前沿

    第28届国际顶级“信息提取、知识管理与数据库”年会(CIKM - The ACM International Conference on Information and Knowledge Management)即将召开今年11月3日至7日在中国北京举行。 CIKM自2017年成立以来,一直致力于汇聚这三个相关领域的研究人员和开发人员,实现深入的跨

    06-17

  • 致茂电子携手群益能源,抢占新能源汽车测试市场氢燃料电池商机

    致茂电子携手群益能源,抢占新能源汽车测试市场氢燃料电池商机

    大型测量仪器测试公司「致茂电子」与燃料电池测试设备制造商「群益能源」,双方签署合作意向,正式进军氢燃料电池测试市场,进一步拓展新能源行业商机。 群益能源是燃料电池测试及自动化生产设备的专业制造商。 多年来深耕燃料电池领域。 其产品具有很强的竞争力。 结合致茂

    06-06

  • 2021广州车展:福特新设计实拍-凯迪拉克LYRIQ实车亮相-奥迪Q5 e-tron开始预售

    2021广州车展:福特新设计实拍-凯迪拉克LYRIQ实车亮相-奥迪Q5 e-tron开始预售

    宝马2系Coupe亮相,依旧原味。 对于宝马来说,小尺寸、前置后轮驱动的2系Coupe是一款有趣的汽车。 不久前,全新一代BMW 2系Coupe在古德伍德速度节上全球首发,并在今年的广州车展上首次中国亮相。 新车的外观比四门车型更具攻击性,尤其是“让人大开眼界”的前大灯和巨大的三

    06-21

  • 云蝠智能2022年投资加盟政策详解

    云蝠智能2022年投资加盟政策详解

    作为中国智慧营销领域的积极探索者,云蝠智能获得了广泛的市场认可,客户涵盖房地产、汽车、装饰、金融、互联网、教育、电子商务、企业服务等众多行业。 公司希望通过人工智能、过程自动化领域的技术优势赋能传统行业,推动传统行业智能化转型升级,最终在提高营销效率的同时

    06-18

  • 总投资超28亿元,内蒙古新华半导体多晶硅项目预计月底竣工

    总投资超28亿元,内蒙古新华半导体多晶硅项目预计月底竣工

    据《内蒙古新闻广播》消息,内蒙古新华半导体科技有限公司万吨半导体级多晶硅项目已进入最后阶段,预计11月底完工。 据相关负责人介绍,该项目总投资28.3亿元,产值约24亿元。 年产高纯电子级多晶硅0吨,二氯氢硅、三氯氢硅、四氯化硅1吨。 吨。 项目建成后,公司从原材料净

    06-06

  • 酒旅会员互联网运营商“OTM”获近4000万元天使轮融资

    酒旅会员互联网运营商“OTM”获近4000万元天使轮融资

    酒旅会员互联网运营商“OTM钟书科技”近日宣布完成近万元天使轮融资轮融资。 本轮融资由Creation Partners CCV领投,高榕资本跟投,回声资本担任独家投资方。 本轮融资将继续用于技术研发、市场拓展和人才引进。

    06-18

  • SIA:6月全球半导体产品销售额345亿美元

    SIA:6月全球半导体产品销售额345亿美元

    根据半导体行业协会(SIA)最新公布,今年6月全球半导体产品销售额1亿美元,同比增长5.1%,但低于上年2.5亿,环比下降1.4%。 半导体行业协会主席兼首席执行官John Neuffer透露,6月份美国市场半导体产品销量大幅增长,同比增长近30%;中国市场增长4.7%;其他亚太市场同比增长

    06-06

  • 特斯联获得Investcorp投资,将在AI CITY领域进一步拓展

    特斯联获得Investcorp投资,将在AI CITY领域进一步拓展

    据投资界9月8日消息,在完成相关国家注册后,国际知名投资机构Investcorp宣布正式完成投资全球领先的智慧场景服务商特斯联。 特斯联科技此次投资将用于特斯联在AI CITY(人工智能城市)领域的进一步拓展。 此前,特斯联已获得光大控股、IDG资本、中信产业资本、京东、商汤科

    06-18

  • 对话张建锋:阿里云重回“卡门线”

    对话张建锋:阿里云重回“卡门线”

    如果你这六个月经常出差,你可能已经注意到,阿里云的机场口号已经换成了“为了不可估量的价值”——这阿里云在云栖大会上发布的口号,时隔七年重新回到公众视野。 所以,这句话在广告中看似不够“直接”,但确实引起好奇和阅读。 这是什么意思?为什么要回来?回到这句话诞

    06-17

  • 【PW热点】虎牙2020年第四季度营收29.9亿元,同比增长21.2%

    【PW热点】虎牙2020年第四季度营收29.9亿元,同比增长21.2%

    昨晚虎牙公布了第四季度及全年财报

    06-18

  • 与iQOO一起,我们把电竞赛场带入了未来社会

    与iQOO一起,我们把电竞赛场带入了未来社会

    当中国的健儿在亚运会上获得金牌时,当重庆狼队在KPL中获得十个冠军时。 当电竞赛场加冕荣耀时,我们总会看到iQOO。 在以“让玩家尝试新玩法”为宗旨的首届inG游戏艺术节上,坚持顶级性能、顶级电竞的iQOO与我们不谋而合,共同为玩家打造了“iQOO未来游戏现场”,让球迷们可以

    06-21

  • 神州租车申请在香港联交所上市, 2012年放弃赴美上市

    神州租车申请在香港联交所上市, 2012年放弃赴美上市

    5月22日晚间消息,据香港联交所公告,中国最大的汽车租赁公司神州租车已提交上市申请在香港上市。   数据显示,神州租车全年营收8亿元,逐年增长至27亿元,年复合增长率高达81.6%。 一季度净利润1.63亿元,全年净利润1.43亿元。   截至2019年3月31日,神州租车车队总规模

    06-17