首页 > 科技未来 > 内容

揭秘iPhone 13电影特效模式,苹果是这样打造的

发布于:2024-06-21 编辑:匿名 来源:网络

记得小时候看过一部纪录片,里面解释了电影幕后人员的分工。

摄影师经常与跟班这个“焦点人物”搭档,就像每个高尔夫球手都有一个球童,每个高尔夫球手都有一个导航仪一样。

这几乎已经成为电影界的标配。

跟焦器主要只是保证镜头的焦点(焦平面)满足摄影导演的需要,即保证拍摄对象清晰。

这听起来是一项相当简单的任务,但并不是每个人都能胜任。

对焦点移动速度和切换精度都有很高的要求。

没有长年累月积累的肌肉记忆,就很难做到熟练,也很难在不同的焦点之间准确切换。

尽管如今相机的自动对焦技术已经取得了长足的进步,但电影行业却依然如故。

仍然是全手动。

摄影师还有那个“跟班”。

焦点的移动会凸显人物,也可能会凸显环境。

人眼的本能是追踪清晰的物体。

焦点的变化会引导观众的注意力随着焦点的转移,从而达到叙事或气氛的增强。

成为电影的语言。

扎导对此应该有发言权。

如果普通人想要拍出这样的“电影”效果,不考虑后期制作,全画幅相机和大光圈镜头就足够了,但从经济性和通用性来说,那就是负分了。

今年iPhone 13系列上的“电影效果模式”可能是一个新的选择。

电影效果模式即视频人像模式。

揭秘iPhone 13电影特效模式,苹果是这样打造的

iPhone 13的所有TVC中,印象最深的还是《Whodunnit》和《谁偷了我的 iPhone》。

电影特效模式的加入,让整部影片的故事性得到了很大的提升。

当然,后者的演员也是一大亮点。

▲ 强烈推荐观看完整片段。

事实上,在苹果9月15日推出iPhone 13之前,就有相应的传闻泄露出来,表明苹果将推出“视频肖像”功能。

当时我并不认为它有什么“用处”。

但看了《Whodunnit》的广告演示片,以及拿到iPhone 13系列,并实践了一段时间后,我们逐渐明白了“电影效果模式”的意义堪比“电影效果模式”在 iPhone 7 Plus 上。

人像模式”。

它们并不是基于经典的光学技术,而是寻找其他方法。

以前的“人像模式”和现在的“电影效果模式”都是基于多镜头视差,而不是LiDAR,这解释了为什么整个iPhone 13系列都支持,不仅仅是Pro系列,目的很明显,就是为了像当年的“人像模式”一样流行。

▲ 脸大的话就赢了。

基于此,iPhone 13全系列的“电影效果模式”拍摄效果与iPhone 13接近。

识别拍摄对象模拟景深时,会以脸部为主。

多张脸,拍摄效果就会大。

优先事项。

它无法识别物体和动物,如果要切换,需要人工干预。

在拥挤的场景中,iPhone 13可以同时识别多个人脸,但会频繁切换焦点。

这时候你还需要介入选择你想要关注的人,或者直接长按锁定。

另外,“电影效果模式”是苹果首次推出,自然有很多限制。

首先是抠图不够精准,人物的边缘有时会出现“交叉”的情况,而且最多只能录制p 30p的视频。

iPhone 13 Pro Max 1TB 版本也是如此。

不过,在上述限制下,iPhone 13全系列的“电影效果模式”仍然可以兼顾杜比视界HDR编码,这也算是苹果权衡的一个选项。

“电影效果模式”其实是出于好奇而诞生的。

过去,新功能的出现需要洞察需求和用户反馈。

然而,站在金字塔顶端的苹果,大多遵循自己的理解和节奏。

产品。

▲ 苹果人机界面设计师 Johnnie Manzari。

图片来自:Getty Images 在接受科技媒体 TechCrunch 主编 Matthew Panzarino 采访时,苹果人机界面设计师 Johnnie Manzari 讲述了电影特效模式诞生的始末。

“电影效果模式”并不是从功能本身出发,而只是因为设计部门对电影制作的过程感到好奇,并以此为出发点,研究和学习电影摄影技术,以实现接近真实的焦距转换和一些光学特性。

同时John表示,“电影效果模式”的开发有点类似于iPhone X上出现的工作室光效人像拍照功能。

我们从经典肖像艺术家安迪·沃霍尔、巴洛克的肖像作品中汲取经验和分析艺术画家伦勃朗和中国工笔画,然后将它们运用到产品的算法中。

▲ 安迪·沃霍尔的作品(左下是他本人)。

“电影效果模式”是类似的过程。

苹果团队首先向世界级的摄像师进行讨论和学习,并观看了大量的电影。

一路走来,我们发现了电影制作中的一些永恒趋势。

焦点之间的变化是电影行业的通用语言,我们需要准确理解它们的使用方式和时间。

▲“电影效果模式”中的焦点转换。

因此约翰和他的团队成员与摄影指导和摄影第一助理密切合作,以了解这一切背后的机制。

利用浅景深可以引导观众的注意力,有助于描述故事。

然而,“Zoom”是为专业人士准备的。

普通人很难掌握准确度。

可以说,手上的细微差别,就能带来感知上的巨大差异。

在了解到对焦操作者需要多年的广泛实践才能掌握电影摄影机和拍摄对象的实时位置以确保焦点保持不变后,John、设计团队和苹果都认为这种“电影效果模式” ”即将投放市场。

“这将是一个非常有竞争力的功能。

▲简单的跟焦设备 为此,苹果通过研究将“电影效果模式”分解为两部分,一是“寻找焦点”,二是如何顺利转移。

焦点最终确定为“凝视检测”,这实际上更接近于人脸检测,让观众专注于主角的动作,从而引导观众快速理解故事。

平滑转移是约翰很久之后才添加的功能。

长期观察调焦操作员操作的调焦轮,熟练的调焦操作员会控制调焦轮使焦点移动自然稳定,并且还会根据镜头的焦距和物距来调整焦距。

苹果在“电影效果模式”上花了很多时间试图模拟跟焦器的手动工作,因此,当我们在“电影效果模式”下拍摄时,在不同对焦点之间切换时,是不行的。

机械的快速推拉,只是机械的推拉。

有一个比较明显的跟焦过程。

当然,“电影效果模式”才刚刚发布。

就像“人像模式”一样,它还有很多可以优化的地方。

就好像你看到郎朗弹钢琴那么轻松自如,却知道用算法是不可能达到(只能不断逼近)他大师级的水平的。

由于实现“电影特效模式”的功臣A15是通过算法被“猜测”出来的,理论上“电影特效模式”可以通过OTA转移到其他iPhone(例如iPhone 12)上,但实时预览可能会被牺牲。

但按照苹果的思路,很难通过牺牲一些体验来下放新功能。

▲ A15 改进要点,请注意 CPU 和 GPU 的改进是与竞争对手相比。

因此,“电影效果模式”将是iPhone 13全系列暂时独有的功能,也将成为A系列芯片算力的门槛,也可能造就新一代iPhone“钉子户”。

iPhone营销副总裁Kaiann Drance在接受采访时表示,在视频中模拟景深比在人像照片中模拟景深更具“挑战性”。

▲ iPhone 营销副总裁 Kainn Drance。

视频需要随着主体的移动而移动,需要实时防抖(数字加光学),并准确识别不同的场景、王牌、动物、物体,所以对于神经引擎和机器学习来说,需要更高质量的深度数据并实时渲染。

哦,还有实时对焦,以及对杜比视界 HDR 编码的支持。

而这一切的背后都来自A15,可以说年纪轻轻就承担起了整个家庭的重任。

与A15的CPU相比,在实际测量中,GPU性能有了明显的提升。

它可能采用了新的架构并增加了一个核心。

此外,A15的神经网络引擎算力提升至15.8TOPS。

这些硬件改进可能与整个iPhone 13系列视频能力的提升有关。

“电影效果模式”包含一些与静态照片不同的机器学习问题。

相信在开发A15的时候,John的人机交互设计团队就已经和芯片开发进行了深入的讨论。

在 TechCrunch 的测试视频中,他们还发现 iPhone 13 系列的“电影效果模式”在识别人的过程中使用了冗余传感器来预测拍摄对象。

画面中马修女儿的后脑勺一出现,他手中的iPhone 13立即切换焦距,就像舞台剧中一样,有一个导演掌控全局。

主角还没有出现在舞台上,灯光已经提前准备好了。

,引发观众期待她的亮相。

对于“电影模式”的这个细节,苹果人机交互设计师约翰表示:当我们观察电影制作时,我们发现焦点算子并不是等待主角出现才移动焦点,而是有一个预测过程。

我们还使用冗余传感器来利用机器学习来预测屏幕外的人的动作。

当它们出现在屏幕上时,焦点就已经在它们身上了。

史蒂夫·乔布斯曾经喜欢说,苹果正处于技术与艺术的交汇点。

在iPhone 13系列发布之前,“人像模式”更像是一个技术术语,给人的感觉很冷淡。

至于“电影效果模式”和TVC的呈现方式,经过亲身测试,不再冰冷,而是有了一定的温度。

深入了解“电影效果模式”背后的故事后,还带来了几分“拍摄的艺术”。

“电影效果模式”对于普通人来说可能没有那么深刻的意义。

它更像是瑞士军刀中的红酒螺丝刀。

它可能不是最完美、最省力的,但它是一个在紧急情况下可以发挥出色作用的工具。

电影向我们展示了人类的情感和故事,如果你用正确的表达语言,它就会被传达出来。

现在,我们已经努力了很长时间,让你的生活故事能够在你的手机上记录和表演。

我迫不及待地想看看人们用“电影效果模式”写出的故事。

揭秘iPhone 13电影特效模式,苹果是这样打造的

站长声明

版权声明:本文内容由互联网用户自发贡献,本站不拥有所有权,不承担相关法律责任。如果发现本站有涉嫌抄袭的内容,欢迎发送邮件 举报,并提供相关证据,一经查实,本站将立刻删除涉嫌侵权内容。

标签:

相关文章

  • Magic Leap价值超过20亿美元的AR梦想现已苏醒

    Magic Leap价值超过20亿美元的AR梦想现已苏醒

    用特效炸毁AR神话的Magic Leap终于有新消息了。 当地时间12月10日,增强现实(AR)领域“知名”公司Magic Leap宣布将Magic Leap One Creator Edition更名为Magic Leap 1,并发布Magic Leap的两个新组件生态系统:企业套件和设备管理工具,进一步促进企业解决方案的实施。 从消

    06-18

  • 核心团队来自清华大学精密仪器系,智格科技获Pre-B轮1亿元融资

    核心团队来自清华大学精密仪器系,智格科技获Pre-B轮1亿元融资

    据投资界(ID:pedaily)7月24日消息,据36氪,微纳光学IDM厂商智格科技宣布完成100万元Pre-B轮融资。 本轮融资由华泰紫金领投,领源科技、万盛基金会、老股东方广资本跟投。 本轮资金将主要用于微纳光学领域的产品研发迭代、量产能力提升以及业务多元化。 智格科技是一家专注

    06-18

  • 海盐县产业基金管理办法(征求意见稿)

    海盐县产业基金管理办法(征求意见稿)

    海盐县产业基金管理办法是为了加强和规范海盐县产业基金(以下简称“产业基金”)的运营管理,更好地发挥引领作用产业基金。 为促进全县创业创新和产业转型升级,根据《浙江省财政厅关于印发浙江省产业基金管理办法的通知》(浙财建[]75号)、《嘉兴市人民政府关于印发嘉兴市

    06-17

  • 从康复的机器人到康复的生态型,傅利叶的智能全球布局逻辑

    从康复的机器人到康复的生态型,傅利叶的智能全球布局逻辑

    科技的发展趋势,全球一体化不会改变,全世界离不开中国,中国也离不开全世界。 尤其是医疗行业,不仅技术无国界,医学也无国界。 公开资料显示,康复现阶段的医疗需求主要来自这些群体,如老年人、儒家群体、慢性病或亚健康群体等。 首先是老年群体。 老年人高发的高血压、糖

    06-18

  • 【创业24小时】2023年5月23日

    【创业24小时】2023年5月23日

    投融资昨天,国内市场共发生15起投资披露事件,其中先进制造4起(启杰软件、智仑超纯、艾博特里、边境智控)、企业服务案例3个(领信数码、智丰引擎、潞晨科技)、电商零售案例3个(王牌猪、泰山啤酒、MOODLES)、医疗健康案例3个(维吉欣生物、元一生物、耀明生物)、1个当地

    06-17

  • 小米、OPPO投资地震预警平台美环科技

    小米、OPPO投资地震预警平台美环科技

    投资社区(ID:pedaily)4月19日报道,近年来,不少手机、电视厂商都推出了地震预警通知功能。 据最新报道,OPPO和小米科技最近甚至还投资了一家名为成都美环科技有限公司的地震预警平台公司,同时该公司注册资本从5900元增至5900元,增加了13.66%。 据悉,美环科技是一家专注

    06-18

  • 2020年半导体晶圆代工厂布局策略

    2020年半导体晶圆代工厂布局策略

    顶尖产业研究院资本支出是晶圆代工厂对半导体行业未来趋势和投资状况看法的重要指标。 在工业行业衰退的情况下,晶圆代工厂若想增加资本支出,需要有明确且强劲的动力支撑。 (Top产业研究院,.12)先进工艺竞争带动资本支出竞争,三星投资计划引人关注。 台积电2020年资本支

    06-06

  • DCM中国基金二期募资3.3亿美元

    DCM中国基金二期募资3.3亿美元

    据投资界3月4日消息,投资58同城、唯品会的DCM今日宣布已完成二期募资中国基金(DCM VII),总额达3.3亿美元。 新基金将用于投资中国TMT和消费(健康/教育)等领域的早期初创企业。   在高科技投资领域,DCM中国团队近年来投资成绩斐然:累计投资的40个项目中,有11个项目通

    06-18

  • 蓝深新材料获近2亿元D轮融资,计划2023年申请创业板IPO

    蓝深新材料获近2亿元D轮融资,计划2023年申请创业板IPO

    投资界(ID:pedaily)据2月1日消息,高分子功能材料公司“西安蓝深新材料(以下简称蓝深)近日完成近2亿元Pre-IPO轮融资。 投资方包括五矿元鼎股权投资基金、陕西星航城投资基金、陕西财金特种新材料股权投资基金、广州中保瀚兴创投等机构跟投。 本轮融资主要用于高分子树脂

    06-17

  • MBTI主导的性格测试成为新的流量密码

    MBTI主导的性格测试成为新的流量密码

    现在的年轻人有了新的社交俚语,社交档案上有“INTP、ENTJ”,或者“我是INTJ,想认识INFP小可爱,我对Fi和Ne很上瘾”天马行空的想象力,我觉得所有的INFP都像小天才和诗人。 “MBTI引领的性格测试突然成为新的交通密码。

    06-18

  • 小红书,针对职场捞钱的人

    小红书,针对职场捞钱的人

    网页版小红书正在成为上班族捞钱的新神器。 众所周知,由于职场规范,员工通常不允许在工作中公开使用手机浏览小红书。 然而,员工通过电脑浏览器搜索并访问小红书网页版,从而在电脑上愉快地钓鱼的现象越来越普遍。 小红书之所以有如此大的号召力,是因为其优质的图文笔记在

    06-18

  • 家庭智能健身品牌“金史密斯”完成最新一轮融资

    家庭智能健身品牌“金史密斯”完成最新一轮融资

    据12月14日消息,家庭智能健身品牌“金史密斯”完成最新一轮融资,由英飞尼迪资本、华禾资本、安睿资本领投、厦门文广投资、青通资本继续担任财务顾问。 这是“金史密斯”近六个月内完成的第三笔融资,累计融资金额达数亿元。 “金史密斯”于年底在北京成立。 是一家研发“W

    06-18