首页 > 科技革新 > 内容

Facebook 演示 Oculus Rift 全身动作捕捉技术,从骨骼到肌肉、头发、衣服

发布于:2024-06-26 编辑:匿名 来源:网络

要加入英伟网会员查看报价和新闻来源,请点击:英伟网非常突破性的进展(英伟.com) com,2020 年 5 月 5 日)Oculus Rift S 在今年的游戏开发者大会(GDC)上发布后,面临着一些从业者的质疑,因为他们希望看到万众期待的 Rift 2,而不是 Oculus Rift 的改进版。

面对这种情况,Oculus 在接受采访时回应称,Oculus Rift 2 的颠覆性太大,不适合现在推出。

延伸阅读:新的 Oculus Rift 原型机可以实现逼真的面部表情捕捉。

在这些采访回复中,Oculus 还透露第二代 VR 耳机应该具备全身动作捕捉跟踪功能,这意味着 Oculus Rift 2 可能具备这些功能。

Facebook 演示 Oculus Rift 全身动作捕捉技术,从骨骼到肌肉、头发、衣服

这显然有点不可思议,因为目前的全身动作捕捉跟踪技术非常庞大,需要大量的外部设备,比如惯性传感器、马克点标记器等。

而且与消费类设备相比,目前的动作捕捉市场上的系统都是面向企业的,价格在几万、几十万左右。

1. Facebook Markless Motion Capture 不过,这些质疑在今年的 Facebook F8 大会上都被打消了,因为 Facebook 正式推出了他们的解决方案,有望颠覆全身动作捕捉市场。

在Facebook F8大会第二天的主题演讲中,Oculus研究主管Ronald Mallet上台介绍了这一研究成果。

Ronald Mallet 表示:“我们的 Codec Avatar 技术在捕捉人脸方面实现了突破性的真实感,但真正的人类交流需要完整的肢体语言。

” Ronald Mallet表示,现有的动作捕捉技术在扩展到VR方面面临多重挑战,需要大量的硬件、大量的劳动力、大量的数据以及大量的时间来创建虚拟化身,这使得动作捕捉变得困难技术在VR中得到扩展和广泛应用,并且不允许用户定制自己的化身。

为了解决这一挑战,Facebook开发了一种无标记动作捕捉技术,利用人工智能技术,用有限数量的传感器再现完整的身体动作。

那么他们是怎么做到的呢? 2、设计人体骨骼模型 Ronald Mallet说:“你的大脑控制肌肉,肌肉驱动骨骼,骨骼反过来驱动组织和皮肤以及表面的衣服,骨骼又反过来驱动组织和皮肤以及表面的衣服。

因此,为了用有限的传感器数据复制所有这些并渲染完整的 3D 化身,我们需要使用复制人体解剖结构的身体模型。

该模型需要完全自动适应任何个体,并且需要基于真实的人类行为。

“为了创建这个模型,他们首先研究了医学出版物并使用了先进的医学影像参考资料,然后设计了符合解剖结构并具有合理的关节和自由度的人体骨骼。

” Ronald Mallet 说:“这个模型比传统的动画制作速度更快。

其中的模型要复杂得多,你可以专注于你的微妙姿势。

你的肩胛骨如何移动,你的髋关节如何移动,或者你的关节如何伸展。

我们将这个骨骼与用户的解剖结构相匹配并实时制作动画,以便模型在用户移动时继续适应用户并忠实地复制用户的动作 3. 捕捉肌肉活动但这还不够。

肌肉表现的缺失可能会让虚拟化身有点奇怪,因此他们还重现了肌肉活动的实时跟踪,并展示了 Oculus 研究员 Tony 的演示视频,Oculus 表示该演示仅使用了一个传感器进行捕捉。

解释:“正是肌肉让骨骼能够表达情感,而肌肉运动对于理解行为和意图非常关键,因此这个片段用于说明托尼肌肉活动的实时跟踪。

但为了做到这一点,我们利用他身体的惯性和肌肉骨骼系统来帮助我们预测和平滑他的动作。

为了创建真实的身体,对肌肉收缩时发生的变形进行建模同样重要。

” 4. 捕捉衣服和头发不仅仅是对人体骨骼的全身跟踪,Oculus表示,人体上衣服和头发的真实还原同样重要。

Ronald Mallet说:“我们用视觉观察方法来推断身体几何形状,并重建其形状。

然后,我们应用基于物理的模型来重建我们所需的实际服装变形,以真实地匹配人们的真实服装。

5. 未来的挑战 Ronald Mallet 演示的所有这一切不需要动作捕捉服或标记,并且是实时完成的。

捕获只需要有限的硬件,这是一个非常突破性的进步。

但对于大众消费市场来说,该解决方案也存在延迟问题。

“正如您可以想象的那样,延迟是关键,”Ronald Mallet 解释道。

在我们将其变成可行的产品之前,这是我们需要克服的一个巨大挑战。

我们还需要一种允许用户仅使用现有传感器轻松生成和动画化身的方法。

Facebook 演示 Oculus Rift 全身动作捕捉技术,从骨骼到肌肉、头发、衣服

站长声明

版权声明:本文内容由互联网用户自发贡献,本站不拥有所有权,不承担相关法律责任。如果发现本站有涉嫌抄袭的内容,欢迎发送邮件 举报,并提供相关证据,一经查实,本站将立刻删除涉嫌侵权内容。

标签:

相关文章

  • B2B工程装备服务平台“中能联合”已完成两轮C2、C3融资

    B2B工程装备服务平台“中能联合”已完成两轮C2、C3融资

    3月9日消息,B2B工程装备服务平台“中能联合”已完成两轮C2、C3融资。 其中,C2轮融资由源码资本领投,不活创投跟投; C3轮融资由五星控股领投,上海市北高新、一美资本、不活创投、源码资本、瑞橡资本、易博财经跟投。 。 C轮股权及债权融资总额超过30亿元人民币。 中能联合

    06-18

  • 英特尔投资华夏半导体,业务范围包括医疗器械生产

    英特尔投资华夏半导体,业务范围包括医疗器械生产

    1月19日,江苏华夏半导体科技有限公司进行工商变更,新增股东英特尔亚太研发有限公司,公司注册资本由1万元增加至22万元,增长约11.11%。 天眼查信息显示,该公司成立于2001年,法定代表人就是朱培文。

    06-17

  • 闲旅获九鼎领投数百万美元Pre-A轮融资,用“大数据赋能”中国酒店业

    闲旅获九鼎领投数百万美元Pre-A轮融资,用“大数据赋能”中国酒店业

    投资界7月9日消息,近日,广州闲旅信息科技有限公司,闲旅股份有限公司(简称闲旅)正式宣布完成由九鼎领投的数千万Pre-A轮融资。   据悉,携程创新性地携手旅游行业各业态,共同打造基于酒店移动互联网信息系统的行业大数据分析与应用平台,以住宿为“平台+渠道”为载体。

    06-17

  • Prada IPO在即,Jimmy Choo等众多奢侈品牌放弃香港上市

    Prada IPO在即,Jimmy Choo等众多奢侈品牌放弃香港上市

    5月23日消息,据港媒报道,原本传闻将追随Prada的脚步。 其他排队在香港筹集资金的奢侈品牌现在正在寻找其他选择。 同样,意大利菲拉格慕(Ferragamo)和法国顶级羽绒服品牌盟可睐(Moncler)也选择在米兰证券交易所投资。 高端鞋履品牌Jimmy Choo也在考虑直接出售股份的可能性,

    06-17

  • OEM 和一级供应商应如何保护联网汽车中的数据安全

    OEM 和一级供应商应如何保护联网汽车中的数据安全

    意法半导体博客 联网汽车为 OEM 和一级供应商创造了引入新汽车功能和移动服务的机会,例如娱乐、数字钥匙系统、身份验证、车对万物 (V2X) 通信。 虽然这些新机会有望为最终用户带来许多好处,但网络安全专家对联网汽车的数据安全表示了复杂的担忧,并提供了充足的证据和理由

    06-06

  • 华筑科技,智慧工地服务商,推动中国工程建设发展

    华筑科技,智慧工地服务商,推动中国工程建设发展

    随着国家政策的不断推进,信息技术在经济社会中的作用日益重要。 各行业都在进行信息化改革,建筑行业采用智慧工地系统,从而降低了建筑行业的施工成本,提高了工作效率。 陕西华住科技顺应市场需求和行业趋势,专注于建筑工地软硬件产品的开发和应用,致力于工程建设领域的信

    06-18

  • 估值150亿,浙江大学大亨创办的“独角兽”IPO

    估值150亿,浙江大学大亨创办的“独角兽”IPO

    春节期间,微信推出红包功能,撬动千万用户绑定银行卡。 自此,微信支付与支付宝展开了激烈的竞争。 腾讯的财付通(微信支付/QQ支付)和京东的网上银行与支付宝一起在随后的几年中迅速崛起。 国内C端支付市场基本被这三大支付机构瓜分。 但时至今日,在用户感知相对较弱的B端

    06-18

  • 联丰讯盛获数千万元Pre-A轮融资,由启迪之星

    联丰讯盛获数千万元Pre-A轮融资,由启迪之星

    投资社区(ID:pedaily)领投 4月8日消息,据36氪报道,联丰讯盛宣布完成数千万元融资元Pre-A轮融资,本轮投资由启迪之星领投,方信资本跟投,老股东英诺天使基金持续加大投资。 融资资金将主要用于扩大产品销售体系和新技术研发。 据了解,联丰讯盛于今年4月在西安成立。 是

    06-18

  • 2020年中国十大最丑建筑出炉,是谁在破坏这座城市的美丽?

    2020年中国十大最丑建筑出炉,是谁在破坏这座城市的美丽?

    审美丑已经成为一种新的潮流文化。 从巴黎世家的土味奢侈品,到淘宝的“丑物评选”大赛,都说明在这个时代,独特的丑比千篇一律的美更容易流行。 近日,被誉为建筑界“金酸莓奖”的“中国十大最丑建筑”评选结果出炉。 主办方希望通过“建筑丑”让更多人意识到那些怪异建筑的

    06-21

  • 综合考虑实际情况和多方面因素,运东时代拟终止创业板IPO

    综合考虑实际情况和多方面因素,运东时代拟终止创业板IPO

    运东时代综合考虑实际情况及发展规划等诸多因素,经双方协商一致,运东时代与招商证券已决定终止创业板IPO< titlesplit >决定终止原签约《辅导协议》。

    06-17

  • 建筑钢筋数字化服务商“迈思科技”完成数千万元A轮融资,信天创投独家投资

    建筑钢筋数字化服务商“迈思科技”完成数千万元A轮融资,信天创投独家投资

    建筑钢筋数字化服务商“麦斯科技”完成数千万元A轮融资。 「思科技」完成数千万元A轮融资,由新天创投独家投资。 本轮资金主要用于产品的智能化升级、工业数据平台的建立和渠道的拓展,同时还涉及UWB、BIM、人工智能算法、互联网等新技术的持续研发东西的。 “麦斯科技”成立

    06-17

  • “嘉艺教育”递交香港IPO申请

    “嘉艺教育”递交香港IPO申请

    线上线下一体化课外辅导服务商“嘉艺教育”近日递交香港IPO申请。

    06-18