B2B工程装备服务平台“中能联合”已完成两轮C2、C3融资
06-18
要加入英伟网会员查看报价和新闻来源,请点击:英伟网非常突破性的进展(英伟.com) com,2020 年 5 月 5 日)Oculus Rift S 在今年的游戏开发者大会(GDC)上发布后,面临着一些从业者的质疑,因为他们希望看到万众期待的 Rift 2,而不是 Oculus Rift 的改进版。
面对这种情况,Oculus 在接受采访时回应称,Oculus Rift 2 的颠覆性太大,不适合现在推出。
延伸阅读:新的 Oculus Rift 原型机可以实现逼真的面部表情捕捉。
在这些采访回复中,Oculus 还透露第二代 VR 耳机应该具备全身动作捕捉跟踪功能,这意味着 Oculus Rift 2 可能具备这些功能。
。

这显然有点不可思议,因为目前的全身动作捕捉跟踪技术非常庞大,需要大量的外部设备,比如惯性传感器、马克点标记器等。
而且与消费类设备相比,目前的动作捕捉市场上的系统都是面向企业的,价格在几万、几十万左右。
1. Facebook Markless Motion Capture 不过,这些质疑在今年的 Facebook F8 大会上都被打消了,因为 Facebook 正式推出了他们的解决方案,有望颠覆全身动作捕捉市场。
在Facebook F8大会第二天的主题演讲中,Oculus研究主管Ronald Mallet上台介绍了这一研究成果。
Ronald Mallet 表示:“我们的 Codec Avatar 技术在捕捉人脸方面实现了突破性的真实感,但真正的人类交流需要完整的肢体语言。
” Ronald Mallet表示,现有的动作捕捉技术在扩展到VR方面面临多重挑战,需要大量的硬件、大量的劳动力、大量的数据以及大量的时间来创建虚拟化身,这使得动作捕捉变得困难技术在VR中得到扩展和广泛应用,并且不允许用户定制自己的化身。
为了解决这一挑战,Facebook开发了一种无标记动作捕捉技术,利用人工智能技术,用有限数量的传感器再现完整的身体动作。
那么他们是怎么做到的呢? 2、设计人体骨骼模型 Ronald Mallet说:“你的大脑控制肌肉,肌肉驱动骨骼,骨骼反过来驱动组织和皮肤以及表面的衣服,骨骼又反过来驱动组织和皮肤以及表面的衣服。
因此,为了用有限的传感器数据复制所有这些并渲染完整的 3D 化身,我们需要使用复制人体解剖结构的身体模型。
该模型需要完全自动适应任何个体,并且需要基于真实的人类行为。
“为了创建这个模型,他们首先研究了医学出版物并使用了先进的医学影像参考资料,然后设计了符合解剖结构并具有合理的关节和自由度的人体骨骼。
” Ronald Mallet 说:“这个模型比传统的动画制作速度更快。
其中的模型要复杂得多,你可以专注于你的微妙姿势。
你的肩胛骨如何移动,你的髋关节如何移动,或者你的关节如何伸展。
我们将这个骨骼与用户的解剖结构相匹配并实时制作动画,以便模型在用户移动时继续适应用户并忠实地复制用户的动作 3. 捕捉肌肉活动但这还不够。
肌肉表现的缺失可能会让虚拟化身有点奇怪,因此他们还重现了肌肉活动的实时跟踪,并展示了 Oculus 研究员 Tony 的演示视频,Oculus 表示该演示仅使用了一个传感器进行捕捉。
解释:“正是肌肉让骨骼能够表达情感,而肌肉运动对于理解行为和意图非常关键,因此这个片段用于说明托尼肌肉活动的实时跟踪。
但为了做到这一点,我们利用他身体的惯性和肌肉骨骼系统来帮助我们预测和平滑他的动作。
为了创建真实的身体,对肌肉收缩时发生的变形进行建模同样重要。
” 4. 捕捉衣服和头发不仅仅是对人体骨骼的全身跟踪,Oculus表示,人体上衣服和头发的真实还原同样重要。
Ronald Mallet说:“我们用视觉观察方法来推断身体几何形状,并重建其形状。
然后,我们应用基于物理的模型来重建我们所需的实际服装变形,以真实地匹配人们的真实服装。
5. 未来的挑战 Ronald Mallet 演示的所有这一切不需要动作捕捉服或标记,并且是实时完成的。
捕获只需要有限的硬件,这是一个非常突破性的进步。
但对于大众消费市场来说,该解决方案也存在延迟问题。
“正如您可以想象的那样,延迟是关键,”Ronald Mallet 解释道。
在我们将其变成可行的产品之前,这是我们需要克服的一个巨大挑战。
我们还需要一种允许用户仅使用现有传感器轻松生成和动画化身的方法。
版权声明:本文内容由互联网用户自发贡献,本站不拥有所有权,不承担相关法律责任。如果发现本站有涉嫌抄袭的内容,欢迎发送邮件 举报,并提供相关证据,一经查实,本站将立刻删除涉嫌侵权内容。
标签:
相关文章
06-17
06-18
06-18
06-18
06-18
最新文章
英国肖像画家用Tilt Brush探索VR雕塑
微软75亿美元联姻B Corp母公司,以3件VR大作作为嫁妆
传闻苹果AR-VR眼镜原型机将于下个月发布,量产推迟至2022年初
调查显示,大多数游戏玩家对虚拟现实不感兴趣
一睹购物未来,亚马逊VR购物在印度试水,带你畅游虚拟商务中心
这是Nvidia是这么解释什么是AR、VR、MR的,以及对应的区别
iPhone12 Pro完成了谷歌的使命,为苹果的AR眼镜铺平了道路
研发实践:在VR游戏中添加LiquidVRMultiView渲染