21上半年北美风险投资同比增长116%至1550亿美元，新增独角兽161家
06-17
雷锋网消息，7月4日，微软正式宣布SwiftKey（雷锋网）测试版增加了新功能锋网消息：SwiftKey于2017年被微软收购）Puppets，这一新功能提供了熊猫、恐龙、猫头鹰等动物的3D图像，还可以通过AI技术实时反映用户的表情和头部动作。
尽管近年来3D表达开始席卷全球，但值得一提的是，创作3D动画图像的想法在十多年前就已经扎根。
受好莱坞大片的启发，运动追踪技术当年远未成熟。
就连2010年上映的《阿凡达》，都要求演员提前在脸上标记出特定的点，并穿上特制的球和衣服，帮助光学系统跟踪人脸和身体的运动变化，最终准确捕捉到人的面部和身体的运动变化。
人物的表情和动作。
雷锋网注：上图为《阿凡达》Faceshift的剧照（雷锋网注：Faceshift是一家人脸追踪技术公司，2016年被苹果收购）联合创始人之一的Mark保利表示：标点符号演员脸部的标记是一个好主意，因为它可以帮助简化运动跟踪中涉及的计算。
但这需要大量的设备以及大量的时间和成本。
Mark Pauly 和其他研究人员开始寻找一种新方法——开始探索如何使用深度感应相机和算法来取代传统方法，并使面部表情跟踪变得更容易。
他们的最终目标是创建可以实时模仿人类表情的动态数字化身。
由于人脸总是在变化，为了让机器准确识别面部动作，必须能够识别不同环境或状态下的人脸，例如光线变化、头部旋转角度、肤色变化等。
人脸。
等待。
下一步就是不断训练算法来处理这些面部数据信息，然后构建大量的3D模型以形成模拟图像。
人脸追踪技术已经从电影转移到手机上。
今年以来，苹果陆续收购了3D传感器制造商PrimeSense、图像识别公司Perceptio、增强现实公司Metaio、人脸追踪技术公司Faceshift。
现在看来，这波疯狂收购背后很大一部分原因是苹果准备推出iPhone X。
2019年9月，苹果推出了iPhone X。
从外观上来看，除了经典的Home键，屏幕顶部还有一个“刘海”区域。
在这神秘的黑色刘海下，内置了麦克风、扬声器、前置摄像头以及环境光传感器、距离传感器、红外镜头、泛光传感器元件、点阵投影仪等5个传感器。
这 5 个传感器组成了原深度摄像头系统，可以捕捉并分析用户脸部的 3D 结构特征，类似于 3D 建模，然后使用 Apple 神经引擎（A11 仿生神经引擎）即时处理识别数据。
基于TrueDepth相机和神经网络的支持，3D版本的Emoji——Animoji应运而生；用户在使用iMessage时可以开启Animoji录制不超过10秒的短视频，3D动画图像将与用户表情同步，并且该功能还支持录制。
虽然Animoji只是作为iMessage的一个功能出现，但在3D动画表达方式的创新方面，Animoji可以称得上是先驱。
它将好莱坞大片中使用的3D面部追踪技术带到了手机上。
在苹果开始使用3D结构光技术支持人脸识别和动话表情之后，三星、华为、小米等手机厂商也不断努力落地这项技术，打造了自己的“动话表情”，甚至逐渐摆脱了传统的“动话表情”。
消除对 TrueDepth 相机的依赖。
基于深度神经系统的Puppets与苹果的Animoji的区别在于，微软的3D动画表情Puppets的载体不是系统中的短信（iMessage），而是第三方软件SwiftKey；这种个性化输入法基于先进且流畅的预测推理引擎，能够进行非常快速的输入操作——微软估计SwiftKey每周总共可以节省10,000小时的打字时间。
另外，Puppets 最大的区别在于，Apple Animoji 等很多 3D 动态表情都需要 TrueDepth 摄像头的支持来扫描人脸的 3D 结构来建模，而 Puppets 也可以仅使用普通摄像头进行建模。
生成实时 3D 动态表达式。
这是因为 Puppets 运行的是由志愿者提供的大量图像和视频数据库。
微软使用这个数据库来训练其深度神经网络来识别用户表情，例如微笑和眨眼，并直接模仿它们。
用户可以通过Puppets录制最长30秒的视频，视频将实时转换为3D动态图像。
这些短视频还可以在社交媒体或其他平台上分享。
微软产品经理 Deepak Paramanand 表示：我们希望 SwiftKey 用户在与家人和朋友交流时除了预设的 GIF 之外还有更多选择，因此我们创建了 Puppets。
人们希望快速打字，而 SwiftKey 可以做到这一点。
人们还希望以有趣的方式表达自己，SwiftKey 现在可以做到这一点。
雷锋网总结从3D电影中使用的人脸追踪技术，到苹果首创的3D动画表情Animoji，再到微软的Puppets，这些技术和产品或许都有其不足之处，但至少可以清晰地看到它们随着迭代而成长。
值得一提的是，目前推出的Puppet还只是测试版，并且仅限于Android手机；雷锋网将持续关注Puppet的更多动态。
版权声明：本文内容由互联网用户自发贡献，本站不拥有所有权，不承担相关法律责任。如果发现本站有涉嫌抄袭的内容，欢迎发送邮件 举报，并提供相关证据，一经查实，本站将立刻删除涉嫌侵权内容。
标签：
相关文章
06-18
06-18
06-17
06-18
最新文章
Android旗舰之王的过去与未来
智能手表不被开发、AR眼镜被推迟，Meta的产品经历了一波三折
为什么Cybertruck是特斯拉史上最难造的车？
更新鸿蒙3后，文杰允许你在车里做PPT了
新起亚K3试驾体验：追求“性价比”，韩系汽车仍不想放弃
阿维塔15登场！汽车配备了增程动力，理想情况下会迎来新的对手吗？
马斯克宣布创建 ChatGPT 竞争对手！ OpenAI的CEO给他泼了冷水， GPT-5可能会发生巨大变化
骁龙无处不在，是平台也是生态