首页 > 科技未来 > 内容

华为HDC2021手语翻译器受欢迎, “她”为何能如此灵巧?

发布于:2024-06-21 编辑:匿名 来源:网络

华为需要从硬到软重新认识。

10月22日,华为开发者大会(Together)在东莞松山湖正式开幕。

在主题演讲中,华为正式发布了全新的多终端、跨操作系统、全场景的华为移动核心服务能力HMS Core 6。

构建共享共赢的HMS新生态。

但它不仅仅属于开发者,它可能属于我们每个人。

基础软件技术与我们的距离其实并没有那么遥远。

HMS Core(华为移动核心服务)是华为软硬件开放能力的集合。

它运行在操作系统上,允许应用程序调用各种开放能力并提供各种服务。

作为HMS生态的重要组成部分,HMS Core连接开发者和用户,赋能开发者高效开发和创新应用,同时提升用户体验。

如果我们把它比作盖房子,华为提供砖、瓦、混凝土、钢筋、卡车、玻璃等建筑材料和工具。

到底是建为乡村木屋、郊区别墅,还是市中心百货商店,取决于开发商的决定。

虽然HDC是一个主要面向开发者的会议,但也有很多场外消息。

比如,会议直播中伴随的手语翻译,与我们之前在电视台左下角看到的真人翻译不同。

这次华为派来的翻译有所不同。

她是一个“数字人类”。

“她”真是灵巧。

她的灵巧来自于“机器翻译算法”,她的灵巧来自于“多模态数字人生成算法”。

这款手语翻译器不仅是华为最新技术的展示,也是一项可以让众多开发者受益的基础技术。

只要开发者愿意,他们就可以像华为一样,在自己的应用程序中安排类似的手语翻译器。

这个手语翻译器是新发布的HMS Core 6中一项重要能力的具体体现。

到2020年,HMS Core 6已经摆脱了开发移动应用的限制。

那么除了这些限制之外,它的舞台还可以拓展到哪里呢? HMS Core 6能为开发者做什么?了解了HMS Core 6是什么之后,我们可以思考一下它能做什么?手语翻译是HMS Core 6能力的具体体现。

实际上,其背后的技术称为SignPal Kit。

既然背后有Kit(工具集),就意味着开发者可以用它来做更多的事情。

总之,手语服务(SignPal Kit)提供手语生成能力,可以将文本实时翻译成流畅、自然、符合听障群体表达习惯的手语动作数据,帮助构建创新的应用程序以实现信息可访问性。

比想象更严重的是,世界卫生组织的最新数据显示,全球约有4.66亿人患有致残性听力损失,几乎超过世界人口的5%。

因此,帮助这些人轻松使用电子产品,实现信息无障碍,几乎是各大企业的重要社会责任之一。

SignPal Kit 是一个教人钓鱼的工具,但完成它并不简单。

首先,华为完成了自主研发的预训练大语言模型、机器翻译算法、多模态数字人动作生成算法。

同时与信息无障碍研究会合作,与北京师范大学教育部合作,整合手语语言学的专家知识,实现连贯、自然的手语身体姿势、手势动作的生成和表达方式。

目前词汇量已超过0,准确率超过90%。

开发者还可以定制3D角色,表达自然流畅、符合人类习惯的手部动作、身体姿势和面部表情。

3D建模能力(3D Modeling Kit)是HMS Core 6的又一重要更新。

其实,3D建模能力并不新鲜,但这次不同的是,它只需要普通的RGB摄像头,就可以通过手机高效生成3D。

华为HDC2021手语翻译器受欢迎, “她”为何能如此灵巧?

电话。

模型。

关键是要降低“门槛”。

这几年,我在很多科技展会上看到了很多3D扫描和建模设备。

它们都体积庞大且昂贵。

但现在,只需一部普通的智能手机,加上这个3D建模套件,就可以支持物体背景分割。

重建后的模型没有背景,边缘更加清晰干净。

了解此功能的最简单场景可能是在购物应用程序中。

现在,如果你想看到产品的全貌,你需要添加八九张图片或拍摄视频。

现在您可以生成 3D 模型来以三维方式展示产品。

当然,这种能力并不仅限于购物场景。

很多游戏道具的造型往往是根据真实物品重新绘制的。

3D建模套件自然也能为游戏开发者带来便利。

HMS Core 6拥有多项让游戏开发者受益的新能力:AR环境光照追踪、Computer Graphics Kit(图形计算套件)和Scene kit(图形引擎)。

如果说 3D 建模功能让现实更加真实,那么这些新功能则让虚拟更加真实。

要实现AR体验的沉浸感,需要虚拟物体和真实物体的视觉一致性,否则会造成混乱。

华为AR环境光追踪率先实现厘米级虚实融合能力。

它可以估计环境光照条件,并与渲染引擎结合,可以使AR虚拟物体具有与真实物体相同的光影效果。

Computer Graphics Kit(图形计算套件)首次在移动端实现动态雾霾效果; Scene Kit(图形引擎)首次在移动设备上应用光线追踪技术,模拟现实世界中的光线反射和折射效果。

它是在可以模拟湖面倒影、镜面反射等令用户头疼的场景之前开发的。

同时,Scene Kit(图形引擎)提供的真实感还包括3D模型碰撞、下落和旋转的效果,还可以提供泛光、景深、运动模糊等后处理特效。

总之,很多时候,图形问题实际上是物理问题,物理问题最后是数学问题。

在华为P50系列发布会上,有一项名为AI异构通信技术的信号提升技术。

作为华为长期以来的技术领先者,该技术也与HMS Core 6一起向所有开发者开放,帮助用户获得高速稳定的通信。

网络体验,这个体验涵盖了WiFi和移动网络。

比如我的游戏即将更新,更新包包含2G。

如果不连接AI异构通信技术中的Network Kit,在4G网络下下载可能需要十几分钟。

不过,有了Network Kit,通过多线程进行下载,智能分片算法可以加快下载速度,并且通过透明压缩技术,可以减少下载的数据量。

两者叠加,可能几分钟就下载完成。

而且进入游戏之后,这项技术也能发挥作用,将游戏网络延迟降低很多。

只要你的手能跟上你的大脑,手机的反应就能跟上。

作为一次重大更新,HMS Core 6 拥有多种新能力,很难在一篇文章中涵盖。

但前面说了这么多,其实只有一个方向:用实用的能力帮助开发者解决实际问题,最终提升用户体验。

例如,音频编辑套件可以将音频的不同组成部分渲染到指定的空间方向,以实现最新的空间音频效果; Petal Maps平台的车道级导航功能可以让导航更加精准、人性化;安全芯片模块和模块信任管理服务可以助力数字人民币受理环境,让交易安全、快捷。

在这些众多功能中,有些功能解决了长期存在的问题,例如信号和网络速度问题;还有一些是面向未来的跨平台、跨设备的,比如超低阈值的3D建模能力、AR环境光照追踪等;还有一些将两者结合起来并具有公益属性,例如手语服务和数字人技术。

如果从数字孪生的角度来看,HMS Core 6甚至可以应用到“元宇宙”的概念。

我们之前写过《元宇宙需要「基建狂魔」》,记录了很多在这个概念早期为元宇宙搭建基础设施的厂商,比如Unity、Nvidia、Epic等。

我们的核心观点是,如果谈实际体验的话30年后的元宇宙,那么我们很遗憾现在不能提供它。

如果我们谈一下实现他的设想过程中的一个小小的实现条件,技术人员或许能够给出一个可行的解决方案。

最终,当很多条件逐渐实现的时候,虚拟宇宙的体验也就不远了。

这是一条满是沙子的路。

然而,有时沙子聚了又聚,但最终还是一团散沙。

这就需要各种开发工具来有效地将沙粒聚集在一起并最终塑造它们。

元宇宙并不缺乏概念和愿景,但缺乏计算能力、高速低延迟的网络、平台和内容。

可以说,HMS Core 6中的低门槛3D建模、实时手语直播+数字人、AR环境光照追踪、移动设备光线追踪技术、花瓣地图等都是可以为未来贡献内容的技术。

元宇宙的概念并成为基本能力。

未来太遥远,HMS Core 6有什么实际意义?很多人有一个基本的误解,认为元宇宙大约等于虚拟现实。

这个虚拟空间与现实世界关系不大。

但事实上,据技术专家介绍,在其具体实现过程中,纯虚拟空间只是其中的一部分;与物理世界的有机结合,也就是人们通常所说的CPS网络物理系统,或者数字孪生,可以使其更准确地表达技术的趋势和技术以人为本的初衷。

最终,物理空间中的所有对象,包括其属性、行为和关系,都需要通过数字建模映射到网络空间,使物理空间成为网络空间中的可计算对象。

但更重要的是,网络空间的计算结果也需要映射回物理空间,从而增强人类现实世界的能力。

因此,如果不谈未来的概念,只谈互联网技术的一个核心发展逻辑,其实就是“让物理空间成为网络空间的可计算对象,增强人类现实世界的能力”。

在这个发展过程中,有无数的问题需要解决、需要涉及的领域。

比如手机动画,从一开始的线性动画,发展到符合人们直观感受和现实世界物理规律的非线性动画。

这是一个进步的例子。

然后,模型从平面2D到三维3D可以改善购物应用的体验; AR环境光追踪和移动设备光线追踪技术可以帮助打造更好的移动游戏体验,让移动游戏不再只是擦屏幕。

实时手语直播+数字人在两个意义上具有包容性:帮助残疾人更好地欣赏科技发展成果,帮助开发者服务好这一人群。

HDC上巧妙的手语翻译可以存在于每部手机中。

如果说“让物理空间成为网络空间的可计算对象,增强人类现实世界能力”这句话太过宏大,那么手语直播+数字人技术就是这句话的恰当例子。

华为HMS Core、开发者和用户在一个小而重要的十字路口进入了这一宏伟命题。

当这样的例子越来越多时,HMS的生态就会开始形成。

截至目前,华为在全球拥有超过1万名注册开发者,全球已有超过17.3万个应用与HMS Core集成。

HMS Core广泛应用于网页应用、快应用、Android、鸿蒙等应用和服务,以及手机、平板、智慧屏、智能手表、汽车等领域。

此次,HMS Core 6进一步开放了Graphics、Media、AI、App Services、System(图形、媒体内容、人工智能、应用服务和系统)5大领域的创新能力和特性,并推出9款全新套件。

与鸿蒙OS的快速运行类似,当前的HMS Core共涵盖7大领域、69个Kit,为开发者社区提供了丰富的帮助。

当然,这些能力最终是服务于大众用户的。

正如一开始提到的,HMS Core 提供了砖块、瓦片、混凝土、钢筋、卡车、玻璃等建筑材料和工具来帮助开发商建造房屋,但实际上我们也可以想象,HMS Core 6 推出的能力可能是在帮助开发商修路、做精装修、做景观设计之后,HMS的生态想象不仅仅局限于房屋的集合,而可能是一座充满活力的城市,甚至是一座更精彩的城市。

多元化的宇宙。

华为HDC2021手语翻译器受欢迎, “她”为何能如此灵巧?

站长声明

版权声明:本文内容由互联网用户自发贡献,本站不拥有所有权,不承担相关法律责任。如果发现本站有涉嫌抄袭的内容,欢迎发送邮件 举报,并提供相关证据,一经查实,本站将立刻删除涉嫌侵权内容。

标签:

相关文章

  • 为什么理想的MEGA能卖到56万?

    为什么理想的MEGA能卖到56万?

    今天看到一个笑话:理想MEGA一到店里,所有喝酒的人都看着他微笑,还有人喊道:“理想MEGA,你的订单还没过万呢!”他没有回答,对柜台说道:“温两碗酒,要一盘茴香豆。 ”然后他给了九个硬币。 他们故意大声喊道:“你一定是在发布会上骗人的!”理想MEGA睁大眼睛,道:“你

    06-21

  • 周鸿祎再次爆料,360新款路由器等产品谍照泄露

    周鸿祎再次爆料,360新款路由器等产品谍照泄露

    周教主又“调皮”了。 他刚刚宣布将于6月11日在北京举办路由器新品发布会,大家都在猜测会发布什么新品。 当时,周鸿祎在周六凌晨深夜发的“自我推销”微博中提前透露了自己的新产品。 是没有什么新意还是依然沿用“家族式前脸”设计?在老周泄露的新品谍照中,一大一小两款新

    06-18

  • 有消息称开心网赴美上市或遇阻,被指错失最佳时机

    有消息称开心网赴美上市或遇阻,被指错失最佳时机

    7月15日,投资界消息称,前国内SNS明星公司开心网遭遇其赴美上市遭遇重重阻碍,错失最佳时机。 首次公开募股的机会。   上述消息人士表示,开心网由于自身流量下降、资本市场环境不佳以及中概股诚信问题,在申请IPO过程中遇到了很大困难,SEC (美国证券交易委员会)开心网

    06-18

  • 如果我听不懂元宇宙的外语怎么办? Meta:新技术可翻译128种语言

    如果我听不懂元宇宙的外语怎么办? Meta:新技术可翻译128种语言

    作为元宇宙最坚定的支持者之一,Facebook上个月宣布将更名为Meta。 此后,它又有了新动作。 它首先推出了一款触觉手套,试图让人们在 VR 世界中导航。 还可以体验到触觉的变化。 触摸之后,Meta 专注于语言。 它让人们在虚拟世界中无障碍沟通。 即使双方使用不同的语言,你可

    06-21

  • 中国互联网30年-互联网企业代表发言:新华网

    中国互联网30年-互联网企业代表发言:新华网

    1.中国互联网的起步与发展:自2008年开通64K国际专线以来,中国互联网经历了从无到有、从跟随到领先的过程。 2、新华网角色:作为记录者、传播者和建设者,新华网见证了中国经济的发展和世界的变化,同时在互联网领域取得了令人瞩目的成就。 3、技术创新与融合:新华网通过“

    06-18

  • 雷科智图完成1亿元A轮融资,由中关村资本、中关村创投

    雷科智图完成1亿元A轮融资,由中关村资本、中关村创投

    投资圈(ID:pedaily)3月7日消息,据36氪报道,商用车自动驾驶公司“雷科智”已完成100万元A轮融资。 本轮融资由中关村资本、中关村创投领投,中信建投、首科发展集团及老股东考拉基金跟投,北京智能硅谷担任独家投资方。 本轮资金将主要用于主导产品的持续迭代、生态上下游

    06-17

  • 【融资24小时】2022年4月16日-17日

    【融资24小时】2022年4月16日-17日

    【融资24小时】2022年4月16-17日 2022年4月16-17日投融资事件汇总及明细。 近48小时内,境内市场共发生4起投资披露事件,其中,分别是传统制造业1个案例(新威凌)、汽车交通1个案例(车配宝1个)、电商零售1个案例(掌上一拍1个)、本地生活1个案例(必上阁1个)。 详情 传统

    06-18

  • “AI算法+机器人”赋能柔性生产,锐捷科技完成数千万Pre-A轮融资

    “AI算法+机器人”赋能柔性生产,锐捷科技完成数千万Pre-A轮融资

    投资界(ID:pedaily)9月30日消息,定位自主研发智能柔性生产系统,面向行业等衣锐捷科技宣布,公司已完成数千万Pre-A轮融资,投资方为AA投资。 本轮融资主要用于团队建设以及扩大生产交付能力。 在电子商务和产业升级的双重推动下,服装行业减少库存、提高周转率已成为行业

    06-18

  • 美团比京东更需要董宇辉

    美团比京东更需要董宇辉

    董宇辉“单飞”后,京东公开试图招募他加入美团行列。 但与京东相比,在本地生活领域面临挑战的美团可能比主播更需要董宇辉这样的顶级球员。 近日,京东多个官方直播间都挂起了横幅,邀请董宇辉配合,并声称相关计划已紧急制定。 人士还透露,京东召开了多次内部会议,讨论招

    06-18

  • 初创企业如何激励人才?

    初创企业如何激励人才?

    精准的人才激励让公司走得更快。 人才是创业公司能否走得快的“点金石”。 高瓴DVC自成立以来,已组织人才团队服务多家被投企业,并整理出一套适合初创企业的人才激励方式。 他们洞察到,精准的人才激励体系可以从组织建设、组织运行、组织效率提升三个方面保障初创企业的快速

    06-18

  • 小鹅通完成1.2亿美元D轮融资,由IDG资本领投

    小鹅通完成1.2亿美元D轮融资,由IDG资本领投

    6月15日消息,近日,以知识产品和用户服务为核心的科技服务商小鹅通正式宣布完成1.2亿美元融资D 系列融资。 本轮融资由IDG资本领投,启明创投、纪源资本、高瓴创投跟投。 本轮融资将主要用于继续加大产品及核心技术研发投入,加强产研、运营和服务团队建设,进一步完善服务体

    06-18

  • 新能源商用车新势力“德力汽车”完成7亿元B轮融资

    新能源商用车新势力“德力汽车”完成7亿元B轮融资

    据投资界(ID:pedaily)8月11日消息,德力新能源汽车股份有限公司完成7亿元B轮融资。 德力汽车股份有限公司(以下简称“得力汽车”)近日宣布完成7亿元B轮融资。 本轮融资由桉树资本、国轩高科联合领投,汇通达网络、点石资本、宏景智家等跟投。 星无限资本担任财务顾问。

    06-18