首页 > 科技未来 > 内容

华为HDC2021手语翻译器受欢迎, “她”为何能如此灵巧?

发布于:2024-06-21 编辑:匿名 来源:网络

华为需要从硬到软重新认识。

10月22日,华为开发者大会(Together)在东莞松山湖正式开幕。

在主题演讲中,华为正式发布了全新的多终端、跨操作系统、全场景的华为移动核心服务能力HMS Core 6。

构建共享共赢的HMS新生态。

但它不仅仅属于开发者,它可能属于我们每个人。

基础软件技术与我们的距离其实并没有那么遥远。

HMS Core(华为移动核心服务)是华为软硬件开放能力的集合。

它运行在操作系统上,允许应用程序调用各种开放能力并提供各种服务。

作为HMS生态的重要组成部分,HMS Core连接开发者和用户,赋能开发者高效开发和创新应用,同时提升用户体验。

如果我们把它比作盖房子,华为提供砖、瓦、混凝土、钢筋、卡车、玻璃等建筑材料和工具。

到底是建为乡村木屋、郊区别墅,还是市中心百货商店,取决于开发商的决定。

虽然HDC是一个主要面向开发者的会议,但也有很多场外消息。

比如,会议直播中伴随的手语翻译,与我们之前在电视台左下角看到的真人翻译不同。

这次华为派来的翻译有所不同。

她是一个“数字人类”。

“她”真是灵巧。

她的灵巧来自于“机器翻译算法”,她的灵巧来自于“多模态数字人生成算法”。

这款手语翻译器不仅是华为最新技术的展示,也是一项可以让众多开发者受益的基础技术。

只要开发者愿意,他们就可以像华为一样,在自己的应用程序中安排类似的手语翻译器。

这个手语翻译器是新发布的HMS Core 6中一项重要能力的具体体现。

到2020年,HMS Core 6已经摆脱了开发移动应用的限制。

那么除了这些限制之外,它的舞台还可以拓展到哪里呢? HMS Core 6能为开发者做什么?了解了HMS Core 6是什么之后,我们可以思考一下它能做什么?手语翻译是HMS Core 6能力的具体体现。

实际上,其背后的技术称为SignPal Kit。

既然背后有Kit(工具集),就意味着开发者可以用它来做更多的事情。

总之,手语服务(SignPal Kit)提供手语生成能力,可以将文本实时翻译成流畅、自然、符合听障群体表达习惯的手语动作数据,帮助构建创新的应用程序以实现信息可访问性。

比想象更严重的是,世界卫生组织的最新数据显示,全球约有4.66亿人患有致残性听力损失,几乎超过世界人口的5%。

因此,帮助这些人轻松使用电子产品,实现信息无障碍,几乎是各大企业的重要社会责任之一。

SignPal Kit 是一个教人钓鱼的工具,但完成它并不简单。

首先,华为完成了自主研发的预训练大语言模型、机器翻译算法、多模态数字人动作生成算法。

同时与信息无障碍研究会合作,与北京师范大学教育部合作,整合手语语言学的专家知识,实现连贯、自然的手语身体姿势、手势动作的生成和表达方式。

目前词汇量已超过0,准确率超过90%。

开发者还可以定制3D角色,表达自然流畅、符合人类习惯的手部动作、身体姿势和面部表情。

3D建模能力(3D Modeling Kit)是HMS Core 6的又一重要更新。

其实,3D建模能力并不新鲜,但这次不同的是,它只需要普通的RGB摄像头,就可以通过手机高效生成3D。

华为HDC2021手语翻译器受欢迎, “她”为何能如此灵巧?

电话。

模型。

关键是要降低“门槛”。

这几年,我在很多科技展会上看到了很多3D扫描和建模设备。

它们都体积庞大且昂贵。

但现在,只需一部普通的智能手机,加上这个3D建模套件,就可以支持物体背景分割。

重建后的模型没有背景,边缘更加清晰干净。

了解此功能的最简单场景可能是在购物应用程序中。

现在,如果你想看到产品的全貌,你需要添加八九张图片或拍摄视频。

现在您可以生成 3D 模型来以三维方式展示产品。

当然,这种能力并不仅限于购物场景。

很多游戏道具的造型往往是根据真实物品重新绘制的。

3D建模套件自然也能为游戏开发者带来便利。

HMS Core 6拥有多项让游戏开发者受益的新能力:AR环境光照追踪、Computer Graphics Kit(图形计算套件)和Scene kit(图形引擎)。

如果说 3D 建模功能让现实更加真实,那么这些新功能则让虚拟更加真实。

要实现AR体验的沉浸感,需要虚拟物体和真实物体的视觉一致性,否则会造成混乱。

华为AR环境光追踪率先实现厘米级虚实融合能力。

它可以估计环境光照条件,并与渲染引擎结合,可以使AR虚拟物体具有与真实物体相同的光影效果。

Computer Graphics Kit(图形计算套件)首次在移动端实现动态雾霾效果; Scene Kit(图形引擎)首次在移动设备上应用光线追踪技术,模拟现实世界中的光线反射和折射效果。

它是在可以模拟湖面倒影、镜面反射等令用户头疼的场景之前开发的。

同时,Scene Kit(图形引擎)提供的真实感还包括3D模型碰撞、下落和旋转的效果,还可以提供泛光、景深、运动模糊等后处理特效。

总之,很多时候,图形问题实际上是物理问题,物理问题最后是数学问题。

在华为P50系列发布会上,有一项名为AI异构通信技术的信号提升技术。

作为华为长期以来的技术领先者,该技术也与HMS Core 6一起向所有开发者开放,帮助用户获得高速稳定的通信。

网络体验,这个体验涵盖了WiFi和移动网络。

比如我的游戏即将更新,更新包包含2G。

如果不连接AI异构通信技术中的Network Kit,在4G网络下下载可能需要十几分钟。

不过,有了Network Kit,通过多线程进行下载,智能分片算法可以加快下载速度,并且通过透明压缩技术,可以减少下载的数据量。

两者叠加,可能几分钟就下载完成。

而且进入游戏之后,这项技术也能发挥作用,将游戏网络延迟降低很多。

只要你的手能跟上你的大脑,手机的反应就能跟上。

作为一次重大更新,HMS Core 6 拥有多种新能力,很难在一篇文章中涵盖。

但前面说了这么多,其实只有一个方向:用实用的能力帮助开发者解决实际问题,最终提升用户体验。

例如,音频编辑套件可以将音频的不同组成部分渲染到指定的空间方向,以实现最新的空间音频效果; Petal Maps平台的车道级导航功能可以让导航更加精准、人性化;安全芯片模块和模块信任管理服务可以助力数字人民币受理环境,让交易安全、快捷。

在这些众多功能中,有些功能解决了长期存在的问题,例如信号和网络速度问题;还有一些是面向未来的跨平台、跨设备的,比如超低阈值的3D建模能力、AR环境光照追踪等;还有一些将两者结合起来并具有公益属性,例如手语服务和数字人技术。

如果从数字孪生的角度来看,HMS Core 6甚至可以应用到“元宇宙”的概念。

我们之前写过《元宇宙需要「基建狂魔」》,记录了很多在这个概念早期为元宇宙搭建基础设施的厂商,比如Unity、Nvidia、Epic等。

我们的核心观点是,如果谈实际体验的话30年后的元宇宙,那么我们很遗憾现在不能提供它。

如果我们谈一下实现他的设想过程中的一个小小的实现条件,技术人员或许能够给出一个可行的解决方案。

最终,当很多条件逐渐实现的时候,虚拟宇宙的体验也就不远了。

这是一条满是沙子的路。

然而,有时沙子聚了又聚,但最终还是一团散沙。

这就需要各种开发工具来有效地将沙粒聚集在一起并最终塑造它们。

元宇宙并不缺乏概念和愿景,但缺乏计算能力、高速低延迟的网络、平台和内容。

可以说,HMS Core 6中的低门槛3D建模、实时手语直播+数字人、AR环境光照追踪、移动设备光线追踪技术、花瓣地图等都是可以为未来贡献内容的技术。

元宇宙的概念并成为基本能力。

未来太遥远,HMS Core 6有什么实际意义?很多人有一个基本的误解,认为元宇宙大约等于虚拟现实。

这个虚拟空间与现实世界关系不大。

但事实上,据技术专家介绍,在其具体实现过程中,纯虚拟空间只是其中的一部分;与物理世界的有机结合,也就是人们通常所说的CPS网络物理系统,或者数字孪生,可以使其更准确地表达技术的趋势和技术以人为本的初衷。

最终,物理空间中的所有对象,包括其属性、行为和关系,都需要通过数字建模映射到网络空间,使物理空间成为网络空间中的可计算对象。

但更重要的是,网络空间的计算结果也需要映射回物理空间,从而增强人类现实世界的能力。

因此,如果不谈未来的概念,只谈互联网技术的一个核心发展逻辑,其实就是“让物理空间成为网络空间的可计算对象,增强人类现实世界的能力”。

在这个发展过程中,有无数的问题需要解决、需要涉及的领域。

比如手机动画,从一开始的线性动画,发展到符合人们直观感受和现实世界物理规律的非线性动画。

这是一个进步的例子。

然后,模型从平面2D到三维3D可以改善购物应用的体验; AR环境光追踪和移动设备光线追踪技术可以帮助打造更好的移动游戏体验,让移动游戏不再只是擦屏幕。

实时手语直播+数字人在两个意义上具有包容性:帮助残疾人更好地欣赏科技发展成果,帮助开发者服务好这一人群。

HDC上巧妙的手语翻译可以存在于每部手机中。

如果说“让物理空间成为网络空间的可计算对象,增强人类现实世界能力”这句话太过宏大,那么手语直播+数字人技术就是这句话的恰当例子。

华为HMS Core、开发者和用户在一个小而重要的十字路口进入了这一宏伟命题。

当这样的例子越来越多时,HMS的生态就会开始形成。

截至目前,华为在全球拥有超过1万名注册开发者,全球已有超过17.3万个应用与HMS Core集成。

HMS Core广泛应用于网页应用、快应用、Android、鸿蒙等应用和服务,以及手机、平板、智慧屏、智能手表、汽车等领域。

此次,HMS Core 6进一步开放了Graphics、Media、AI、App Services、System(图形、媒体内容、人工智能、应用服务和系统)5大领域的创新能力和特性,并推出9款全新套件。

与鸿蒙OS的快速运行类似,当前的HMS Core共涵盖7大领域、69个Kit,为开发者社区提供了丰富的帮助。

当然,这些能力最终是服务于大众用户的。

正如一开始提到的,HMS Core 提供了砖块、瓦片、混凝土、钢筋、卡车、玻璃等建筑材料和工具来帮助开发商建造房屋,但实际上我们也可以想象,HMS Core 6 推出的能力可能是在帮助开发商修路、做精装修、做景观设计之后,HMS的生态想象不仅仅局限于房屋的集合,而可能是一座充满活力的城市,甚至是一座更精彩的城市。

多元化的宇宙。

华为HDC2021手语翻译器受欢迎, “她”为何能如此灵巧?

站长声明

版权声明:本文内容由互联网用户自发贡献,本站不拥有所有权,不承担相关法律责任。如果发现本站有涉嫌抄袭的内容,欢迎发送邮件 举报,并提供相关证据,一经查实,本站将立刻删除涉嫌侵权内容。

标签:

相关文章

  • 关于北交所和专特新产品,官方这次明确了……

    关于北交所和专特新产品,官方这次明确了……

    距离北交所开业已经三个多月了。 截至2月21日,北京证券交易所上市公司84家,战略新兴产业、先进制造业、现代服务业占比87%。 新三板有创新层上市公司和基础层上市公司。 接下来,其如何“打造服务型创新型中小企业主阵地”,持续推动改革发展也备受市场关注和期待。 而且,市

    06-18

  • 俏江南通过港交所听证会拟IPO融资100-2亿美元

    俏江南通过港交所听证会拟IPO融资100-2亿美元

    据路透社报道,中式餐饮集团俏江南已通过港交所听证会获准在香港上市,筹集资金100-2亿美元。 不过,该公司尚未确认具体的发布和分发时间表。 德银和瑞银是此次交易的联席主承销商。   美丽江南原计划在内地上市,但因1月底证监会宣布暂不批准其上市申请,公司改赴香港上市

    06-18

  • 东车日报 -特斯拉自动驾驶团队裁员200人-蔚来祸不单行,被海外机构做空-红牛要造超级跑车

    东车日报 -特斯拉自动驾驶团队裁员200人-蔚来祸不单行,被海外机构做空-红牛要造超级跑车

    简介何小鹏把朋友圈当公众号,我们了解了G9旗舰更多信息 生产饮料的红牛即将推出一款超级跑车,预计将出售。 万元福特正在北美召回 F-Lightning 车辆。 特斯拉电动皮卡裁员仍在继续,其自动驾驶团队也已被裁员。 蔚来的麻烦从来都不是单一的,曾被海外机构做空。 马斯克从21号

    06-21

  • 润迈医疗获近亿美元D轮融资,由平安资本

    润迈医疗获近亿美元D轮融资,由平安资本

    投资圈(ID:pedaily)领投 12月1日消息,据36氪报道,苏州润迈医疗科技有限公司(简称“润迈医疗”)简称“德医疗”)完成近1亿美元D轮融资,由平安资本领投,国际资本Seresia Asset Management、Lighthouse Canton等跟投。 本轮融资将用于加速公司冠状动脉血流储备分数测量

    06-17

  • 大更新!你不用再在微信上从头听起60秒的长语音了,随时可以暂停

    大更新!你不用再在微信上从头听起60秒的长语音了,随时可以暂停

    1月15日,微信iOS版8.0.17更新。 乍一看,它仍然是“解决一些已知问题”的常规更新,但大多数人不知道的是,大家期待的“语音进度条”有不同的解决方案——暂停播放。 对于长语音,在播放过程中按住可暂停语音。 右侧将出现“继续播放”按钮。 单击该按钮,语音将继续播放。

    06-21

  • 佛山市禅城区产业创新发展投资基金,规模5亿元

    佛山市禅城区产业创新发展投资基金,规模5亿元

    禅城区于近日启动《佛山市禅城区促进经济平稳增长若干措施》。 具体内容如下: 一、加大金融对实体经济的支持 (一)降低企业续贷成本。 2020年12月31日前,禅城区企业使用禅城区支持企业融资专项资金续贷,免收资金使用费。 区外企业资金使用费降至每天0.1%。 对受疫情影响较

    06-18

  • 海南自由贸易港建设投资基金出资11.7亿,参与5支子基金

    海南自由贸易港建设投资基金出资11.7亿,参与5支子基金

    据投资界(ID:pedaily)8月11日消息,据海南金融集团,按照《海南自由贸易港建设投资基金管理办法》(琼府办【国发】71号)、海南省金融集团有限公司联合海南自由贸易港建设投资基金管理人银河创新资本管理有限公司,通过征集、申报、到期等程序选定5家勤勉尽责、专家评审会

    06-18

  • 科创板上市委员会:云从科技集团股份有限公司首次公开发行股票获批

    科创板上市委员会:云从科技集团股份有限公司首次公开发行股票获批

    据上交所官网消息,云从科技集团股份有限公司首次公开发行股票获批;上海海和医药研究开发有限公司被停牌审查。

    06-18

  • 氮硅科技完成A轮融资,魅族联合创始人白永祥领投

    氮硅科技完成A轮融资,魅族联合创始人白永祥领投

    投资界(ID:pedaily)消息,近日,氮化镓初创公司氮硅科技完成数千万A轮融资。 本轮融资由前魅族联合创始人领投,兰璞资本、亚商资本跟投。 本轮资金将主要用于产品研发和产品销售。 我们将继续加大研发投入,拓展应用市场,确保在工业应用领域取得突破,并力争2019年在汽车

    06-18

  • 【创业24小时】2024年2月27日

    【创业24小时】2024年2月27日

    2024年2月27日,行业大公司The Paper OS“出海”,小米MWC展前发布会信息量巨大。 点击查看淘特否认将退出历史舞台,但淘宝面临的竞争将更加残酷。 点击查看今年的好莱坞大片能否止住颓势?点击查看远程登录草稿。 还有市场吗?点击查看抖音批量低价,“再造”拼多多?点击查

    06-18

  • 看谷歌和OpenAI如何联合发布五项AI法则打霍金脸

    看谷歌和OpenAI如何联合发布五项AI法则打霍金脸

    近日,谷歌和OpenAI的博客宣布了一项由谷歌、OpenAI、伯克利和斯坦福的学者联合进行的研究,其目的是为AI提供有效的行为约束,使其不会有意无意地做出危害人类的事情。 阿西莫夫的律法已经成为过去。 人工智能的担忧和局限性甚至在人工智能概念诞生之前就已经存在。 在那个人

    06-18

  • 十年梦想,长期为A股IPO奋战的“老兵”们现在怎么样了?

    十年梦想,长期为A股IPO奋战的“老兵”们现在怎么样了?

    中国新集团、乔丹体育、新莲花都对A股市场情有独钟。 尽管三家公司目前的状况不尽相同,但其漫长而坎坷的上市之路背后都或多或少存在着问题。 这反映出市场对问题企业“不妥协”的态度。

    06-17