首页 > 科技未来 > 内容

3D机器视觉迎来爆发机遇

发布于:2024-06-18 编辑:匿名 来源:网络

迈向智能时代的过程不仅需要AI技术,还需要一系列与AI相匹配的计算、感知、连接等技术。

其中,3D感知尤为关键。

纵观当下最受关注的几大领域,智能机器人、自动驾驶汽车、XR(包括VR、AR、MR)以及今年最火的元宇宙都需要3D感知。

但长期以来,3D机器视觉主要应用于智慧城市监控,未能在更多领域得到应用。

原因有很多,包括成本、技术成熟度、3D视觉芯片使用门槛等。

联合创始人、银牛微电子首席战略官白逸对雷峰网表示:“通过激光雷达、红外辅助等方式获得的二维信息有限,很难进行进一步的计算、判断、控制等功能。

我们需要从2D转向3D要实现获取信息质量和数量的飞跃,需要跨越巨大的技术差距,只有成熟的3D机器视觉产品才能快速应用“全球唯一集成的3D深度感知”。

+ SLAM(实时定位和SLAM)。

具有建图+AI功能的单芯片在中国市场的推广应用将加速3D机器视觉的爆发。

3D机器视觉为何难以普及?著名的心理学家三转(Treicher)曾验证过一组数据,人类获得的信息83%来自视觉,11%来自听觉。

显然,要实现机器智能、迈向智能时代,视觉信息非常关键,尤其是3D视觉。

例如,今年最受欢迎的球员元宇宙就需要与3D视觉密切相关的XR将现实世界映射到虚拟世界。

2008年VR迎来了投资热潮,次年被称为“VR年”。

当时,VR设备的眩晕和内容的不足,使其未能成为“VR元年”。

直到2008年,Meta卖出了1万套VR头盔Oculus Quest 2,业界认为XR迎来了新的爆发期。

自动驾驶汽车和智能机器人也是需要3D视觉的典型领域,但它们也面临着各自的挑战。

3D机器视觉迎来爆发机遇

在自动驾驶汽车领域,纯2D视觉解决方案,无论是摄像头还是激光雷达,都需要大量数据,并带来巨大的成本挑战。

机器人所需的3D视觉技术也因技术和开发难度限制而难以大量应用。

在3D视觉领域拥有丰富经验的银牛微电子副总裁何火高指出,“3D视觉不仅仅是芯片或算法的问题,还涉及到相关的光学、结构、散热等问题,加上芯片、算法组成的复杂技术体系,使得3D视觉芯片及解决方案具有非常高的技术门槛,需要更多的时间、技术、人才投入。

“一个好的技术和一个成功的产品最终能否推动整个生态系统的发展?”开发上有巨大的差距,而这个差距的90%可能就是软件的工作量。

”白逸进一步表示,“只有提供完整的系统级解决方案,才能满足市场需求。

我们也相信双目3D视觉将会降低整个人工智能机器视觉的成本。

“技术门槛高,也导致该领域只有少数几家拥有较强技术和产品能力的公司,这阻碍了3D视觉技术的快速普及。

一个很好的例子就是苹果以360美元收购以色列3D芯片公司PrimeSense已申请专利,在iPhone上实现3D面部识别Face ID功能,由于其他厂商没有类似的技术和产品供应商,因此很难在XR和自动驾驶的手机上实现苹果的3D识别功能。

在汽车和智能机器人领域,集成多种功能的3D视觉感知AI芯片已经进入市场,这可能会导致这些领域3D视觉的爆发,全球独一无二的3D感知AI芯片是3D的先驱。

PrimeSense 首席技术官 Dor Zepeniuk 和拥有 38 年半导体设计经验的连续成功企业家 Shlomo Gadot 在以色列创立了 Inuitive,吸引了一批经验丰富的人才,他们的专业知识横跨 8 个主要学科,每个人的经验都超过 20 年。

一群有理想、有先进设计理念的企业家并不满足于推出一款简单超越市场现有芯片的3D芯片。

他们想要再次突破,挑战难度更高的异构3D视觉芯片。

最终,Inuitive在2016年获得了成功,推出了全球唯一一款能够在单芯片中同时实现3D深度感知、高精度姿态跟踪、SLAM实时定位引擎和AI算力的异构芯片NU。

这些功能的难度非常大,因为它们需要同时集成计算机视觉、人工智能、光学、系统架构、嵌入式系统软件、边缘计算和芯片设计等多种技术。

它拥有Inuitive独特的3D传感技术,加上SLAM和异步时间。

Warp技术(如果视频帧率不足,可以生成中间帧,减少屏幕抖动,减少眩晕,实现从动作到屏幕响应延迟小于1毫秒)。

融合AI的银牛一经推出就得到了市场的认可。

今年11月,微电子成功收购Inuitive,该公司已量产全球独一无二的3D传感AI芯片。

银牛微电子董事长兼首席执行官曲冠成表示:“这可能是史上最快的国际并购。

合并仅用了4.5个工作日就完成了。

这与我们在合并前打下的良好基础、我过去的经验以及各方的支持是分不开的,最终导致收购这么快就完成了。

“实现并购并不是最大的挑战,更大的困难来自于并购后的整合。

白逸表示,“收购完成后,我们有一系列措施来维持和稳定原以色列团队的核心管理和研发团队,因为他们是整个公司的宝贵资产。

目前,员工流失率极低。

”中以双方团队积极整合,聚焦双目立体3D感知,共同规划产品路线图、开发产品”,其中一个重要举措就是银牛微电子绝对控股Inuitive,但瞿冠成并未收购创始团队的股份。

通过与创始团队保持合作关系,可以更好地共同推动3D机器视觉在中国及全球的大规模应用。

雷峰网注意到,虽然Inuitive的团队在各个领域拥有丰富的经验,但其核心专利仅有25项。

曲冠成解释道,“Inuitive只申请了最核心的专利,因为他们正在申请美国发明专利。

不仅申请流程复杂,而且维护费用也非常昂贵。

申请大量专利的主要是产品公司,而Inuitive是一家研发初创公司。

公司。

接下来,我们将在中国申请数百项专利。

“未来两年,银牛微电子的3D传感AI芯片技术将从12nm演进到7nm甚至5nm,中国团队将继续参与产品开发,在研发中实现更好的集成。

”今年的任务是在中国量产基于NU芯片的3D模块。

”白逸表示,“NU已经有很多参考设计,但第一个量产的模块产品是新发布的C,专门为中国客户设计和优化“主要目标市场是智能机器人,还可应用于XR/3D交互、3D扫描、高端无人机等领域。

”曲冠成强调,中国客户的设计不同,更加多样化。

根据需求,银牛微电子必须做好本地产业供应链的管理,才能更好地适应本地化需求,客户的响应时间将在24小时内**”未来几年,我们可以看到大量的。

3D机器视觉应用在低速辅助驾驶、智能机器人和AR/VR三个领域。

”曲冠成说。

**智能机器人3D视觉将率先爆发。

“技术再好,如果成本太高或者没有市场聚焦,也不会落地。

”曲冠成进一步表示,“之所以在中国市场率先推出机器人模块,一方面是因为疫情的影响,服务机器人的市场需求爆发式增长,另一方面是市场的战略调整。

行业龙头也给了我们很大的机会。

”《中国机器人产业发展报告(年)》数据显示,2019年全球机器人市场规模预计达到8亿,其中中国服务机器人市场规模2018年将达到6亿,高于全球服务机器人市场增速;到2020年,随着视觉引导机器人、陪伴服务机器人等新兴场景和产品的快速发展,中国服务机器人市场规模预计将突破亿元。

白逸解释道,“我们推出的C模块可以理解为通用芯片加专用模块。

满足了智能机器人领域大部分客户的需求。

其他领域的客户需要专用模块。

由于我们NU芯片的通用性,基于通用芯片模块的迭代周期只需要几个月,比芯片迭代周期短得多。

因此,通过不断迭代模块,我们不仅可以更好地满足同一市场的需求,还可以拓展新的市场。

”据了解,银牛微电子明年至少会扩充软件团队,以支持不断增长的客户需求。

整个公司软件团队的人数可能是硬件团队人数的两倍甚至更多,至于银牛微电子是否会直接销售芯片,白逸表示,“这是商业考虑的问题”。

到三年前,3D机器视觉仍处于起步阶段。

生态系统的成熟度和解决方案的成熟度决定了客户直接使用如此复杂的芯片将是困难的。

3D视觉模块实际上可以降低客户的使用门槛。

和成本,加速3D机器视觉的实施。

随着3D机器视觉的发展,未来直接销售芯片成为可能。

具体性能,C深度分辨率可达x@60fps,精度误差在6米以内。

仅1%,0.5w即可实现5-6 TOPS算力。

内置通用Arm核支持系统独立性,让系统兼顾协处理器和主控系统,同时C配备丰富的接口和系统支持,使模块和外设都可以实现USB即插即用的效果。

值得一提的是,得益于高度集成的NU芯片,C模块的尺寸为mm x 40mm x 27mm,支持2路摄像头的fps和6自由度坐标重新定位,可以实现真实的。

最后,任何新技术的成熟和大规模应用都需要多种因素的共同作用,技术成熟度和成本是过去3D机器视觉产品面临的巨大挑战。

-产品集成度不够、使用困难导致规模化应用。

随着银牛微电子基于独特集成实现3D深度感知、高精度姿态跟踪、SLAM实时定位引擎和AI算力芯片的模组引入中国市场,国内智能机器人企业和机构又增添了一个产品被市场广泛接受,将推动3D机器视觉在智能机器人领域的快速应用。

在可预见的3-5年内,3D机器视觉还将广泛应用于低速辅助驾驶、VR/AR等领域。

它将与其他计算、感知和连接技术一起,推动3D机器视觉的爆发,迈向更加智能的世界。

时代。

3D机器视觉迎来爆发机遇

站长声明

版权声明:本文内容由互联网用户自发贡献,本站不拥有所有权,不承担相关法律责任。如果发现本站有涉嫌抄袭的内容,欢迎发送邮件 举报,并提供相关证据,一经查实,本站将立刻删除涉嫌侵权内容。

标签:

相关文章

  • 用这款软件看看APP在用户背后做了什么

    用这款软件看看APP在用户背后做了什么

    近日,一条微博发文称“iOS版微信/QQ/淘宝等APP反复在后台读取用户相册” ” 成为热搜话题后,微信回应称“iOS系统为应用开发者提供了标准的相册更新通知能力。 当相册内容有更新时,会通知应用程序,提醒应用程序提前准备,应用程序的准备行为将被记录为读取系统相册。 ”。

    06-21

  • 华虹半导体2022年第一季度业绩公布

    华虹半导体2022年第一季度业绩公布

    华虹宏力中国香港 - 2020年5月12日 - 全球领先的特种工艺纯晶圆代工厂华虹半导体股份有限公司公布截至2020年全年业绩截至2022年3月31日止三个月的综合经营业绩。 2022年第一季度主要财务指标(未经审计)销售收入创历史新高,达到5亿美元,同比增长-同比增长95.1%,环比增长1

    06-06

  • 门票卖到6万元,周杰伦演唱会黄牛“集体退票”

    门票卖到6万元,周杰伦演唱会黄牛“集体退票”

    10月12日,为期四天的周杰伦上海演唱会正式开始。 这本来是周杰伦粉丝最期待的时刻,但一些提前买票、订好行程的粉丝却没能如愿出席。 就在演唱会前一天,大批黄牛集体退票的消息成为热搜话题。 有卖家表示,主办方原计划的信息没有实现,所以正在取消订单。 不过,这一说辞并

    06-17

  • 首次发布 -黑蚂蚁资本完成超级募资

    首次发布 -黑蚂蚁资本完成超级募资

    在我的印象中,这是消费基金今年最大的募资。 据投资界10月10日消息,黑蚂蚁资本人民币基金三期募资25亿。 该LP主要由市场化基金中的基金、保险机构和产业投资者组成,另外还有一只即将交割的政府引导基金。 此前,黑蚂蚁资本已完成两轮人民币主基金和一轮美元主基金募集,而

    06-17

  • 马斯克:未来汽车将实现自动驾驶

    马斯克:未来汽车将实现自动驾驶

    特斯拉首席执行官埃隆马斯克表示,毫无疑问,未来汽车将实现自动驾驶,而且除了火箭之外,未来所有交通工具都将是电动的。

    06-17

  • 阿里巴巴创新神经网络硬件架构,论文入选国际顶级会议ISCA 2022

    阿里巴巴创新神经网络硬件架构,论文入选国际顶级会议ISCA 2022

    6月23日,架构领域国际顶级会议ISCA刚刚落下帷幕。 阿里巴巴达摩院在图神经网络计算领域的论文被会议收录。 该文章开创了一种新的硬件架构,可以显着提高图神经网络的处理效率,并将硬件成本降低一半。 ISCA、MICRO、HPCA被誉为建筑领域三大顶级会议。 ISCA成立于2007年,见证

    06-17

  • 佣金最高26%,商家抨击美团提高佣金“吸血”,官方回应称:我们也赚不到钱

    佣金最高26%,商家抨击美团提高佣金“吸血”,官方回应称:我们也赚不到钱

    猝不及防,美团成了外卖行业的“公敌”。 受疫情影响,餐饮、旅游、酒店等多个行业面临生存危机。 外卖已经成为商家的救命稻草。 美团的规定让广大餐饮商家的处境“雪上加霜”的是:如果商家同时入驻美团,饿了么的话,佣金可能会达到30%。 商家抗议称,“这简直是霸道条款,

    06-18

  • 12年后,iPhone终于“变成”POS机了

    12年后,iPhone终于“变成”POS机了

    如果你不是iPhone 4时代的智能手机用户,你很可能不知道这个设备的用处。 在智能手机还有3.5mm耳机接口的时代,很多外设厂商都想利用这个接口来扩展手机的功能。 连接读卡器,将手机变成POS机,可以说是当时移动支付的先驱。 随着时间的推移,人们已经开始忘记刷卡器、忘记3.

    06-21

  • 超嗨科技完成数千万元A+轮融资,汉朔科技领投

    超嗨科技完成数千万元A+轮融资,汉朔科技领投

    投资天地 10月18日,智能购物车公司超嗨科技完成数千万元A+轮融资。 本轮融资由汉朔科技领投。 今年3月,公司完成由洪泰基金领投,前海母基金、盛岛投资跟投的数千万元A轮融资。 本次A+轮融资将用于进一步推动超嗨科技零售数字化解决方案的升级。 公司旨在通过智能数字解决方

    06-17

  • 消费级AR眼镜即将爆发:Rokid+无影突破算力极限打造“第三屏” -云谷创新讲座Vol.16

    消费级AR眼镜即将爆发:Rokid+无影突破算力极限打造“第三屏” -云谷创新讲座Vol.16

    近两年来,人们不断探索下一代计算平台和交互方式。 AR技术备受关注,AR眼镜被视为未来有望独立于手机和电脑的“第三屏”。 而祝铭明对AR眼镜的想象远远超出了“屏幕”。 谈话开始前,他向我们展示了Rokid最新的AR眼镜和Rokid车站。 祝铭明戴上AR眼镜,通过蓝牙连接外部设备

    06-18

  • 风气变了,幸好企业家和雷军并没有留恋过去

    风气变了,幸好企业家和雷军并没有留恋过去

    以前,媒体人会私下打赌小米是否会推出某类产品。 后来大家才发现,这样的赌博毫无意义。 因为总是猜“是”的人赢了赌注。 渐渐地,人们明白,并不是小米(及其附属公司)的每一款产品都会像手机、充电宝、手环那样具有毁灭性和行业颠覆性。 通常,小米(及其附属公司)层出不

    06-17

  • 从三线城市到产业创新热点,鹤壁为何占据上风?

    从三线城市到产业创新热点,鹤壁为何占据上风?

    作者 |杜航 “近年来,鹤壁市紧紧抓住新一轮科技革命和产业变革的历史机遇。 ”近日,鹤壁市岐滨区人大常委会副主任刘翠凤出席中国5G产业创新创业大赛北京赛区津冀赛区决赛。 “鹤壁市坚持把推进5G建设作为增强自主创新能力、推动产业转型升级、提高政府治理效率的战略举措。

    06-18