用这款软件看看APP在用户背后做了什么
06-21
迈向智能时代的过程不仅需要AI技术,还需要一系列与AI相匹配的计算、感知、连接等技术。
其中,3D感知尤为关键。
纵观当下最受关注的几大领域,智能机器人、自动驾驶汽车、XR(包括VR、AR、MR)以及今年最火的元宇宙都需要3D感知。
但长期以来,3D机器视觉主要应用于智慧城市监控,未能在更多领域得到应用。
原因有很多,包括成本、技术成熟度、3D视觉芯片使用门槛等。
联合创始人、银牛微电子首席战略官白逸对雷峰网表示:“通过激光雷达、红外辅助等方式获得的二维信息有限,很难进行进一步的计算、判断、控制等功能。
我们需要从2D转向3D要实现获取信息质量和数量的飞跃,需要跨越巨大的技术差距,只有成熟的3D机器视觉产品才能快速应用“全球唯一集成的3D深度感知”。
+ SLAM(实时定位和SLAM)。
具有建图+AI功能的单芯片在中国市场的推广应用将加速3D机器视觉的爆发。
3D机器视觉为何难以普及?著名的心理学家三转(Treicher)曾验证过一组数据,人类获得的信息83%来自视觉,11%来自听觉。
显然,要实现机器智能、迈向智能时代,视觉信息非常关键,尤其是3D视觉。
例如,今年最受欢迎的球员元宇宙就需要与3D视觉密切相关的XR将现实世界映射到虚拟世界。
2008年VR迎来了投资热潮,次年被称为“VR年”。
当时,VR设备的眩晕和内容的不足,使其未能成为“VR元年”。
直到2008年,Meta卖出了1万套VR头盔Oculus Quest 2,业界认为XR迎来了新的爆发期。
自动驾驶汽车和智能机器人也是需要3D视觉的典型领域,但它们也面临着各自的挑战。

在自动驾驶汽车领域,纯2D视觉解决方案,无论是摄像头还是激光雷达,都需要大量数据,并带来巨大的成本挑战。
机器人所需的3D视觉技术也因技术和开发难度限制而难以大量应用。
在3D视觉领域拥有丰富经验的银牛微电子副总裁何火高指出,“3D视觉不仅仅是芯片或算法的问题,还涉及到相关的光学、结构、散热等问题,加上芯片、算法组成的复杂技术体系,使得3D视觉芯片及解决方案具有非常高的技术门槛,需要更多的时间、技术、人才投入。
“一个好的技术和一个成功的产品最终能否推动整个生态系统的发展?”开发上有巨大的差距,而这个差距的90%可能就是软件的工作量。
”白逸进一步表示,“只有提供完整的系统级解决方案,才能满足市场需求。
我们也相信双目3D视觉将会降低整个人工智能机器视觉的成本。
“技术门槛高,也导致该领域只有少数几家拥有较强技术和产品能力的公司,这阻碍了3D视觉技术的快速普及。
一个很好的例子就是苹果以360美元收购以色列3D芯片公司PrimeSense已申请专利,在iPhone上实现3D面部识别Face ID功能,由于其他厂商没有类似的技术和产品供应商,因此很难在XR和自动驾驶的手机上实现苹果的3D识别功能。
在汽车和智能机器人领域,集成多种功能的3D视觉感知AI芯片已经进入市场,这可能会导致这些领域3D视觉的爆发,全球独一无二的3D感知AI芯片是3D的先驱。
PrimeSense 首席技术官 Dor Zepeniuk 和拥有 38 年半导体设计经验的连续成功企业家 Shlomo Gadot 在以色列创立了 Inuitive,吸引了一批经验丰富的人才,他们的专业知识横跨 8 个主要学科,每个人的经验都超过 20 年。
一群有理想、有先进设计理念的企业家并不满足于推出一款简单超越市场现有芯片的3D芯片。
他们想要再次突破,挑战难度更高的异构3D视觉芯片。
最终,Inuitive在2016年获得了成功,推出了全球唯一一款能够在单芯片中同时实现3D深度感知、高精度姿态跟踪、SLAM实时定位引擎和AI算力的异构芯片NU。
这些功能的难度非常大,因为它们需要同时集成计算机视觉、人工智能、光学、系统架构、嵌入式系统软件、边缘计算和芯片设计等多种技术。
它拥有Inuitive独特的3D传感技术,加上SLAM和异步时间。
Warp技术(如果视频帧率不足,可以生成中间帧,减少屏幕抖动,减少眩晕,实现从动作到屏幕响应延迟小于1毫秒)。
融合AI的银牛一经推出就得到了市场的认可。
今年11月,微电子成功收购Inuitive,该公司已量产全球独一无二的3D传感AI芯片。
银牛微电子董事长兼首席执行官曲冠成表示:“这可能是史上最快的国际并购。
合并仅用了4.5个工作日就完成了。
这与我们在合并前打下的良好基础、我过去的经验以及各方的支持是分不开的,最终导致收购这么快就完成了。
“实现并购并不是最大的挑战,更大的困难来自于并购后的整合。
白逸表示,“收购完成后,我们有一系列措施来维持和稳定原以色列团队的核心管理和研发团队,因为他们是整个公司的宝贵资产。
目前,员工流失率极低。
”中以双方团队积极整合,聚焦双目立体3D感知,共同规划产品路线图、开发产品”,其中一个重要举措就是银牛微电子绝对控股Inuitive,但瞿冠成并未收购创始团队的股份。
通过与创始团队保持合作关系,可以更好地共同推动3D机器视觉在中国及全球的大规模应用。
雷峰网注意到,虽然Inuitive的团队在各个领域拥有丰富的经验,但其核心专利仅有25项。
曲冠成解释道,“Inuitive只申请了最核心的专利,因为他们正在申请美国发明专利。
不仅申请流程复杂,而且维护费用也非常昂贵。
申请大量专利的主要是产品公司,而Inuitive是一家研发初创公司。
公司。
接下来,我们将在中国申请数百项专利。
“未来两年,银牛微电子的3D传感AI芯片技术将从12nm演进到7nm甚至5nm,中国团队将继续参与产品开发,在研发中实现更好的集成。
”今年的任务是在中国量产基于NU芯片的3D模块。
”白逸表示,“NU已经有很多参考设计,但第一个量产的模块产品是新发布的C,专门为中国客户设计和优化“主要目标市场是智能机器人,还可应用于XR/3D交互、3D扫描、高端无人机等领域。
”曲冠成强调,中国客户的设计不同,更加多样化。
根据需求,银牛微电子必须做好本地产业供应链的管理,才能更好地适应本地化需求,客户的响应时间将在24小时内**”未来几年,我们可以看到大量的。
3D机器视觉应用在低速辅助驾驶、智能机器人和AR/VR三个领域。
”曲冠成说。
**智能机器人3D视觉将率先爆发。
“技术再好,如果成本太高或者没有市场聚焦,也不会落地。
”曲冠成进一步表示,“之所以在中国市场率先推出机器人模块,一方面是因为疫情的影响,服务机器人的市场需求爆发式增长,另一方面是市场的战略调整。
行业龙头也给了我们很大的机会。
”《中国机器人产业发展报告(年)》数据显示,2019年全球机器人市场规模预计达到8亿,其中中国服务机器人市场规模2018年将达到6亿,高于全球服务机器人市场增速;到2020年,随着视觉引导机器人、陪伴服务机器人等新兴场景和产品的快速发展,中国服务机器人市场规模预计将突破亿元。
白逸解释道,“我们推出的C模块可以理解为通用芯片加专用模块。
满足了智能机器人领域大部分客户的需求。
其他领域的客户需要专用模块。
由于我们NU芯片的通用性,基于通用芯片模块的迭代周期只需要几个月,比芯片迭代周期短得多。
因此,通过不断迭代模块,我们不仅可以更好地满足同一市场的需求,还可以拓展新的市场。
”据了解,银牛微电子明年至少会扩充软件团队,以支持不断增长的客户需求。
整个公司软件团队的人数可能是硬件团队人数的两倍甚至更多,至于银牛微电子是否会直接销售芯片,白逸表示,“这是商业考虑的问题”。
到三年前,3D机器视觉仍处于起步阶段。
生态系统的成熟度和解决方案的成熟度决定了客户直接使用如此复杂的芯片将是困难的。
3D视觉模块实际上可以降低客户的使用门槛。
和成本,加速3D机器视觉的实施。
随着3D机器视觉的发展,未来直接销售芯片成为可能。
具体性能,C深度分辨率可达x@60fps,精度误差在6米以内。
仅1%,0.5w即可实现5-6 TOPS算力。
内置通用Arm核支持系统独立性,让系统兼顾协处理器和主控系统,同时C配备丰富的接口和系统支持,使模块和外设都可以实现USB即插即用的效果。
值得一提的是,得益于高度集成的NU芯片,C模块的尺寸为mm x 40mm x 27mm,支持2路摄像头的fps和6自由度坐标重新定位,可以实现真实的。
最后,任何新技术的成熟和大规模应用都需要多种因素的共同作用,技术成熟度和成本是过去3D机器视觉产品面临的巨大挑战。
-产品集成度不够、使用困难导致规模化应用。
随着银牛微电子基于独特集成实现3D深度感知、高精度姿态跟踪、SLAM实时定位引擎和AI算力芯片的模组引入中国市场,国内智能机器人企业和机构又增添了一个产品被市场广泛接受,将推动3D机器视觉在智能机器人领域的快速应用。
在可预见的3-5年内,3D机器视觉还将广泛应用于低速辅助驾驶、VR/AR等领域。
它将与其他计算、感知和连接技术一起,推动3D机器视觉的爆发,迈向更加智能的世界。
时代。
版权声明:本文内容由互联网用户自发贡献,本站不拥有所有权,不承担相关法律责任。如果发现本站有涉嫌抄袭的内容,欢迎发送邮件 举报,并提供相关证据,一经查实,本站将立刻删除涉嫌侵权内容。
标签:
相关文章
06-21
06-06
06-17
06-17
06-17
06-21
06-17
06-17
06-18
最新文章
Android旗舰之王的过去与未来
智能手表不被开发、AR眼镜被推迟,Meta的产品经历了一波三折
为什么Cybertruck是特斯拉史上最难造的车?
更新鸿蒙3后,文杰允许你在车里做PPT了
新起亚K3试驾体验:追求“性价比”,韩系汽车仍不想放弃
阿维塔15登场!汽车配备了增程动力,理想情况下会迎来新的对手吗?
马斯克宣布创建 ChatGPT 竞争对手! OpenAI的CEO给他泼了冷水, GPT-5可能会发生巨大变化
骁龙无处不在,是平台也是生态