首页 > 科技未来 > 内容

一篇文章看懂地平线如何再现“摩尔定律” -大牛讲堂

发布于:2024-06-17 编辑:匿名 来源:网络

3月25日,负责人与Horizo??n BPU算法的罗恒发起了一场名为“《地平线如何追求极致效能?》”的独特在线分享。

作为“地平线核心技术公开课系列”的“创始课程”,罗恒从当前AI芯片的最大挑战,到MLperf的理想与局限性,再到地平线BPU(大脑处理单元,地平线自主研发的人工智能)智能专用处理单元)。

机器架构的演变)得到了雄辩的讨论。

结合人工智能发展趋势,深入解析地平线通过软硬件结合挑战极限性能、再现“摩尔定律”的技术历程。

以下为编译分享——AI芯片的最大挑战。

2010年以来,AI芯片逐渐成为人们关注的趋势。

行业参与者都希望做出极具竞争力的芯片。

在种种挑战中,最大的挑战是算法快速发展与芯片缓慢迭代之间的矛盾。

以 DeepMind 在 2016 年提出的人工神经网络 WaveNet 为例。

它可以模仿难以辨别真假的人声。

然而,它的计算量太大,甚至无法在当时最强大的GPU上进行实时处理。

近一分钟的延迟让人真假难辨。

这一革命性突破从未真正得到应用。

2016年,经过算法优化的Paralle WaveNet将计算效率提高了三倍,谷歌成功将其应用到Google Assistant中。

如果一家公司准备在这个时候(年)推出一款用于嵌入式系统的芯片,那么让这项AI成果应用在手机等移动场景中,将是一个非常合理的选择。

但在2018年,算法再次优化,核心计算方式通过RNN和DalitedCNN升级为Spares RNN,可以让手机CPU运行。

2008年开发的芯片要到2018年才能上市,这是一个悲伤的故事,体现了算法快速发展与芯片缓慢迭代之间的矛盾。

AI算法快速演进的趋势回归到地平线主通道的视觉感知。

2016年AlexNet在ImageNet中的突破拉开了这波AI浪潮的序幕。

从2000年到2015年,出现了各种网络。

最初,他们致力于改进 ImageNet。

VGG模型的扩展太快并且受到GPU的限制。

以下模型开始适度考虑精度和计算能力之间的权衡,ResNet开始提供解决方案来扩展网络计算能力以获得不同的精度。

多年后,ImageNet的精度逐渐饱和,计算效率的优化受到关注。

算法实现开始追求更高的精度和更少的计算量。

SpueezeNet、MobileNet、ShuffleNet 是这一时期“新”卷积神经网络的代表。

与此同时,机器学习方法也开始用于自动搜索网络,以NASNet为代表,但主要是搜索网络子结构。

到了这一年,卷积神经网络架构的演化逐渐收敛,子结构收敛到MobileNet v2的子结构,模型扩展方法来自EfficientNet的Compoundscaling方法。

上述AI算法的演进趋势对AI芯片厂商之间的竞争产生了极其重要的影响:虽然芯片架构设计能力和芯片SOC能力非常重要,但由于算法在不断变化,设计出来的芯片如何能够应用在AI芯片中?当它问世时,它也可以符合算法的最新进展。

这将是现在乃至可预见的未来AI芯片竞争的关键点。

什么是更好的AI芯片?算法演进和芯片迭代之间的脱节是我们面临的挑战。

那么,AI芯片赛道上的玩家如何设定明确的目标呢?如何连接研究与市场、连接工程与开发,通过实际场景中最优代表性任务的测试来反映机器学习算法的演进?目前常见的基准测试是 MLPerf。

但实际上,MLPerf Inference V0.5使用的分类模型仍然是ResNet50和MobileNet V1,检测模型是MobileNet V1和RerNet34。

从这个角度来看,MLPerf Inference虽然是新的,但由于模型相对陈旧,已经落后了算法进展两年。

另外,由于定量模型的流行,MLPerf希望设计一个统一的标准,但最终因精度问题而选择降低标准(MobileNet)。

提交者和标准设计者之间的博弈使得模型无法按预期更新。

但地平线始终认为,评估AI芯片的真实性能需要与时俱进的标准。

因此,为了更严格地测试真实性能,选择了前文提到的目前视觉领域效率最高的MobileNet V2结构(EfficientNet不改变计算方式,SE结构也经过了验证) EfficientNetTPU 不是关键因素)。

实测显示,这两款技术领先两代的竞品,在MobileNet V2帧率方面明显落后于地平线征程二代芯片。

除了Horizo??n和Journey II以及两款基于当前视觉领域最高效的MobileNet V2结构的竞品的测试结果外,还需要考虑其他因素才能达到最终的能效。

对于芯片来说,最大的功耗不在于计算,而在于数据处理。

如何降低DDR(Double Data Rate SDRAM,双倍速率同步动态随机存储器)的吞吐量实际上是降低功耗的关键。

那个地方。

一篇文章看懂地平线如何再现“摩尔定律” -大牛讲堂

Horizo??n在这方面也做了针对性的优化。

虽然帧速率超过竞品芯片,但仅为竞品芯片 DDR 吞吐量的 1/4。

因此,一方面用户可以使用成本更低的DDR,另一方面我们也不能假设用户在加速模型时就独占DDR。

他们必须将带宽与 ISP、编解码器和各种应用程序一起使用。

正城二号DDR吞吐成本低廉,让用户可以充分利用算力,而不受DDR带宽的限制。

BPU 结合硬件和软件来创造终极性能。

早在2008年,当我们设计第二代BPU时,我们就观察到来自学术界的两个信号。

2016年,我们在Horizo????n关心的视觉任务和免费数据上快速验证了学术界的特殊信号Depthwise Convolution。

证明了Depthwise Convolution带来的效率提升。

然后我们做了初步优化,8bit量化了Depthwise Convolution模型,量化后的模型精度>浮点模型精度*0.99(半年后谷歌量化论文发表,但精度并不理想);我们尝试使用1x1来扩大Depthwise Convolution核的数量,同时减少1x1卷积引入的计算量(类似于一年后发布的MobileNet v2);尝试了不同的内核大小,发现将内核大小扩大到7可以仅以很小的计算成本提高精度(与两年后发布的相比)。

Mixconv论文一致)。

完成初步验证和优化后,我们制作了FPGA版本的BPU,后来演变为Matrix(获得2016年CES创新奖,是车辆智能和自动驾驶技术类别中唯一获得该奖项的中国产品) )。

这辆车测试了我们所有的选择。

软件和硬件的结合,挑战极限性能及以上实际应用场景的验证、优化和打磨,为我们的架构设计提供了参考,让我们从一开始就针对未来算法趋势进行优化,这一点今天已经得到证明。

Horizo??n BPU研发路线图 可以说,Horizo??n最大的特点就是预测关键算法的发展趋势,在最重要的场景进行垂直渗透,并主动将其计算特性融入到架构设计中,使得AI处理经过两年的发展研发方面,该处理器在推出时仍然能够很好地适应最新的主流算法,同时确保满足最关键应用的需求。

因此,与其他典型的AI处理器相比,地平线的AI处理器能够随着算法的演进始终保持非常高的有效利用率,从而真正受益于算法创新带来的优势。

技术的先发优势推动商业化进程,引领商业落地探索又反哺技术进步。

在AI芯片的硬技术创新之路上,地平线将继续坚持深耕“算法+芯片+工具链”的基础技术平台。

预计地平线将在年内推出新一代车规级AI芯片,以人工智能赋能一切,让每个人的生活更安全、更美好!关于地平线“大牛讲堂”“大牛讲堂”秉承“为技术资讯而生”的理念,旨在通过分享人工智能领域的前沿观点、技术资讯、开发者经验,打造开放的科技。

人工智能芯片。

社区。

正如地平线怀抱开放心态,坚持芯片赋能一样,“大牛讲堂”也希望以同样开放的心态分享知识,与同行在AI道路上共同进步。

近期,我们推出了“地平线核心技术系列公开课程”,希望通过在线分享的方式让更多人了解AI芯片的前沿知识,传播科技的力量!雷锋网 雷锋网 雷锋网版权所有文章,未经授权禁止转载。

详情请参阅转载说明。

一篇文章看懂地平线如何再现“摩尔定律” -大牛讲堂

站长声明

版权声明:本文内容由互联网用户自发贡献,本站不拥有所有权,不承担相关法律责任。如果发现本站有涉嫌抄袭的内容,欢迎发送邮件 举报,并提供相关证据,一经查实,本站将立刻删除涉嫌侵权内容。

标签:

相关文章

  • 搜房网今晚在纽交所IPO融资1.2亿美元

    搜房网今晚在纽交所IPO融资1.2亿美元

    北京时间9月16日消息。 据外媒报道,中国搜房网将于美国东部时间(北京时间)9月16日启动IPO。 9月16日晚)在纽约证券交易所挂牌上市,交易代码为SFUN。   搜房网计划发行30,000股美国存托股票(ADS),发行价格在40.50美元至42.50美元之间。 每股ADS股份相当于4股搜房网普

    06-18

  • 增长黑客教父的产品经理讲述:我的硅谷“增长黑客”之旅

    增长黑客教父的产品经理讲述:我的硅谷“增长黑客”之旅

    雷锋网出版社:作者曲辉曾被增长黑客教父Sean Ellis招募,曾从事著名的增长黑客网络(Growthhakers.com)担任增长产品经理;目前担任美国领先的个人理财应用程序 Acorns 的营销总监。 本文发布在 GrowingIO 博客和公众号上,并已获得许可发布。 有一群人,用数据驱动营销,用

    06-18

  • Kura AR获数百万美元Pre-A轮融资

    Kura AR获数百万美元Pre-A轮融资

    3月23日消息,据36氪报道,Kura AR近期完成新一轮融资,融资金额达数百万美元。 本轮投资者包括行业内部个人投资者、企业合作伙伴等,本轮融资主要用于产品量产和业务拓展。 Kura AR成立于2008年,公司专注于轻量AR眼镜的研发。 通过自主研发光学显示芯片、光机结构和光学仿真

    06-17

  • 南非:计划推出2.6GW风电、光伏招标项目

    南非:计划推出2.6GW风电、光伏招标项目

    据南非独立媒体网站11月1日报道,南非矿产资源和能源部长曼塔谢表示,该部门计划推出独立发电项目到今年一月,可再生能源发电。 商业采购计划(REIPPPP)的第六个招标窗口包括兆瓦级陆上风电和兆瓦级太阳能光伏。 Mantashe上周宣布了25个优先招标项目,风能和太阳能发电总量

    06-08

  • “中国企业500强”之一的威高集团选择兰陵知识管理

    “中国企业500强”之一的威高集团选择兰陵知识管理

    “我们身处技术密集、创新密集的医疗器械和制药领域,知识的有效管理和利用尤为重要兰陵已服务了众多医疗医药标杆企业,有大量成功的知识管理项目实践,我们希望与兰陵共同推动知识管理建设,提高知识管理水平,推动业务高质量发展。 ” Ming,与威高集团数字化转型办公室有关

    06-18

  • 飞行时间质谱公司“普源生物”获赤子基金

    飞行时间质谱公司“普源生物”获赤子基金

    投资界(ID:pedaily)数千万融资 7月22日消息,近日,全球领先的MALDI-TOF MS全自动仪器、耗材上市解决方案提供商湖州普源生物科技有限公司获得赤子基金数千万融资。 本轮融资由赤子基金独家投资。 本轮融资将主要用于建设新的研发基地和拓展销售渠道。 质谱法是一种分离和检

    06-17

  • 中国版Alphago只是另一个“民科”的故事吗?

    中国版Alphago只是另一个“民科”的故事吗?

    《神雕侠侣》结尾,我们看到一群武功差但自尊心很高的人跑到华山“论剑”,但原型出现在杨过这样一个真正的高手面前。 这其实并不奇怪。 想要成名,挑战天下第一武功,是最容易的事情。 人总得有一些梦想,万一梦想成真。 近期,人工智能领域也发生了类似的事情。 不不不,我

    06-18

  • 自动驾驶公司“Plus科技”宣布计划在纽交所上市,市值约33亿美元

    自动驾驶公司“Plus科技”宣布计划在纽交所上市,市值约33亿美元

    自动驾驶公司“Plus科技”(Plus)宣布已签署合并协议与特殊目的收购公司(SPAC)轩尼诗资本投资公司V根据协议,合并完成后,智嘉科技将于今年第三季度在纽约证券交易所挂牌上市,股票代码为“PLAV” ”。 根据交易条款,合并后,智嘉科技市值约33亿美元,并将获得约5亿美元

    06-18

  • 168万,比亚迪发布电动“保时捷911”

    168万,比亚迪发布电动“保时捷911”

    说到跑车,大多数人的脑海里都会浮现保时捷、法拉利、兰博基尼等世界知名品牌。 这些超级跑车承载着“速度”、“声音”、“激情”等标签,成为了很多男生的梦想。 随着电动化的兴起,超跑领域不再是传统巨头的专属舞台。 中国汽车品牌也推出了Polestar 6、耀明SSR、红旗S9等产

    06-18

  • 浦东科技创新基金设立,初始规模55亿元,重点支持六大核心产业,

    浦东科技创新基金设立,初始规模55亿元,重点支持六大核心产业,

    据投资界10月10日消息,今日,浦东科技创新母基金正式成立并投入运营,初始规模55亿元,聚焦中国等六大核心产业芯片、创新药、蓝天梦、未来汽车、智能制造、数据端口。 同时,设立一批特色鲜明的行业子基金,吸引各类社会资本,扩大基金规模,创新“产业+基地+基金”联动发展

    06-18

  • 马可- 「深度智控」完成数千万战略轮融资,源码领投Pre A+轮

    马可- 「深度智控」完成数千万战略轮融资,源码领投Pre A+轮

    近日,行业领先的深度节能与数智创新服务商深度智控宣布获得汇川产投数据千万级战略轮融资。 本轮融资是深度智控继获得腾讯、红杉、源码资本投资后今年的第三轮融资。 相关资金将用于加强深度智控的研发部署和市场推广。 其中,Source Code是该公司Pre A+轮的领投方。 汇川技

    06-17

  • 梨视频获6.17亿元A轮融资,腾讯领投、百度跟投

    梨视频获6.17亿元A轮融资,腾讯领投、百度跟投

    据投资界4月16日消息,新榜显示,梨视频近日宣布完成6.17亿元A轮融资A轮融资,由腾讯领投。 、百度等也纷纷效仿。 去年11月,梨视频获得中国文化、人民网联合投资的1.67亿元Pre-A轮融资。   据李视频透露,A轮融资完成后,将继续打造全球最先进、高效、严谨的信息内容生产网

    06-17