绑定手机号
获取验证码
确认绑定
提问
0/255
提问
订阅开课提醒需关注服务号
回答成功
知道了
扫码关注智猩猩服务号登录
请使用微信扫描二维码
扫描二维码分享给微信好友
您已订阅成功,有新课程,我们将第一时间提醒您。
知道了
发送提问成功
回答可在
“我的——我的提问”中查看
知道了
失败
欢迎来智东西
关注我们
智东西
车东西
芯东西
智猩猩
基于征程5芯片的BEV感知方案与部署实践
2023/08/24 19:00:00
课程讲师
朱红梅 地平线 感知算法工程师

博士毕业于北京航空航天大学,研究方向为双目立体视觉。2019年加入地平线,先后主导扫地机场景、车载多视角深度估计算法研发、面向征程5芯片的BEV感知算法研发。目前负责推进基于征程5的BEV感知方案量产落地。

朱红梅
地平线 感知算法工程师

博士毕业于北京航空航天大学,研究方向为双目立体视觉。2019年加入地平线,先后主导扫地机场景、车载多视角深度估计算法研发、面向征程5芯片的BEV感知算法研发。目前负责推进基于征程5的BEV感知方案量产落地。

课程提纲
  • BEV感知框架总体介绍
  • 时空融合模块与芯片部署
  • 静态与Occupancy感知要素解析
  • 动态感知预测端到端与芯片部署
  • 5. 实车部署与闭环验证
课程简介

BEV感知已成为引领高阶自动驾驶量产的新范式。但是要实现BEV感知在车端的规模化部署和落地,并非易事。

首先,BEV感知大模型的训练需要超大规模的算力和海量的高质量标注数据支持,成本高且耗时长。其次,由于车端资源和能耗的限制,训练好的BEV感知大模型并不能直接部署到车端,需要通过量化、压缩等方式对模型进行优化,这就要求开发人员具备极强的专业能力和丰富的开发经验。由此可见,BEV感知在车端规模化部署是一项极其复杂的系统性工程。

为了帮助开发者高效实现BEV感知在车端的部署与落地,地平线早在2021年发布新一代征程5车载智能芯片之时,就推出了基于征程5的纯视觉BEV感知原型方案。

征程5基于贝叶斯深度学习加速引擎打造,原生支持BEV感知所大量使用的Transformer模型。同时,征程5配备了双ISP、CV引擎、双视觉DSP等丰富的异构计算资源,能够对车端多路摄像头数据进行畸变校正、拼接、3D场景重构等视觉预处理工作,打破了BEV感知各个环节的计算瓶颈。此外,地平线还提供芯片开发套件、域控参考设计、芯片工具链及软件开发平台等,以帮助开发者充分利用征程5的计算资源,加速BEV感知算法在车端的部署。

经过两年的打磨,地平线基于征程5芯片的BEV感知方案有哪些最新进展?又将给业界带来哪些惊喜呢?

8月24日19点,地平线联合智东西公开课策划推出的新一期地平线「你好,开发者」自动驾驶技术专场将开讲,主题为《基于征程5芯片的BEV感知方案与部署实践》,由地平线感知算法工程师朱红梅主讲。

朱红梅博士首先会对BEV感知框架进行全面介绍,之后将讲解时空融合模块与芯片部署。接下来,她将分别对静态与Occupancy感知要素、动态感知预测端到端与芯片部署进行深入解析。最后,朱红梅博士还会对BEV感知方案的实车部署与闭环验证进行解读。

精彩问答
提问
提问
目前还没有问题,可以点击右侧的“提问按钮”提问
更多问题...