地平线算法工程师胡义涵、邵文昕:基于自动驾驶场景Occupancy和Flow的运动预测 | 自动驾驶新青年讲座01
「自动驾驶新青年讲座」由智东西公开课全新企划,将邀请全球知名高校、顶尖研究机构以及优秀企业的新青年,主讲在环境感知、精准定位、决策规划、控制执行等自动驾驶关键技术上的最新研究成果和开发实践。
有兴趣分享的朋友,可以与智东西公开课教研团队进行邮件([email protected])联系。
运动预测是自动驾驶技术的关键组成部分之一,主要解决了自动驾驶车辆与周围环境中的其它运动物体(车辆、行人等)的协同交互问题。在自动驾驶系统中,运动预测模块扮演了承上启下的作用。其承接上游环境感知的结果,为下游规控提供运动推理,直接影响着自动驾驶系统的安全性和灵活性。
运动预测模块主要用于根据环境感知得到的信息,包括运动物体的位置、速度、朝向、物体分类等,以及环境信息,包括道路拓扑结构、信号灯等,预测运动物体未来一段时间内的行为意图,并将预测的结果转化为时间维度和空间维度的轨迹。
运动预测的常见方法包括基于轨迹的运动预测和基于占据栅格(Occupancy Grids)的运动预测。前者预测准确率比较低、不能充分地利用历史轨迹点数据、对车辆轨迹的波动比较敏感等缺点,后者容易丢失身份信息,并且无法从栅格中提取运动信息。而基于Occupancy和Flow的运动预测算法,可以弥补基于轨迹的运动预测和基于占据栅格的运动预测的不足,并能预测出自动驾驶场景中其他运动物体的运动和位置概率。
6月20日,CVPR 2022自动驾驶研讨会公布了Waymo开放数据集挑战赛结果。地平线算法工程师胡义涵和邵文昕等人提出的层级化时空Occupancy和Flow预测网络HOPE,得到honorable mention,并受到同行的广泛称赞。
HOPE由一个时空编码器、一个多尺度聚合器和一个分层 3D 递归解码器组成。首先,时空编码器从时空输入中生成多尺度特征,之后聚合器在编码器的不同尺度上交互和融合特征,最后通过时空解码器将压缩的特征解码为时间相干预测的路径点。同时,HOPE还重新设计了多个损失函数,并涉及了许多技巧,像Test Time Augmentation (TTA)、Stochastic Weight Average (SWA)等。基于所有这些创新内容,HOPE 在 Flow-Grounded Occupancy AUC 上实现了最高准确度0.8389。
6月29日早10点,智东西公开课邀请到HOPE的主要贡献者地平线算法工程师胡义涵和邵文昕参与「自动驾驶新青年讲座」,进行第1讲的直播讲解,主题为《基于自动驾驶场景Occupancy和Flow的运动预测》。
两位讲者首先将介绍自动驾驶运动预测的研究背景,并分析BEV视角下基于Occupancy和Flow的运动预测算法优势。之后他们会重点讲解HOPE网络,及其实验与可视化结果,并就与上下游感知和规控任务的承接和耦合进行解读。
本次讲座将以视频直播形式进行,包含40分钟主讲和20分钟问答。同时,针对本次讲座,也组建了专属交流群,届时讲者胡义涵和邵文昕将加入,欢迎大家申请。
第1讲
主题
基于自动驾驶场景Occupancy和Flow的运动预测
提纲
1、自动驾驶运动预测算法的研究背景
2、BEV视角下基于Occupancy和Flow的运动预测算法优势
3、HOPE:层级化时空Occupancy和Flow预测网络
4、实验及可视化结果
5、与上下游感知和规控任务的承接和耦合
讲者
胡义涵,地平线算法工程师,毕业于北京大学、加州大学圣地亚哥分校。
邵文昕,地平线算法工程师,毕业于南京大学、伦斯勒理工学院。
课程信息
6月29日10:00-11:00
- 国产VR第二春到了!超十款新品接连炸场,字节硬刚Meta
- 刚刚,字节跳动首款VR头显发布!
- AI数字人走上时装秀,百度加速虚拟数字人商业化
- 元宇宙最火概念股!三类玩家红透半边天
- VR界火爆的Pancake技术是个啥?搞定眩晕笨重两大痛点,苹果也会用 | 智东西内参
- 这家让大疆急得跳脚的公司1400亿卖身了!
- 刚刚,荣耀连发六款新品,全场景操作系统MagicOS 7.0将支持Matter
- 苹果和华为何时走到一起?全球智能家居标准即将落地,14个中国玩家起底
- Apple Watch Ultra体验如何?资深潜水员:我愿意托付生命!
- 消失的小米VR
- 抢先体验联想智能眼镜,能投108寸画面,核心部件全国产化
- 这次华为真的能上天!没有5G,Mate50凭什么遥遥领先友商?
- 揭秘Chiplet技术,摩尔定律拯救者,两大阵营、六个核心玩家【附下载】| 芯东西内参
- 苹果华为“捅破天”的技术,要带起6万亿市场
- 为算力基建铺路!昇腾AI锚定“3个关键”,让AI产业加速向上
- 3亿元大单背后真相:AI渗透率达98%,大华、电信、华为都赢麻了
- 芯片圈巨震发酵,英伟达发声明!确认对华AI芯片出口受限
- 2个月停电30起!台湾电力供应脆弱,对半导体厂商影响多大?
- Meta甩出10大硬核技术,揭秘扎克伯格元宇宙野心
- 全球最火两款VR一体机拆解报告!Quest 2和Neo 3谁是VR一哥?| 智东西内参