BEV视角感知模型搭建与训练实战 · 课程目录

🧩 LSS · BEVFormer · Occupancy ⚡ 30个实战章节 🎯 友好色系

01

BEV感知概述

从2D视觉到BEV视角的演进 · 自动驾驶核心价值 · LSS / Transformer-based 方案简介

02

坐标系与空间变换

车辆/相机/图像/世界坐标系 · 外参内参标定基础

03

BEV网格定义与离散化

分辨率·范围·高度 · 网格特征表示方法

04

图像特征提取基础

ResNet/ResNeXt Backbone · 多尺度特征 · FPN结构详解

05

视角变换核心：LSS

Lift-Splat-Shoot 详解 · 深度分布预测与特征投影

06

LSS深度估计网络

深度分布预测 · 分类/回归深度 · 不确定性建模

07

Splat操作详解

图像特征投影到BEV · 累积与池化 · 效率优化技巧

08

Shoot与下游任务

BEV特征用于目标检测 · 语义分割 · 轨迹预测

09

Transformer-based BEV

BEVFormer架构 · 可变形注意力 · 时序融合

10

BEVFormer Query设计

位置Query · 内容Query · 层级Query设计思路

11

时序融合机制

历史帧信息利用 · 时序对齐 · 特征缓存与更新

12

多模态融合

相机+激光雷达 · Radar+Camera · 特征/决策级融合

13

BEV数据标注

3D框标注 · 语义分割 · 时序标注 · 自动/半自动标注

14

常用数据集详解

nuScenes · Waymo · Argoverse2 · KITTI BEV格式

15

数据增强策略

BEV空间翻转/旋转/缩放/CutMix · 多模态联合增强

16

模型训练基础

损失函数(分类/回归/辅助) · 优化器 · 学习率调度

17

BEV目标检测训练

CenterPoint · TransFusion 训练流程与技巧

18

BEV语义分割训练

BEVSegFormer · LSS分割模型训练要点

19

模型评估指标

mAP · NDS · IoU · ATE · ASE 计算与解读

20

模型部署与优化

ONNX导出 · TensorRT加速 · 量化 · 剪枝 · 知识蒸馏

21

工程化实践

数据流水线 · 分布式训练 · 混合精度 · 日志可视化

22

小目标 · 远距离感知 · 遮挡处理 · 极端天气

23

在线与离线BEV感知

实时轻量化模型 · 离线高精度设计

24

BEV与规划控制

端到端自动驾驶 · BEV特征到轨迹映射

25

前沿研究热点

Occupancy Network · OccFormer · UniAD · VAD

26

不确定性估计

贝叶斯深度学习 · MC Dropout · 集成方法

27

跨域迁移与泛化

Sim2Real · 域适应 · 域泛化在BEV中的应用

28

BEV系统集成

传感器到决策完整Pipeline · ROS/ROS2集成

29

项目实战：nuScenes

数据准备 · 模型搭建 · 训练 · 评估 (BEV目标检测)

30

课程总结与展望

BEV技术趋势 · 挑战与机遇 · 学习路径建议