PETRV2-BEV模型训练实战：星图AI平台保姆级教程，小白也能轻松上手

阿晴招生笔记

262人浏览 · 2026-04-20 05:17:22

阿晴招生笔记 · 2026-04-20 05:17:22 发布

PETRV2-BEV模型训练实战：星图AI平台保姆级教程，小白也能轻松上手

1. 从零开始：为什么选择PETRV2-BEV模型

如果你正在寻找一个能在鸟瞰视角(BEV)下准确识别车辆、行人等目标的3D感知模型，PETRV2绝对值得尝试。作为百度Paddle3D框架下的明星模型，它通过多视角图像特征融合，实现了不依赖激光雷达的高精度3D检测。

但在实际训练中，很多开发者会遇到这些问题：

环境配置复杂，CUDA、PaddlePaddle版本兼容性问题频出
数据集准备流程繁琐，标注格式转换容易出错
训练参数设置不当导致模型不收敛
缺乏可视化工具，训练过程如同黑箱

本教程将带你使用星图AI算力平台，从数据准备到模型部署，完整走通PETRV2的训练流程。即使你是第一次接触3D检测，也能在2小时内看到自己的训练成果。

2. 环境准备：三步进入训练状态

2.1 激活预装环境

星图AI平台已经为我们准备好了所有依赖环境，只需一条命令即可激活：

conda activate paddle3d_env

验证环境是否正常：

python -c "import paddle; print(paddle.__version__)"

如果看到类似2.6.0的输出，说明PaddlePaddle已正确安装。

2.2 下载预训练权重

PETRV2模型参数较多，从零训练需要大量数据和计算资源。我们使用官方预训练权重作为起点：

wget -O /root/workspace/model.pdparams https://paddle3d.bj.bcebos.com/models/petr/petrv2_vovnet_gridmask_p4_800x320/model.pdparams

检查下载是否成功：

ls -lh /root/workspace/model.pdparams

2.3 获取训练数据

我们使用NuScenes数据集的精简版v1.0-mini进行演示：

wget -O /root/workspace/v1.0-mini.tgz https://www.nuscenes.org/data/v1.0-mini.tgz
mkdir -p /root/workspace/nuscenes
tar -xf /root/workspace/v1.0-mini.tgz -C /root/workspace/nuscenes

解压后目录结构应包含samples/, sweeps/等文件夹。

3. 数据预处理：让模型"读懂"原始数据

3.1 生成数据索引

PETRV2需要特定的数据格式，运行预处理脚本：

cd /usr/local/Paddle3D
rm /root/workspace/nuscenes/petr_nuscenes_annotation_* -f
python3 tools/create_petr_nus_infos.py --dataset_root /root/workspace/nuscenes/ --save_dir /root/workspace/nuscenes/ --mode mini_val

检查生成的索引文件：

ls /root/workspace/nuscenes/petr_nuscenes_annotation_*.pkl

3.2 验证数据可用性

在训练前，先用预训练模型跑一次评估：

python tools/evaluate.py \
    --config configs/petr/petrv2_vovnet_gridmask_p4_800x320_nuscene.yml \
    --model /root/workspace/model.pdparams \
    --dataset_root /root/workspace/nuscenes/

正常输出应包含mAP、NDS等指标，如果报错请检查数据路径。

4. 模型训练：可视化监控全过程

4.1 启动训练任务

运行训练命令：

python tools/train.py \
    --config configs/petr/petrv2_vovnet_gridmask_p4_800x320_nuscene.yml \
    --model /root/workspace/model.pdparams \
    --dataset_root /root/workspace/nuscenes/ \
    --epochs 100 \
    --batch_size 2 \
    --log_interval 10 \
    --learning_rate 1e-4 \
    --save_interval 5 \
    --do_eval

4.2 监控训练过程

启动VisualDL可视化工具：

visualdl --logdir ./output/ --host 0.0.0.0

通过SSH端口转发查看：

ssh -p 31264 -L 0.0.0.0:8888:localhost:8040 root@gpu-09rxs0pcu2.ssh.gpu.csdn.net

在浏览器访问http://localhost:8888，可以实时查看loss曲线和评估指标。

5. 模型导出与应用

5.1 导出推理模型

训练完成后，导出最佳模型：

rm -rf /root/workspace/nuscenes_release_model
mkdir -p /root/workspace/nuscenes_release_model
python tools/export.py \
    --config configs/petr/petrv2_vovnet_gridmask_p4_800x320_nuscene.yml \
    --model output/best_model/model.pdparams \
    --save_dir /root/workspace/nuscenes_release_model

5.2 运行演示

查看模型在实际数据上的表现：

python tools/demo.py /root/workspace/nuscenes/ /root/workspace/nuscenes_release_model nuscenes

结果图片保存在output/demo/目录下，包含前视图和BEV视角的检测结果。

6. 进阶训练：挑战Xtreme1数据集

6.1 数据预处理

cd /usr/local/Paddle3D
rm /root/workspace/xtreme1_nuscenes_data/petr_nuscenes_annotation_* -f
python3 tools/create_petr_nus_infos_from_xtreme1.py /root/workspace/xtreme1_nuscenes_data/

6.2 训练与评估

python tools/train.py \
    --config configs/petr/petrv2_vovnet_gridmask_p4_800x320.yml \
    --model /root/workspace/model.pdparams \
    --dataset_root /root/workspace/xtreme1_nuscenes_data/ \
    --epochs 100 \
    --batch_size 2 \
    --log_interval 10 \
    --learning_rate 1e-4 \
    --save_interval 5 \
    --do_eval