XPU Autonomous Vehicle Open Model Tutorials

介绍

基于 XAV (XPU Autonomous Vehicle) 产品加速的自动驾驶模型教程与文档仓库

LLM Wiki 入口

本仓库保留现有 tutorials/ 教程目录，并新增面向 LLM/Agent 的轻量 wiki 层：

• llms.txt：LLM/Agent 的最短入口与回答规则
• wiki/index.md：按模型、任务和教程来源组织的派生索引
• wiki/log.md：wiki 维护日志、已修复问题和待确认事项
• CLAUDE.md：新增/更新教程时的 Agent 维护规则

更新日志 🚀

• [26/05/25] 我们支持了 GR00T-Dreams 模型的训练和推理.
• [26/05/22] 我们支持了 Isaac-GR00T_N1.7 模型的训练和推理.
• [26/04/16] 我们支持了 Qwen3-Omni-30B-A3B 模型的推理.
• [26/03/09] 我们支持了 Qwen3-30B-A3B 模型的预训练.
• [26/02/04] 我们支持了 Qwen3-4B、Qwen3-30B-A3B 模型的训练.
• [26/02/04] 我们支持了 Qwen3-235B-A22B-Thinking-2507 模型的推理.
• [26/02/04] 我们支持了 xav_vLLM QWen、QWen-VL系列的推理.
• [26/02/02] 我们支持了 PaddleOCR_v5 模型的训练和推理.
• [26/02/02] 我们支持了 Yolo11 模型的pytorch推理.
• [26/01/07] 我们支持了 cosmos-transfer2.5 模型的训练和推理.
• [26/01/07] 我们支持了 cosmos-predict2.5 模型的训练和推理.
• [25/12/30] 我们支持了 PETR、FastBEV、MaskRCNN 模型的训练.
• [25/12/09] 我们支持了 pi0 模型的训练.
• [25/11/27] 我们增加了 DriveDreamer、Qwen3-8B 的训练支持
• [25/08/20] 我们支持了 LLaVA、OpenVLA 模型的训练

展开日志

• [25/07/04] 我们支持了 BEVFusion 模型的训练

• [25/05/27] 我们支持了 StreamPETR 模型的训练

• [25/05/12] 我们支持了 VIT、RegNet 模型的训练

• [25/04/30] 我们支持了 Qwen2.5-VL 模型的推理

• [25/04/11] 我们支持了 SparseDrive、Sparse4D 模型的训练

模型库

Model Type	Model	任务	精度格式	GPUs	框架
Basic Models	VisionTransformer	Pretrain	FP32	1 x 8	-
	RegNet	Pretrain	FP32	1 x 8	-
	PaddleOCR_v5	Pretrain	FP32	1 x 8	PaddlePaddle
	Yolo11	Inference	FP32	1 x 8	-
E2E AD Models	BEVDet	Pretrain	FP32	1 x 8	MMCV
	BEVFormer	Pretrain	FP32	1 x 8	MMCV
	PointPillar	Pretrain	FP32	1 x 8	MMCV
	PETR	Pretrain	FP32	1 x 8	MMCV
	FastBEV	Pretrain	FP32	1 x 8	MMCV
	MaskRCNN	Pretrain	FP32	1 x 8	Detectron2
	LaneSegNet	Pretrain	FP32	1 x 8	MMCV
	Maptrv2	Pretrain	FP32/FP16	1 x 8	MMCV
	Sparse4D	Pretrain	FP32	1 x 8	MMCV
	StreamPETR	Pretrain	FP32	1 x 8	MMCV
	BEVFusion	Pretrain	FP32/FP16	1 x 8	MMCV
	Far3D	Pretrain	FP16/FP32	1 x 8	MMCV
	GameFormer-Planner	Pretrain	FP32	1 x 8	-
	QCNet	Pretrain	FP32	1 x 8	-
	UniAD	Pretrain	FP32	1 x 8	MMCV
	VAD	Pretrain	FP32/FP16	1 x 8	MMCV
	SparseDrive	Pretrain	FP32/FP16	1 x 8	MMCV
	DiffusionDrive	Pretrain	FP32	1 x 8	Navsim
VLM/VLA	Qwen2.5-VL	SFT/LoRA	FP16/BF16	1 x 8	LLamaFactory
	LLaVA	Pretrain/SFT	FP16/BF16	1 x 8	-
	Pi0	Pretrain/SFT	FP16/BF16	1 x 8	Lerobot
	Isaac-GR00T-N1.7	SFT	FP16/BF16	1 x 8	Lerobot
	GR00T-Dreams	SFT	FP16/BF16	1 x 8	Lerobot
Omni	Qwen3-Omni-30B-A3B	Inference	FP16	1 x 8	vLLM-Omni
World Model	DriveDreamer	Pretrain/SFT	FP16/BF16	1 x 8	-
	cosmos-predict2.5	SFT	BF16	1 x 8	-
	cosmos-transfer2.5	SFT	BF16	1 x 8	-
LLM	Qwen2.5-7B	SFT/LoRA	FP16/BF16	1 x 8	LLamaFactory
	Qwen3-8B	Pretrain	BF16	1 x 8	Megatron
	Qwen3-4B	SFT/LoRA	FP16/BF16	1 x 8	LLamaFactory
	Qwen3-30B-A3B	Pretrain/SFT/LoRA	FP16/BF16	1 x 8	Megatron/LLamaFactory
	Qwen3-235B-A22B-Thinking-2507	Inference	FP16	1 x 8	xSGL

许可证

XAV Open Model Tutorials 使用 Apache-2.0 license 许可证。 XAV 基于《昆仑芯AI产品协议》获得许可。若获取并使用XAV相关Docker容器，你将接受本许可协议中的条款与条件。