本项目针对LLM与多模态模型训练业务中的典型模型、加速算法，提供基于CANN平台的优化样例

文件	最后提交记录	最后更新时间
.gitcode	Moved files	8 个月前
agent_rl	[fix] Fix typo: data -> date Co-authored-by: qianbi1999<zhoujian157@huawei.com> # message auto-generated for no-merge-commit merge: !58 merge master into master [fix] Fix typo: data -> date Created-by: qianbi1999 Commit-by: qianbi1999 Merged-by: turing_project1 Description: ## 描述修复了agent_rl/qwen3_tool_agent/run_qwen3_4b_dapo_npu.sh中将date误写成data的bug。 ## 类型 - [x] Bug 修复 - [ ] 新功能 - [ ] 重构（即不是新增功能，也不是修改bug的代码变动） - [ ] 构建过程或辅助工具的变动 - [ ] 文档内容更新 ## 如何测试描述测试这个变更的步骤，包括哪些文件需要被修改。 ## Checklist: - [x] 我的代码遵循这个项目的代码风格 - [ ] 我已经自己测试过我的代码 - [ ] 我已经更新了相应的文档 - [x] 我已经在标题中正确使用了类型标签（例如：`feat`, `fix`, `refactor`, `docs`, `test`） ## 其他信息在这里可以添加任何与这个 Pull Request 相关的其他说明。 See merge request: cann/cann-recipes-train!58	9 个月前
ci	u	8 个月前
docs	[docs]Update Qwen3-235B 32K long_seq RL documentation Co-authored-by: xuyujun<xuyujun5@hisilicon.com> # message auto-generated for no-merge-commit merge: !54 merge master into master [docs]Update Qwen3-235B 32K long_seq RL documentation Created-by: xuyujun Commit-by: xuyujun Merged-by: turing_project1 Description: # Pull Request 模板 ---- - 新增关于Qwen3-235B 32K长序列场景RL训练的详细技术文档 - 调整目录结构，在docs下新增llm_rl目录，并将多篇文档的figures整合在一起，目录更整洁 ## 描述请提供此Pull Request的预期功能，以方便检视。 ## 类型 - [ ] Bug 修复 - [ ] 新功能 - [ ] 重构（即不是新增功能，也不是修改bug的代码变动） - [ ] 构建过程或辅助工具的变动 - [x] 文档内容更新 ## 如何测试描述测试这个变更的步骤，包括哪些文件需要被修改。 ## Checklist: - [x] 我的代码遵循这个项目的代码风格 - [x] 我已经自己测试过我的代码 - [x] 我已经更新了相应的文档 - [x] 我已经在标题中正确使用了类型标签（例如：`feat`, `fix`, `refactor`, `docs`, `test`） ## 其他信息在这里可以添加任何与这个 Pull Request 相关的其他说明。 See merge request: cann/cann-recipes-train!54	9 个月前
llm_rl	Updated readme.md for bad patch paths	8 个月前
llm_sft	[refactor] Restructure project directory structure Co-authored-by: qianbi1999<zhoujian157@huawei.com> # message auto-generated for no-merge-commit merge: !50 merge master into master [refactor] Restructure project directory structure Created-by: qianbi1999 Commit-by: qianbi1999 Merged-by: turing_project1 Description: ## 描述修改了目录结构，将`rl_train`拆分为`llm_rl`、`agent_rl`、`multimodal_rl`和`llm_sft`。 ## 类型 - [ ] Bug 修复 - [ ] 新功能 - [x] 重构（即不是新增功能，也不是修改bug的代码变动） - [ ] 构建过程或辅助工具的变动 - [ ] 文档内容更新 ## 如何测试描述测试这个变更的步骤，包括哪些文件需要被修改。 ## Checklist: - [x] 我的代码遵循这个项目的代码风格 - [ ] 我已经自己测试过我的代码 - [x] 我已经更新了相应的文档 - [x] 我已经在标题中正确使用了类型标签（例如：`feat`, `fix`, `refactor`, `docs`, `test`） ## 其他信息在这里可以添加任何与这个 Pull Request 相关的其他说明。 See merge request: cann/cann-recipes-train!50	9 个月前
multimodal_rl	[refactor] Restructure project directory structure Co-authored-by: qianbi1999<zhoujian157@huawei.com> # message auto-generated for no-merge-commit merge: !50 merge master into master [refactor] Restructure project directory structure Created-by: qianbi1999 Commit-by: qianbi1999 Merged-by: turing_project1 Description: ## 描述修改了目录结构，将`rl_train`拆分为`llm_rl`、`agent_rl`、`multimodal_rl`和`llm_sft`。 ## 类型 - [ ] Bug 修复 - [ ] 新功能 - [x] 重构（即不是新增功能，也不是修改bug的代码变动） - [ ] 构建过程或辅助工具的变动 - [ ] 文档内容更新 ## 如何测试描述测试这个变更的步骤，包括哪些文件需要被修改。 ## Checklist: - [x] 我的代码遵循这个项目的代码风格 - [ ] 我已经自己测试过我的代码 - [x] 我已经更新了相应的文档 - [x] 我已经在标题中正确使用了类型标签（例如：`feat`, `fix`, `refactor`, `docs`, `test`） ## 其他信息在这里可以添加任何与这个 Pull Request 相关的其他说明。 See merge request: cann/cann-recipes-train!50	9 个月前
workflows	Moved files	8 个月前
.pre-commit-config.yaml	modify deepseek readme	1 年前
CONTRIBUTION.md	[docs] Add contribution code directory guidelines Co-authored-by: depeng1994<zhangdepeng2@huawei.com> # message auto-generated for no-merge-commit merge: !47 merge master into master [docs] Add contribution code directory guidelines Created-by: depeng1994 Commit-by: depeng1994 Merged-by: turing_project1 Description: ## 描述增加贡献说明、代码目录结构规范 ## 类型 - [ ] Bug 修复 - [ ] 新功能 - [ ] 重构（即不是新增功能，也不是修改bug的代码变动） - [ ] 构建过程或辅助工具的变动 - [x] 文档内容更新 ## 如何测试 NA ## Checklist: - [x] 我的代码遵循这个项目的代码风格 - [x] 我已经自己测试过我的代码 - [x] 我已经更新了相应的文档 - [x] 我已经在标题中正确使用了类型标签（例如：`feat`, `fix`, `refactor`, `docs`, `test`） See merge request: cann/cann-recipes-train!47	9 个月前
DISCLAIMER.md	modify docs Co-authored-by: zangyan<zangyan@huawei.com> # message auto-generated for no-merge-commit merge: merge master into master modify docs Created-by: flyswa Commit-by: zangyan Merged-by: zhangky_gitcode Description: modify docs See merge request: cann/cann-recipes-train!15	11 个月前
LICENSE	modify license to Apache2.0 Co-authored-by: zhangkaiyu<hahazhky@163.com> # message auto-generated for no-merge-commit merge: !32 merge master into master modify license to Apache2.0 Created-by: zhangky_gitcode Commit-by: zhangkaiyu Merged-by: turing_project1 Description: # Pull Request 模板 ---- ## 描述请提供此Pull Request的预期功能，以方便检视。 ## 类型 - [ ] Bug 修复 - [ ] 新功能 - [ ] 重构（即不是新增功能，也不是修改bug的代码变动） - [ ] 构建过程或辅助工具的变动 - [x] 文档内容更新 ## 如何测试描述测试这个变更的步骤，包括哪些文件需要被修改。 ## Checklist: - [ ] 我的代码遵循这个项目的代码风格 - [ ] 我已经自己测试过我的代码 - [x] 我已经更新了相应的文档 - [ ] 我已经在标题中正确使用了类型标签（例如：`feat`, `fix`, `refactor`, `docs`, `test`） ## 其他信息在这里可以添加任何与这个 Pull Request 相关的其他说明。 See merge request: cann/cann-recipes-train!32	10 个月前
README.md	Nothing	8 个月前
Third_Party_Open_Source_Software_Notice	[license] fix license in Third_Party_Open_Source_Software_Notice Co-authored-by: ZhangHZ<zhanghaozhuo1@hisilicon.com> # message auto-generated for no-merge-commit merge: !55 merge master into master [license] fix license in Third_Party_Open_Source_Software_Notice Created-by: zhanghz1 Commit-by: ZhangHZ Merged-by: turing_project1 Description: # Pull Request 模板 ---- ## 描述请提供此Pull Request的预期功能，以方便检视。 ## 类型 - [x] Bug 修复 - [ ] 新功能 - [ ] 重构（即不是新增功能，也不是修改bug的代码变动） - [ ] 构建过程或辅助工具的变动 - [ ] 文档内容更新 ## 如何测试描述测试这个变更的步骤，包括哪些文件需要被修改。 ## Checklist: - [x] 我的代码遵循这个项目的代码风格 - [x] 我已经自己测试过我的代码 - [x] 我已经更新了相应的文档 - [x] 我已经在标题中正确使用了类型标签（例如：`feat`, `fix`, `refactor`, `docs`, `test`） ## 其他信息在这里可以添加任何与这个 Pull Request 相关的其他说明。 See merge request: cann/cann-recipes-train!55	9 个月前
validate_all_projects.sh	z	8 个月前

cann-recipes-train

🚀Latest News

[2025/11] Qwen3模型长序列RL样例首次上线。
[2025/10] DeepSeek-R1、Qwen2.5模型样例首次上线。

🎉概述

cann-recipes-train仓库旨在针对LLM与多模态模型训练业务中的典型模型、算法，提供基于CANN平台的优化样例，方便开发者简单、快速、高效地使用CANN平台进行模型训练。j

✨实践列表

实践	简介
DeepSeek-R1 RL训练优化样例	基于开源veRL框架，搭配MindSpeed+vLLM-Ascend框架，在Atlas A3集群实现GRPO算法的高吞吐RL训练，并达到120TPS/卡的系统吞吐量。
基于verl框架的Qwen2.5强化学习（入门样例）	基于Qwen2.5-1.5B-Instruct模型，采用verl强化学习框架，在MATH-lighteval数学推理数据集上进行了训练。本样例只需要单卡Atlas A2环境，帮助大家快速上手，使用昇腾NPU完成RL训练任务。
Qwen3 RL训练优化样例	基于开源veRL框架，搭配MindSpeed+vLLM-Ascend框架，在Atlas A3集群实现GRPO/DAPO算法的长序列 2k+32k训练，GRPO达到120TPS/卡的系统吞吐量。
Qwen3 tool agent RL训练样例	基于verl/recipe中的retool项目，调用Sandbox工具，使能`asyncLLM`和`agent_loop`特性，在昇腾NPU上完成端到端agent RL训练任务。

📖目录结构说明

├── docs                         # 优化技术介绍文档
├── llm_rl                       # llm强化学习训练相关代码
│  ├── deepseek                  # deepseek强化学习训练相关代码
│  ├── qwen2_5                   # Qwen2.5强化学习训练相关代码
│  ├── qwen3                     # Qwen3强化学习训练相关代码
│  └── ...
├── agent_rl                     # agent强化学习训练相关代码
│  ├── qwen3_tool_agent
│  └── ...
├── multimodal_rl                # 多模态强化学习训练相关代码
├── llm_sft                      # llm有监督微调训练相关代码
├── CONTRIBUTION.md
├── README.md
└── ...

📝相关信息

贡献指南
许可证

cann-recipes-train仓涉及的模型，如模型目录下存在License的，以该License为准。如模型目录下不存在License的，遵循Apache 2.0许可证，对应许可证文本可查阅LICENSE
免责声明

项目介绍

本项目针对LLM与多模态模型训练业务中的典型模型、加速算法，提供基于CANN平台的优化样例

Apache-2.0 Python 82提交数

定制我的领域

README

规则集

cann-recipes-train:基于CANN平台的LLM与多模态模型训练优化样例项目

cann-recipes-train

🚀Latest News

🎉概述

✨实践列表

📖目录结构说明

📝相关信息

项目介绍