MindSpeed Ascend HDK 路径批量替换指南
背景
MindSpeed 仓库中的 Docker 挂载配置、运行脚本等存在硬编码的 /usr/local/Ascend/driver/ 路径引用。
部分版本机器上的实际 HDK 安装路径为 /usr/local/npu/driver/,需在使用前完成批量替换,确保 HDK 相关挂载与库加载可以正常工作。
说明:本次替换仅针对 HDK 路径(
/usr/local/Ascend/driver/),CANN、ascend-toolkit、nnal/atb 等其他子路径保持不变。
本指南提供使用 replace_ascend_path.py 脚本进行批量路径替换的完整步骤,并说明部分版本对 dcmi_get_device_chip_info 接口返回值的适配要求。
前置条件
- Python 3.10+
- 拥有仓库目录的读写权限
- 建议在执行替换前,先通过 git 将当前状态提交或备份
受影响的文件范围
| 文件类型 | 说明 | 典型路径示例 |
|---|---|---|
Shell 脚本(.sh) |
各类运行脚本,包括但不限于:数据预处理、权重转换、预训练、微调、评估、推理、测试等流程 | examples/*/*.sh、tests/*/*.sh |
Markdown 文档(.md) |
全量说明文档,包括但不限于:安装指南、快速上手、各任务指南、特性说明等 | docs/zh/user-guide/install_guide.md、docker/OVERVIEW.md |
RST 文档(.rst) |
reStructuredText 风格说明文档 | docs/*/*.rst |
TXT 文档(.txt) |
普通文本说明文件或配置说明 | requirements.txt |
Python 文件(.py) |
源码(如有路径引用) | 各模块源文件 |
| Dockerfile | Docker 镜像构建脚本 | docker/Dockerfile |
路径变体说明:本次仅替换 driver 相关路径引用,例如:
/usr/local/Ascend/driver/lib64/(Docker 挂载路径,最常见)/usr/local/Ascend/driver/(HDK 安装根路径)以下路径不在替换范围内,保持原样:
/usr/local/Ascend/cann/set_env.sh(环境变量初始化)/usr/local/Ascend/ascend-toolkit/set_env.sh(Ascend Toolkit 初始化)/usr/local/Ascend/nnal/atb/set_env.sh(ATB 库初始化)
使用步骤
-
进入仓库根目录
cd /path/to/MindSpeed -
预览将要修改的内容(推荐)
在实际修改前,先以
--dry-run模式确认变更范围:python3 tools/replace_ascend_path.py --dry-run输出示例:
[DRY RUN] Path replacement: /usr/local/Ascend/driver -> /usr/local/npu/driver Scan directory : /path/to/MindSpeed File types : .md, .py, .rst, .sh, .txt + Dockerfile ------------------------------------------------------------ Found XXX candidate file(s), processing... [would replace 1] docker/Dockerfile [would replace 2] docker/OVERVIEW.md [would replace 2] docker/OVERVIEW.zh.md ... ============================================================ [DRY RUN] XXX file(s) would be modified, XXX replacement(s) total. Remove --dry-run to apply changes. -
执行批量替换
确认预览无误后,执行实际替换:
# 默认:将 /usr/local/Ascend/driver 替换为 /usr/local/npu/driver python3 tools/replace_ascend_path.py执行完毕后,脚本会输出修改的文件数和替换总次数。
-
验证替换结果
# 检查是否还有未替换的 driver 路径(结果应为 0) grep -r "/usr/local/Ascend/driver" . \ --include='*.sh' \ --include='*.md' \ --include='*.rst' \ --include='*.py' \ --include='*.txt' \ --include='Dockerfile' \ --exclude='replace_ascend_path.py' \ --exclude='replace_ascend_path_guide.md' \ --exclude-dir='.git' \ | wc -l
执行后验证
-
Driver 路径加载验证
# 验证新路径下的 driver 目录存在 ls /usr/local/npu/driver/lib64/ # 加载环境变量(ascend-toolkit 路径未变更,仍使用原路径) source /usr/local/Ascend/ascend-toolkit/set_env.sh # 验证环境变量生效 echo $ASCEND_HOME_PATH -
组件安装验证
# 验证MindSpeed 安装成功 python3 -c "import mindspeed; print('MindSpeed installed successfully')" # 验证 NPU 可用 python3 -c "import torch_npu; print('NPU available:', torch_npu.npu.is_available())" -
芯片信息接口验证(dcmi_get_device_chip_info)
部分版本要求
dcmi_get_device_chip_info接口返回的芯片型号标识为A2G3或A2G4。说明:MindSpeed 当前代码未直接调用该接口,此处仅作适配说明。若上层业务或运维脚本依赖该接口返回值进行芯片型号判断,需确保返回值为
A2G3或A2G4,否则可能影响型号相关的逻辑分支。验证方式请参考: dcmi_get_device_chip_info接口原型
-
核心功能冒烟验证
参考对应模型的readme进行配置,验证训练流程可正常启动
source /usr/local/Ascend/ascend-toolkit/set_env.sh # 运行示例脚本(以具体模型为准) bash ./train_distributed.sh
完整脚本参数说明
usage: replace_ascend_path.py [-h] [--source SOURCE] [--target TARGET]
[--dir DIR] [--extensions EXT [EXT ...]]
[--dry-run]
选项:
-h, --help 显示帮助信息
--source SOURCE 源路径(默认:/usr/local/Ascend/driver)
--target TARGET 目标路径(默认:/usr/local/npu/driver)
--dir DIR 扫描目录(默认:当前目录 .)
--extensions EXT... 文件扩展名白名单(默认:.sh .md .rst .py .txt)
--dry-run 仅预览变更,不修改文件