Merged
ci(workflows): 新增 A5 前冒烟看护 job #7249
zhugexun_sjtuAdd on 17 days ago
ci(workflows): 新增 A5 前冒烟看护 job #7249
Merged
zhugexun_sjtuAdd on 17 days ago
zhugexun_sjtu
zhugexun_sjtuCollaborators
17 days ago

背景

PreSmoke 阶段此前只有 A2_smoke(npu=8、smoke=204),950/A5 的改动没有任何前冒烟
门禁看护。本 PR 补一个 A5_smoke,只增不改、不触碰 A2,+56 行、单文件。

原先这个 PR 还带着 pre_smoke.sh、requirements.txt 和一摊 presmoke 脚本改动。
前两者已被 !7332 吸收(上游版本更完整),脚本那摊拆成了 !7354(A5 四卡分片清单)和
!7356(生成器 / 调度器改动)。本 PR 现在只剩 CI 配置这一件事。

改动

A5 专有的三处:

项 A2_smoke A5_smoke
runs-on npu=8、smoke=204 npu=4、smoke=501
编译产物来源 JOB_arm_compile(aarch64) JOB_x86_compile_ubuntu24(x86)
NPU_SLOTS 1 4
日志目录 ${{ env.obs_smoke_path }}/plog/ .../plog/A5/

compile_action.yml 的输出名叫 arm_run_url,实际是 primary-url、与架构无关,所以
x86 那个 job 也用这个名字取。其余字段与 A2 当前写法逐项对齐:checkout 的
allow-unsafe-pr-checkout、obs-download 的四个输入、timeout-minutes: 30、
env: RUN_URL 间接传递(而不是把表达式直接拼进 shell 行)、if: ${{ always() }} 的
upload、slog*.tar.gz(多卡每张卡一个)、if: env.TARGET_BRANCH == 'master'。

合入顺序

建议在 !7354 之后合。 本 PR 一合入 master,A5 job 就立即对所有 PR 生效,而
PRESMOKE_MULTI_CARD_MODE=fixed 会去找 shards/dav-3510_npu_4cards/ —— 那四个清单文件
在 !7354 里。反过来先合本 PR 会有一个「job 活了但分片不在」的窗口。

!7356 不是前置依赖:没有它 A5 也能跑(728 实跑 / 22 SKIP 不变),只是每卡的 build
并发度会按 master 现有的 resolve_npu_jobs_for_cpus 算成 6 而不是调优后的 16。

验证

  • yaml.safe_load 解析通过,stages.stage5.jobs 为 ['A2_smoke', 'A5_smoke'],
    step 序列 ['Checkout', 'download', 'smoke executor', 'upload']
  • 跨 stage 引用的 JOB_x86_compile_ubuntu24(stage2)和 JOB_image(stage1)都确认在
    当前 master 上存在

本 PR 的流水线无法自证。 GitCode 的 workflow 定义取自 PR 的目标分支(master),
不是 PR head,所以新加的 job 在本 PR 的 /compile 里根本不会被加载 —— 绿只代表
precommit / codecheck / UT / A2_smoke 没被弄坏。只能合入后由下一个 PR 实跑第一轮。

替代证据来自测试仓 opencann/asc-devkit_8873(同一份 job 定义 + 同一份四卡分片):
最近 4 轮流水线全绿,耗时 23m18s / 23m09s / 20m40s / 24m40s。
jobs.JOB_image.outputs.PreSmoke_A5 能解析出镜像、smoke=501 能调度到 4 卡机器 ——
这两条原先在本 PR 描述里写的是「待合入后验证」,现在已经有数据。

likedislike
Pull Request has been successfully merged by CANN-robot.
(Thank you for zhugexun_sjtu's contribution.)
zhugexun_sjtuzhugexun_sjtuCollaborators
17 days ago Created pull request, commit 43f15ace
atomgit-bot
atomgit-bot
17 days ago Comments:

变更摘要

本 PR 在 .gitcode/workflows/asc-devkit_action.yml 的 stages.stage5.jobs 中新增了一个 A5_smoke job(显示名 PreSmoke_A5),为 950/A5 相关改动补充前冒烟门禁;该 job 与既有的 A2_smoke 并列,仅新增内容,不改动 A2。A5_smoke 的流程结构与 A2 逐项对齐,差异集中在 runner 标签、容器镜像和日志上传子目录三处,使两个 job 的差别只在于芯片。

主要改动

  • 新增 A5_smoke job 及调度配置: 新增 PreSmoke_A5 job,通过 runs-on: ['self-hosted','npu=1','smoke=501'] 指定 A5 runner,并设置容器镜像 swr.cn-north-4.myhuaweicloud.com/pre_smoke/ubuntu24.04_x86:pre_mindspore_A5_conda_v1.1001。
  • 四步执行流程: 新增 Checkout(process_checkout)、download(obs-download)、smoke executor、upload(obs-upload)四个 step,依次完成代码检出、从 OBS 下载 pr_filelist.txt 等四个输入文件、执行 pre_smoke.sh 并上传结果。
  • 执行环境与超时约束: smoke executor step 设置 timeout-minutes: 30,脚本内启用 set -e 并导出 WORKSPACE、repo_name、pr_id、obs_path、AK/SK、obs_smoke_path 等环境变量。
  • 日志路径隔离: 上传使用 object-prefix: ${{ env.obs_smoke_path }}/plog/A5/,以 plog/A5/ 子目录与 A2 区分,避免两个 job 的 slog*.tar.gz 相互覆盖。
  • 分支门禁条件: job 级 if: env.TARGET_BRANCH == 'master',仅在目标分支为 master 时触发该前冒烟任务。
likedislike
Incorrect?
atomgit-bot
atomgit-bot
17 days ago Comments:

代码审查

✅ 未发现问题

likedislike
Incorrect?
CANN-robotCANN-robotCollaborators
17 days ago Added label: cann-cla/yes
CANN-robot
CANN-robotCollaborators
17 days ago Comments:

Thanks for your pull-request.
The full list of commands accepted by me can be found at here.
You can get sig-info at here.
You can self-configure the PR merge rules for this repository. For more details, please refer to Here.
For more, you also can visit HICANN.


PR Approval Progress

✅ Congratulations! All modules have met the lgtm and approve requirements.

Module Approval Details

module lgtm status approve status
.gitcode/** ✅ Larry_liuyi, hujiawen_kaven (2/2) ✅ Larry_liuyi (1/1)

💡 Tip:

  • Committer can comment /approve or /lgtm
  • Commenting /approve implies both code review (lgtm) and intent to merge (approve)

CLA Signature Pass

xun_zhuge, thanks for your pull request. All authors of the commits have signed the CLA. 👍

likedislike
145 messages are collapsed here。 See more
CANN-robot
CANN-robotCollaborators
12 days ago Comments:

The following users do not have permission to comment /lgtm or /approve on any module in this PR:
/approve: hujiawen_kaven

likedislike
CANN-robotCANN-robotCollaborators
12 days ago Added label: lgtm
CANN-robotCANN-robotCollaborators
12 days ago Removed label: ci-pipeline-running
CANN-robotCANN-robotCollaborators
12 days ago Added label: ci-pipeline-passed
CANN-robotCANN-robotCollaborators
12 days ago Merged pull request