ops-transformer/tests · mutex_lock/ops-transformer

文件	最后提交记录	最后更新时间
mc2_mock_test_frame	pre-commit修复posembedding、mhc、ffn等目录.h/.hpp历史格式问题 Co-authored-by: gitcode_lijd<lijiandong20@huawei.com> # message auto-generated for no-merge-commit merge: !11021 merge fix_3 into master pre-commit修复posembedding、mhc、ffn等目录.h/.hpp历史格式问题 Created-by: gitcode_lijd Commit-by: gitcode_lijd Merged-by: cann-robot Description: ## 关联的Issue 关联Issue https://gitcode.com/cann/ops-transformer/issues/4850 ## 描述对仓内算子源码提前做 pre-commit 历史格式问题清理，为后续功能改动（如 Regbase API 替换等）扫清钩子障碍，避免后续 PR 因格式问题被大面积格式化污染 diff。处理方式：`find <目录> -type f \( -name '.h' -o -name '.hpp' \) \| xargs pre-commit run --files`，多轮执行直到所有 hook 收敛（无 Failed / 无自动修复）。修复内容（仅格式，不改任何代码语义）： - 尾随空白（trailing whitespace） - 文件末尾换行（end of file） - clang-format 代码重排（换行、缩进、对齐，遵循仓内 .clang-format） ### 排除范围（不做格式化） - `_def.cpp` 算子定义文件（排版由开发者自行维护，另见 PR #11041） - `/op_api/aclnn.h`、`/op_graph/_proto.h`、`/op_host/op_api/aclnn*.h` 接口/原型头文件（排版由开发者自行维护） - `mamba/` 目录（该目录 causal_conv1d 算子 UT 上游基线存在失败，见 Issue #4840，本批不涉及） - `examples/`、`experimental/` 目录 ### PR 拆分说明全仓 .h/.hpp 清理共 2362 个文件，按场景目录拆分为 6 个 PR（分支不同、内容互不重叠，可独立 review 合入）： \| PR \| 分支 \| 范围 \| \|---\|---\|---\| \| #4878 \| compile \| attention 第1批（按算子字母序前段） \| \| #10422 \| graph \| attention 第2批（按算子字母序中段） \| \| #9331 \| test \| attention 第3批（按算子字母序后段） \| \| #10991 \| fix \| mc2 \| \| #11020 \| fix_2 \| moe、gmm \| \| #11021 \| fix_3 \| posembedding、mhc、ffn、common、tests、torch_extension \| ## 测试 - 纯格式化改动：不改变任何代码语义，逐文件 diff 均为空白/换行/clang-format 重排 - pre-commit 全量 hook 收敛验证：多轮执行后 trailing-whitespace / end-of-file-fixer / clang-format 均 Passed - 建议合入前对相关算子做一次编译验证 See merge request: cann/ops-transformer!11021	19 天前
ut	MC2:UT测试数据soc列迁移arch串 Co-authored-by: gitcode_lijd<lijiandong20@huawei.com> # message auto-generated for no-merge-commit merge: !12347 merge fix_2 into master MC2:UT测试数据soc列迁移arch串 Created-by: gitcode_lijd Commit-by: gitcode_lijd Merged-by: cann-robot Description: 关联Issue https://gitcode.com/cann/ops-transformer/issues/5147 ## 摘要 mc2 UT 测试数据（CSV）soc 列的平台表达迁移 arch 口径，按链路取各自可用的最佳写法：tiling 用 `3510`（框架 `isNpuArchString` 仅认纯数字串）、op_api 用 `DAV_3510`（arch 常量全称，自解释）。单笔提交，14 文件（13 CSV + op_api 加载器 1 行）。 ## 动机前序整改（#12072 等）后，算子代码平台判断已统一 arch 口径（`GetNpuArch(context) == DAV_3510`），但 UT CSV 的 soc 列仍写平台字符串 `Ascend950`，测试数据与被测代码口径脱节；且 soc 名若变更（商用前型号更名），CSV 需全量重写。迁移 arch 串后测试数据与代码判断依据同源，soc 名变更仅需调整框架 mock 映射表。 ## 改动明细 ### 1. CSV 数据（13 文件，421 处） - op_host tiling arch35 ×5（moe_distribute_dispatch_v2 / moe_distribute_combine_v2 / all_gather_matmul / all_gather_matmul_v2 / matmul_reduce_scatter_v2）：`Ascend950` → `3510`（tiling 执行器 `isNpuArchString` 仅认纯数字串，对齐仓内 5 个裸 `3510` 先例文件） - op_api ×8（matmul_all_reduce 系 ×6、allto_all_matmul_v2、allto_all_quant_matmul）：`Ascend950` → `DAV_3510`（op_api 映射表无格式约束，用常量全称） - 列级精确替换（soc 列）：逐文件核验目标值仅出现于该列且每行至多 1 次，无整文件误替换 - case 名同步（89 处，统一全称 `DAV_3510`）：前缀式 `ascend950_` → `DAV_3510_`（15 处 / 6 文件）；后缀式 `_950` → `_DAV_3510`（74 处，all_gather_matmul_v2 tiling）。case_name 仅作标识与日志输出、无格式约束；非平台含义的 `4295032864`（groupSize 值）误含 950 子串者未动 ### 2. op_api 加载器（`op_api_csv_case_loader.h`，1 行） - SOC_VERSION 映射表新增 `{"DAV_3510", ASCEND950}`：op_api 链路此前无 arch 串支持 ### tiling 链路无需改动 `tiling_case_executor.cpp` 的 `isNpuArchString` 原生支持纯数字 arch 串（`archToSoc {"3510"→"Ascend950"}` 注入 `NpuArch=3510` + `Short_SoC_version=Ascend950`），与 master 上 5 个裸 `3510` 先例文件走同一链路。 ## 语义等价性 - tiling：`3510` → 注入 `NpuArch=3510` + `Short_SoC_version=Ascend950`，与原 `Ascend950`（socToArch 反查）注入的平台资源完全一致 - op_api：`DAV_3510` → `ASCEND950` 枚举，与原 `Ascend950` 直映完全一致 - 兼容性：`Ascend950` 旧写法继续可用（原表项未动） ## 测试 - tiling：all_gather_matmul + moe_distribute_combine_v2 → 88 tests PASSED；all_gather_matmul_v2 → 153 tests PASSED - op_api：matmul_all_reduce + allto_all_matmul（覆盖 7 个 CSV，含 case 名重命名）→ 498 tests PASSED - 其余涉及算子以 CI 为准 ## 已知不阻塞项 `allto_all_matmul_v2` op_api 的 9 个 dtype/shape invalid 用例在上游纯净 master 基线即失败（19 跑 10 过：期望 PARAM_NULLPTR 实际 RUNTIME_ERROR），已本地 stash 对比确认与本改动无关。 ## 范围说明 - mc2 目录外 59 个含 950 的 CSV（gmm / attention / moe / posembedding 等）不在本口径：其中真机 ST CSV 的 soc 列为实际产品名不应转换，待单独评估 - experimental pytest CSV（qbsa_mxfp8_stc.csv）消费链路不同，未动 See merge request: cann/ops-transformer!12347	3 天前
requirements.txt	添加pybind11依赖声明 Co-authored-by: chenyifan<chenyifan66@h-partners.com> # message auto-generated for no-merge-commit merge: !9952 merge add_module into master 添加pybind11依赖声明 Created-by: mutex_lock Commit-by: chenyifan Merged-by: cann-robot Description: ## 描述 - requirements.txt中增加pybind11依赖声明 ## 关联的Issue https://gitcode.com/cann/ops-transformer/issues/4283 ## 测试 <!--描述进行了哪些测试来验证你的改动。包括但不限于二级冒烟、算子泛化等。--> ## 文档更新 <!--如果这个PR包含文档的更新，请在这里指出。例如：更新了README.md文件。--> ## 类型标签 <!-- [x] 表示选中 --> - [ ] 🐛 Bug修复 - [ ] ✨ 新特性 - [ ] ⚡ 性能优化 - [ ] ♻️ 重构 - [ ] 🧪 测试 - [ ] 📦 构建/CI - [ ] 🔧 配置变更 - [ ] 📝 文档更新 - [x] ⬆️ 依赖升级 - [ ] 🔒 安全修复 - [ ] 🧹 代码清理 - [ ] ❓ 其他，请描述： See merge request: cann/ops-transformer!9952	1 个月前
test_config.yaml	增补SFA/LI系列算子UT覆盖和文件覆盖2 Co-authored-by: j60100428<jingsong5@h-partners.com> # message auto-generated for no-merge-commit merge: !12002 merge master into master 增补SFA/LI系列算子UT覆盖和文件覆盖2 Created-by: SH_jingsong Commit-by: j60100428 Merged-by: cann-robot Description: ## 描述增补 SFA（Sparse Flash Attention）/LI（Lightning Indexer）系列算子的 UT 覆盖与文件覆盖：一方面为 kv_quant_sparse_flash_attention、kv_quant_sparse_flash_attention_v2、lightning_indexer_v2、quant_lightning_indexer_v2、quant_sparse_flash_mla 五个缺少 aclnn 两段式接口的算子新增 op_api 冒烟用例，通过库加载阶段的静态初始化验证算子 OpDef 注册流程无崩溃、无重复注册冲突；另一方面为 lightning_indexer_v2 和 quant_lightning_indexer_v2 新增 op_host 侧 tiling 用例，以 mock 的 Ascend950 平台驱动 arch35 checker 与 tiling_info_parser 路径，使 arch22 构建的覆盖率报告也能覆盖这些代码；同时更新 classify_rule.yaml，将相关源文件纳入 transformer-2 目录分类的文件覆盖规则。 ## 关联的Issue https://gitcode.com/cann/ops-transformer/issues/5119 ## 测试 <!--描述进行了哪些测试来验证你的改动。包括但不限于二级冒烟、算子泛化等。--> ## 文档更新 <!--如果这个PR包含文档的更新，请在这里指出。例如：更新了README.md文件。--> ## 类型标签 <!-- [x] 表示选中 --> - [ ] 🐛 Bug修复 - [ ] ✨ 新特性 - [ ] ⚡ 性能优化 - [ ] ♻️ 重构 - [ ] 🧪 测试 - [ ] 📦 构建/CI - [ ] 🔧 配置变更 - [ ] 📝 文档更新 - [ ] ⬆️ 依赖升级 - [ ] 🔒 安全修复 - [ ] 🧹 代码清理 - [ ] ❓ 其他，请描述： See merge request: cann/ops-transformer!12002	4 天前
test_soc_config.yaml	megamoe fix ut Co-authored-by: lyt_claire<luyitong1@huawei.com> # message auto-generated for no-merge-commit merge: !6689 merge megamoe_fix_master into master megamoe fix ut Created-by: lyt_claire Commit-by: lyt_claire Merged-by: cann-robot Description: ## 描述修复megamoe UT ## 关联的Issue <!-- 如果这个PR是为了解决特定的Issue，请在这里提供Issue链接。例如：关联Issue #000--> <!-- 如果这个PR是为了解决特定的问题单，请在这里描述问题单单号。--> ## 测试 <!--描述进行了哪些测试来验证你的改动。包括但不限于二级冒烟、算子泛化等。--> ## 文档更新 <!--如果这个PR包含文档的更新，请在这里指出。例如：更新了README.md文件。--> ## 类型标签 <!-- [x] 表示选中 --> - [ ] 🐛 Bug 修复 - [ ] ✨ 新特性 - [ ] ⚡ 性能优化 - [ ] ♻️ 重构 - [ ] 🧪 测试 - [ ] 📦 构建/CI - [ ] 🔧 配置变更 - [ ] 📝 文档更新 - [ ] ⬆️ 依赖升级 - [x] 🔒 安全修复 - [ ] 🧹 代码清理 - [ ] ❓ 其他，请描述： See merge request: cann/ops-transformer!6689	3 个月前