| Files | Last commit | Last update |
|---|---|---|
[CANNBOT] Pdist新增Ascend950 pypto实现 Co-authored-by: SimonZzz<zhouquan79@huawei.com> # message auto-generated for no-merge-commit merge: !5438 merge pdist_pypto into master [CANNBOT] Pdist新增Ascend950 pypto实现 Created-by: SimonZzz Commit-by: SimonZzz Merged-by: cann-robot Description: ## 描述 pdist 算子新增 Ascend 950PR/950DT 系列(reg-base,DAV_3510/DAV_5102)PyPTO 内核实现,补齐 host 侧 tiling、GE 注册/推导到测试资产的全链路改动: - **PyPTO kernel(op_kernel/pdist.py)**:m-lane row-major 布局(零转置,消除 v1 pair-lane 转置布局下 vscatter 导致的 UB bank 串行化,fp16 [8192,512] 由 963ms 优化至约 20.6ms);M_BLK=128 分块 ping-pong 部分和累加(含 p=1/inf 分支的 NaN 计数);按 PBranch 编译期折叠的无分支内层 m 循环;提供 fp32/fp16 双 dtype 实例(fp16 以 pl.cast 展宽至 fp32 计算、出口 CAST_RINT 收窄) - **host tiling(op_host/arch35/pdist_tiling.cpp/.h)**:p 值映射 0-5 的 PBranch 分支并以 GET_TPL_TILING_KEY 编码 TilingKey;闭式 PdistFloorSum 计算 64 对任务块数 B,按核连续块域切分,MIX 发射方式计算 blockDim;tiling 数据含 N/M/B/p_val/inv_p 字段 - **GE 注册与推导(op_host/pdist_def.cpp、pdist_infershape.cpp)**:ascend950 AICore 配置及 DynamicShapeSupportFlag 等动态开关;输出 y=[N*(N-1)/2],dtype 与输入一致 - **测试资产**:examples/test_aclnn_pdist.cpp 重构为带 golden 容差比对的用例(fp32 覆盖 p=0/0.5/1/2/3/inf、大 M 多块场景及 fp16 用例);新增 GE IR RunGraph 用例 test_geir_pdist.cpp;tests/assets/golden.py 提供上三角行优先输出语义的参考实现与 TTK TestSpec(PdistTestSpec/AclnnPdistTestSpec/AclnnPdistForwardTestSpec)注册及 fp16/fp32 容差配置 ## 关联的Issue https://gitcode.com/cann/ops-math/issues/4169 ## 测试 - kernel 移植自 Stage-4 验证通过的 PyPTO-Pro v2 交付(verifier PASS 15/15、16/16 用例,附 Stage 5 性能证据) - eager 模式示例 fp32(p=0/0.5/1/2/3/inf、大 M 多块)与 fp16 用例均与 golden 容差比对通过 - 本地 pre-commit 全量通过(clang-format / ruff / codespell / OAT 合规),CI CodeCheck 门禁通过;PreSmoke 示例已去除 securec 依赖修复链接失败,随本提交重新验证 ## 文档更新 更新 math/pdist/README.md、docs/aclnnPdist.md、docs/aclnnPdistForward.md(实现方案、参数与产品支持说明) ## 类型标签 - [ ] Bug修复 - [x] 新特性 - [ ] 性能优化 - [ ] 文档更新 - [ ] 其他,请描述: See merge request: cann/ops-math!5438 | 19 days ago | |
fix(pdist): 示例include路径改为仓库标准aclnnop/前缀,修复默认eager流程编译失败 Co-authored-by: SimonZzz<zhouquan79@huawei.com> # message auto-generated for no-merge-commit merge: !7266 merge fixPdistexam into master fix(pdist): 示例include路径改为仓库标准aclnnop/前缀,修复默认eager流程编译失败 Created-by: SimonZzz Commit-by: SimonZzz Merged-by: cann-robot Description: ## 描述 修复 math/pdist/examples/test_aclnn_pdist_forward.cpp 的头文件引用路径问题,并补齐算子 UT: - **问题1**:该示例使用 #include "aclnn_pdist_forward.h" 裸文件名引用头文件,是全 math 仓唯一不符合 aclnnop/ 前缀规范的示例(同目录 test_aclnn_pdist.cpp 及其余所有示例均使用 #include "aclnnop/aclnn_xxx.h" 标准写法)。该头文件实际位于 CANN 安装目录 include/aclnnop/ 下,默认(非 cust)eager 示例流程的 include 路径(-I $ASCEND_HOME_PATH/include)无法解析裸文件名,导致 bash build.sh --run_example pdist eager 编译直接失败: test_aclnn_pdist_forward.cpp:21:10: fatal error: aclnn_pdist_forward.h: No such file or directory 修复:改为仓库标准写法 #include "aclnnop/aclnn_pdist_forward.h",与 #5438 中引入的其余 pdist 测试资产保持一致,同时兼容默认流程与 cust 自定义包流程。 - **问题2**:math/pdist/tests/ 下仅有 assets、st,缺少 ut 目录。按仓库门禁规则(Check_Example:本 PR 变更命中的算子须 examples 与 UT 齐备),任何触碰 pdist 的 PR 都会被 CI 拦截。 修复:新增 tests/ut/op_api/ 下 test_aclnn_pdist.cpp、test_aclnn_pdist_forward.cpp 两个测试文件,覆盖 aclnnPdist(L1)与 aclnnPdistForward(L2)接口: - 异常场景:self/out/p 为 nullptr、self/out 不支持的 dtype、self 与 out dtype 不一致、self 非 2 维、out 非 1 维、out shape 与 N*(N-1)/2 不匹配、p 为负数、p 为 NaN; - 正常场景:fp32/fp16、p=0/1/2/1.5/inf、单行输入(N=1 空输出)、两行输入、空输入(M=0 走 Fill 分支),共 36 例。 - **问题3**:math/pdist/CMakeLists.txt 非 950 分支手动展开 op_api 源码收集逻辑时,遗漏了 add_all_ut_sources 调用,导致非 950 构建(CI 默认 ascend910b 的 opapi UT)下本算子 UT 用例即使存在也不会参与编译。补充该调用,与 950 分支 add_all_modules_sources 宏行为对齐(对 950 分支无影响)。 ## 关联的Issue https://gitcode.com/cann/ops-math/issues/4647 ## 测试 - Ascend950 模拟器环境(CANN 9.2.0,dav_3510):include 修复后默认 eager 流程编译通过; - cust 流程(--pkg --soc=ascend950 --ops=pdist 构建自定义包并安装)编译运行,aclnnPdistForward 示例输出 6/6 个 p=2 距离值,与理论值(√27/√108/√189)误差 < 1e-6; - 新增 UT 本地构建执行通过:math_op_api_ut --gtest_filter=l2_pdist* 36/36 全部 PASSED; - math/pdist/CMakeLists.txt 修改后 950 分支 configure 验证通过(pypto codegen 正常)。 ## 文档更新 不涉及 ## 类型标签 - [x] Bug修复 - [ ] 新特性 - [ ] 性能优化 - [ ] 文档更新 - [ ] 其他,请描述: See merge request: cann/ops-math!7266 | 6 days ago | |
[CANNBOT] Pdist新增Ascend950 pypto实现 Co-authored-by: SimonZzz<zhouquan79@huawei.com> # message auto-generated for no-merge-commit merge: !5438 merge pdist_pypto into master [CANNBOT] Pdist新增Ascend950 pypto实现 Created-by: SimonZzz Commit-by: SimonZzz Merged-by: cann-robot Description: ## 描述 pdist 算子新增 Ascend 950PR/950DT 系列(reg-base,DAV_3510/DAV_5102)PyPTO 内核实现,补齐 host 侧 tiling、GE 注册/推导到测试资产的全链路改动: - **PyPTO kernel(op_kernel/pdist.py)**:m-lane row-major 布局(零转置,消除 v1 pair-lane 转置布局下 vscatter 导致的 UB bank 串行化,fp16 [8192,512] 由 963ms 优化至约 20.6ms);M_BLK=128 分块 ping-pong 部分和累加(含 p=1/inf 分支的 NaN 计数);按 PBranch 编译期折叠的无分支内层 m 循环;提供 fp32/fp16 双 dtype 实例(fp16 以 pl.cast 展宽至 fp32 计算、出口 CAST_RINT 收窄) - **host tiling(op_host/arch35/pdist_tiling.cpp/.h)**:p 值映射 0-5 的 PBranch 分支并以 GET_TPL_TILING_KEY 编码 TilingKey;闭式 PdistFloorSum 计算 64 对任务块数 B,按核连续块域切分,MIX 发射方式计算 blockDim;tiling 数据含 N/M/B/p_val/inv_p 字段 - **GE 注册与推导(op_host/pdist_def.cpp、pdist_infershape.cpp)**:ascend950 AICore 配置及 DynamicShapeSupportFlag 等动态开关;输出 y=[N*(N-1)/2],dtype 与输入一致 - **测试资产**:examples/test_aclnn_pdist.cpp 重构为带 golden 容差比对的用例(fp32 覆盖 p=0/0.5/1/2/3/inf、大 M 多块场景及 fp16 用例);新增 GE IR RunGraph 用例 test_geir_pdist.cpp;tests/assets/golden.py 提供上三角行优先输出语义的参考实现与 TTK TestSpec(PdistTestSpec/AclnnPdistTestSpec/AclnnPdistForwardTestSpec)注册及 fp16/fp32 容差配置 ## 关联的Issue https://gitcode.com/cann/ops-math/issues/4169 ## 测试 - kernel 移植自 Stage-4 验证通过的 PyPTO-Pro v2 交付(verifier PASS 15/15、16/16 用例,附 Stage 5 性能证据) - eager 模式示例 fp32(p=0/0.5/1/2/3/inf、大 M 多块)与 fp16 用例均与 golden 容差比对通过 - 本地 pre-commit 全量通过(clang-format / ruff / codespell / OAT 合规),CI CodeCheck 门禁通过;PreSmoke 示例已去除 securec 依赖修复链接失败,随本提交重新验证 ## 文档更新 更新 math/pdist/README.md、docs/aclnnPdist.md、docs/aclnnPdistForward.md(实现方案、参数与产品支持说明) ## 类型标签 - [ ] Bug修复 - [x] 新特性 - [ ] 性能优化 - [ ] 文档更新 - [ ] 其他,请描述: See merge request: cann/ops-math!5438 | 19 days ago |
| Files | Last commit | Last update |
|---|---|---|
| 19 days ago | ||
| 6 days ago | ||
| 19 days ago |