| Files | Last commit | Last update |
|---|---|---|
fix(ragged_bin_count): fix weighted accuracy and validate GE splits Co-authored-by: raoliang_sac<raoliang4@huawei.com> # message auto-generated for no-merge-commit merge: !7037 merge fix/ragged-bin-count-august-regression into master fix(ragged_bin_count): fix weighted accuracy and validate GE splits Created-by: raoliang_sac Commit-by: raoliang_sac Merged-by: cann-robot Description: ## 描述 RaggedBinCount 的长加权输入在默认模式下使用 FP32 原子累加,舍入误差会超过混合容差标准。在官方 master c47568d3b5d22b1570bfbaad40dc63681ff5ca30 上,8 月测试记录中的 11 条失败用例使用原冻结输入全部复现。 - 非二值且带权重、values 元素数大于 256,且 direct/partials/integer-histogram 至少一条有界实现可用时,复用现有高精度累加路径;超出覆盖范围的默认模式保留原 ROW/VALUE 映射,避免逐 bin 重扫行。 - 在 GE 早期 verifier 中拒绝已知长度为 0 或 1 的 splits,避免零行输出在图通路绕过下游校验;原 L2_exc_constraint_030 已用实际 GEIR 对照确认修复。 - 将整数直方图 workspace 上限扩展到 1 GiB,使本批宽输出可使用现有整数累加实现;原 L1_259 所需用户直方图为 739,458,048 字节,上限仍有界。 - 更新路由及 workspace UT;在现有 kernel ST CSV 中补充两条约 26 万元素的回归,覆盖两种索引 dtype。 ## 关联的Issue https://gitcode.com/cann/ops-math/issues/4422 ## 测试 - Ascend950PR_9579;任务内独立 Master/Revise CANN,定向构建并核对部署内容与实际 binary 来源。 - TTK 5bc080fe42c25b2a11654e514de10ac08771cb02,全部执行显式 --pc=1;沿用原仓内 golden 和 mixed 精度标准,输入 SHA256 与原失败记录一致。 - 原失败 11 条:主线 mixed 11/11 FAIL,修复后 mixed 11/11 PASS;真实 A100 三方对照 11/11 PASS。 - 同输入性能:GPU 采用仓内 PyTorch eager 组合标杆,按交付口径 GPU_us / NPU_us * 1555 / 1400 折算,11 条最低值 0.786211,全部达到本次要求的 0.1。额外 3 条稀疏大输出真实 GPU 三方与性能边界均通过,最低折合 0.854664。 - Ascend 950 Host UT 92/92 PASS;新增有界路由 20/20 编译分支命中,覆盖恰好 1 GiB、单行与多行超界回退,显式确定性语义保持。Graph UT 3/3 PASS,通过真实 OperatorFactory/VerifyAllAttr 调用;旧注册对象 red 对照按预期失败,修复后通过。 - 仓内 kernel ST 20/20 PASS,包括新增两条回归;主线最小 ROW 用例先失败、修复后通过。 - 仓内 GEIR 静态、动态 ST 13/13 PASS,两条模式分别检查通过;原 4 条 nan 形状在 CSV 解析阶段失败,4 条错误的预期输出描述被 GE 正常推导;splits=0/1 在修复后均从实际 verifier 拒绝,不将原 ACLNN 错误码预期等同于 GEIR 验证通过。指定统一入口本地 CI 已通过,受测 SHA 58054666b6d248a8246dac86ac0b5536a761232d,官方 master 快照 c47568d3b5d22b1570bfbaad40dc63681ff5ca30;950 Host/Graph 为 92/3,910b 为 51/3,实际 UT 共 149 条(OpAPI/Kernel 的 0 用例不计入)。pre-commit、完整文件列表隔离 OAT、双 SOC 定向 package/UT 及实际依赖门禁均通过。 - 最终受测 SHA 已同步 PR;[compile 评论197755522](https://gitcode.com/cann/ops-math/merge_requests/7037#note_197755522) 已回查,对应[线上 run6502](https://gitcode.com/cann/ops-math/actions/runs/8946107c692649b993cd42f145e18490) 已全部通过,54 个任务节点 COMPLETED,PR HEAD 与本地 CI 受测 SHA 一致。 ## 文档更新 无。 ## 类型标签 - [x] Bug修复 - [ ] 新特性 - [ ] 性能优化 - [ ] 文档更新 - [ ] 其他,请描述: See merge request: cann/ops-math!7037 | 16 days ago | |
feat(ragged_bin_count): 新增 RaggedBinCount 算子 Ascend 950 arch35 实现 Co-authored-by: raoliang_sac<raoliang4@huawei.com> # message auto-generated for no-merge-commit merge: !4599 merge feat/ragged-bin-count-ascend950-pr into master feat(ragged_bin_count): 新增 RaggedBinCount 算子 Ascend 950 arch35 实现 Created-by: raoliang_sac Commit-by: raoliang_sac Merged-by: cann-robot Description: ### 相关的Issue #2758 ### 原因(目的、解决的问题等) 新增 RaggedBinCount 算子的 Ascend 950(DAV_3510 / arch35)实现。该算子按 splits 划分的 ragged row 统计每个 bin 的出现次数或权重和,与 TensorFlow RaggedBincount 语义兼容。canndev 已有 A2/A3 侧既有实现,本 PR 只补齐 A5 侧原生实现,不改动 A2/A3。 ### 描述(做了什么,变更了什么) - **调用边界**:仅 Graph IR RaggedBinCount。CMakeLists.txt 显式 ACLNNTYPE aclnn_exclude,不新增同名 aclnn 接口。 - **Kernel**:DAV_3510 SIMT direct-GM,key = mapping*4 + binary*2 + hasWeights 共 8 个 tiling key;dtype 与 u32/u64 索引宽度不额外增加 key。 - **原生 dtype**:精确两组 —— splits=int64 + values/size=int32|int64 + weights/output=float32。 - **dtype 门禁**:Graph/Host 通过 AICore CheckSupport + needCheckSupport=true 在选路阶段拒绝非原生 dtype,避免公共 IR 自动插 Cast 后误入原生 kernel。 - **Infer 划分**:InferDataType 仅图场景使用,置于 op_graph/;InferShape 图与单算子共用,留在 op_host/。 - **交付件**:examples/ 图模式调用样例、tests/assets/golden.py(TestSpec 格式)、docs/zh/op_list.md 条目。 ### 验证过程和结果 - UT 57/57:op_host 56(arch35 tiling 36 + infershape 20,含 4 条 -2 UNKNOWN_RANK 动态 rank 用例)、op_graph 1;CI 在 ascend910b 上另跑一遍 infershape 20 条,同样全过。 - op_kernel UT(36 条,覆盖 8 个 tilingKey、两种 values dtype、uint64 索引模板与 UB 私有直方图路径)**暂未随本 PR 提交**:cmake/ut.cmake 会为任何带 tests/ut/op_kernel/ 的算子建 gen_head 目标,其 gen_tiling_head_file.py 首行 import tbe 在当前 UT 节点(numpy 2.2.6,而 CANN 9.2.0 的 tbe 按 numpy 1.x 编译)抛 ImportError: numpy.core.multiarray failed to import,导致所有 gtest 全 PASSED 的情况下 UT 阶段仍失败。该问题与算子代码无关、本地(numpy 1.26.4)不可复现,待节点环境修复后单独提 PR 补回。 - 真实 Ascend950PR 上板:正向矩阵 28/28(26 次真实 kernel launch + 2 个合法零元素 no-launch);不支持 dtype 拒绝 2/2,Cast / native launch / fallback 均为 0。 - 包审计:精确两组 native dtype,两份 binary 均含 key 0..7,needCheckSupport=true,同名 ACLNN / op_api / AI_CPU fallback 均为 0。 - golden 采用竞品实现而非 numpy 公式:_compute 用 torch.bincount 逐行拼接,third_party 用独立的 scatter_add_ 路径;两者随机 200 例逐位一致,并与 TensorFlow raw_ops.RaggedBincount 随机 190 例一致。 See merge request: cann/ops-math!4599 | 2 months ago |
| Files | Last commit | Last update |
|---|---|---|
| 16 days ago | ||
| 2 months ago |