| Files | Last commit | Last update |
|---|---|---|
fix: 修复 RaggedBinCount 边界、TF 标量适配和 Golden,精简 ST 用例 Co-authored-by: raoliang_sac<raoliang4@huawei.com> # message auto-generated for no-merge-commit merge: !6648 merge fix/august-scan-followup-20261023 into master fix: 修复 RaggedBinCount 边界、TF 标量适配和 Golden,精简 ST 用例 Created-by: raoliang_sac Commit-by: raoliang_sac Merged-by: cann-robot Description: ## 描述 修复 RaggedBinCount 在 Ascend 950 上的三处问题:私有直方图容量/流量计算在大元数据下溢出导致 Tiling 进程异常;合法标量 values 被 V2 InferShape 和 Tiling 拒绝;TensorFlow 源算子注册名误写为 RaggedBinCount,实际名称应为 RaggedBincount。 TF 标量 size 适配补齐:在保留标准源名 RaggedBincount 的基础上,设置 original_type 并通过图展开插入真实 Reshape,将 FP32 weights 路径的标量 size 转为原生要求的 [1],保持 int32/int64 的值依赖。整数与 FP64 weights 保留小写旧目标,不强制转 FP32。新增 4 条框架 UT,通过 RaggedBinCount 自己的 CMake 接入;未改公共 CMake、Kernel 或原生 size 接口。实际测试确认仅修正名称会在 GE 推导失败,适配后标准 TF GraphDef 可执行至 NPU。 Golden 的单 FP64 累加器会把 [2^100, 1, -2^100] 算成 0。为有限、异号的 Promote 输入使用 Torch 残差部分和,保留框架传入的 dtype 和非有限数语义;不根据用例名称选择计算方法。补充相消、标量图模式及仅编译的大元数据回归。 删除图模式样例中无用的 experiment_ops.h 依赖,把样例的 size 建成 Const 并显式设置输入描述,避免图编译读不到分箱数后错误恢复空 weights 形状;修正 dtype 错误日志。README同步标量范围,按现行要求移除产品差异表,调用说明保留GE图模式示例和算子IR入口。生产代码、Golden、样例和文档变更位于 math/ragged_bin_count;SquareSumAll 仅整理 ST CSV。未修改公共代码、Kernel 或 TTK 框架。 此前 CSV 整理阶段仅整理代码仓 arch35 ST CSV:RaggedBinCount 150→31 条(18 条 Kernel、13 条 GEIR),7 个 CSV 合并为 2 个,两个模式因表头不同分开;SquareSumAll 1200→18 条,两种模式共用一个表头一致的 CSV,保留 ttk_kernel_ 文件名以适配现有流水线发现规则。保留分块边界、标量、空输入、dtype、布局和数值回归代表;单个输入最多 8193 个元素。生成脚本及其他测例仓不改,Ragged 的 5 条仅编译元数据 UT 不在本次 ST 精简范围。 ## 关联的Issue https://gitcode.com/cann/ops-math/issues/3861 ## 测试 2026-10-27最终文档修复后的完整本地CI:**PASS**。受测提交d663e469efc3f3fc5c2db4f20cadcf4bed399217,官方master快照062cd425274de90c33afb82df32ae03049cb4881。 - README调用说明移除TF适配源码及节点/shape转换说明,保留GE图模式的真实示例和算子IR入口。仅删除该行5行HTML;产品、原生参数约束、生产代码、CSV及示例均未改变。用户指定的文档指引文件未修改。 - 两个相对链接、表格渲染、diff及文档检查通过;GE示例和TF插件源码哈希匹配此前实测版本,未重复运行NPU/GPU测试,也不把历史运行记为本次新上板结果。 - 指定本地CI统一入口串行覆盖950/A2:Host UT分别132/132、61/61,Graph UT各1/1;两平台定向package、GE依赖、完整pre-commit、15个现存变更文件隔离OAT、文档链接、Golden语法、示例语法及SKIP契约通过。API实际0条,Kernel UT阶段无实际用例计数,均不计数值覆盖。 - squash前后同原基点完整binary/mode diff及Git tree一致,再rebase到上述官方master;rebase后完整PR diff及19个文件状态一致。最终只有一个提交。线上CI针对该受测SHA单独触发,不与本地PASS混用。 以下保留此前阶段验证记录: 2026-10-26 TF 适配增量后的完整本地 CI:**PASS**。受测提交 f0b96ef53c7f1e8bc64a72bb7dfe0a80e5b01c56,本轮官方 master 快照 73b55be428c754e9b2e2fe32cf5da1cd379d8aef。使用指定 /workspace/CI-skills/ci_local_check.sh,按 PR 全部变更识别 RaggedBinCount、SquareSumAll,950/A2 串行定向构建,最大 8 jobs。 - 950 Host UT 132/132、A2 Host UT 61/61;Graph UT 各 1/1。API 实际均 0 条;Kernel UT 阶段未产生实际用例计数,不计数值覆盖。 - 两平台定向 package、生产库/Host UT 的 GE 依赖检查通过;完整 pre-commit、15 个现存变更文件的隔离 OAT、Markdown 链接、Golden Python 语法、图样例语法及 SKIP 退出契约检查通过。 - 原三个提交先 squash 为一个,同原始基点的完整 binary/mode diff 与 Git tree 不变,再 rebase 本轮官方 master;rebase 后全部 PR 文件内容及完整 PR diff 也未变化。没有为 CI 新增生产代码修改。 - 本轮未追加 NPU/GPU 算子测试。此前 TF/GEIR 回归保留原受测版本和同源码证明;GPU SSH 与小规模 CUDA 运算现已恢复,按本次 TF 形状适配范围不把额外三方作为阻塞。线上 CI 单独触发和记录,不能把本地通过称为线上通过。 以下为本次 CI 前的原验证记录: TF 定向回归时 HEAD:32002c41ad100500bc715663db5789c209f63ded;本轮 fetch 的官方 master:6a71e83e286cca85c0098543e72c6bf0eaed2f9b。此次按用户要求只做必要回归,不重跑完整本地 CI。 - 最终提交重新构建 RaggedBinCount Host UT:90/90 PASS,含新增 TF 图转换 UT 4 条。真实 size 连接、OriginShape、int32/int64、binary、旧 dtype 路由和非法属性均覆盖;Issue6 大形状只检查元数据,不分配大张量。 - 真实 TensorFlow GraphDef 经官方 CANN parser 导入后,5 个小用例在 Ascend 950 执行成功:4 个非空输出与 TensorFlow CPU 参考逐字节一致;size=0 检查空输出 shape/dtype,不能计为有效数值覆盖。涵盖 int32/int64、不同 rank 同元素数 weights、空 weights、binary;values 最多 6 个元素。 - 仓库正式 optf_plugin_math 目标构建通过;最终插件放入任务内 vendor/framework 自动加载,未显式 dlopen、未 LD_PRELOAD,标准 TF 标量 size 经 Reshape 进入大写 RaggedBinCount,输出 [2,4] 全值正确。测试后移除临时部署插件。 - 原版本标量 size 失败已实际复现;负 size 和多元素 size 各 1 条正确拒绝。原生 size=[1] 的 TTK GEIR 6 例、静态/动态 12 路径 PASS,显式 --pc=1,TTK 固定 5bc080fe。首轮内存压力下的超时记录保留,不改写为通过。 - 旧 int32/int64/FP64 weights 各做修改前后对照,均导入小写目标,并在旧 RaggedBincountVerify(math_ops.cc:393)相同 dtype 校验失败。未执行到 Kernel,不计精度 PASS,也不据此宣称旧路径完整验证通过。 - GPU SSH 仍在 banner exchange 超时,本轮 TF 用例仅与真实 TensorFlow CPU 参考比较,尚无 GPU 三方结果;此前 GPU 测试不转记到新输入。其他失败和未覆盖范围原样保留。 - 最终构建/测试全程使用任务内独立 CANN,实际 TF 执行使用已授权的正式 weekly20261021.01 包;构建最大 8 jobs,测试串行。pre-commit、3 文件增量 OAT 与本次增量 diff 检查通过。新增修复独立提交,rebase 后完整 binary/mode diff 与 rebase 前一致;本次没有套用旧提交的完整本地 CI 通过结论。 以下保留 2026-10-25 CSV 整理阶段及此前的验证记录,不代表当前提交已通过完整本地或线上 CI。 2026-10-25 CSV 阶段 HEAD:e1fdc59e35e6ee35f9d77ec5faf69551299e0500。CSV 精简前 HEAD:7005de3cdf0406df39345ec5d8c472a90500a1a2;两者之间仅有 CSV 改动。 - 本次检查:3 个 CSV 共 49 条记录完成结构检查;TTK --validate --pc=1 分模式解析共 67 valid / 0 invalid(SquareSumAll 的 18 条分别按 Kernel/GEIR 解析)。检查列数、用例名唯一性、shape 上限和手工数据依赖,git diff --check 通过。 - 按本次任务要求不重跑完整本地 CI,本次未新增 Math NPU 批次。当前提交推送后触发线上 CI,结果以该提交对应任务为准;不能将解析通过表述为实机精度通过。 - SquareSumAll 的共享 CSV 经两种模式解析确认;默认 ST 脚本按文件前缀发现 Kernel 用例,不声称合并后会自动重复执行 GEIR。 以下为 CSV 精简前的验证记录;不替代本次最终 CSV 的完整实机验收。 - 指定本地 CI 统一入口通过,受测 SHA 与下列提交一致;Ascend 950/A2 定向包、GE ABI、完整 pre-commit、全量 12 文件隔离 OAT、Markdown 链接和图样例语法检查通过。Host UT 分别 86/86、47/47,Graph UT 各 1/1;API 实际 0 条,Kernel UT 阶段未产生实际用例数,不额外计入精度覆盖。 - 首次本地 CI 暴露一条旧 UT 仍要求拒绝合法 scalar values;修正为成功并检查输出形状 [2,5],保留 rank 3 等非法输入拒绝测试。原 85/86 失败日志保留;修改后完整入口重新通过。该次补改只涉及算子自己的 UT。 - GPU 已恢复,使用未修改 TTK 官方 master 5bc080fe42c25b2a11654e514de10ac08771cb02、Promote、cross_check L1、显式 --pc=1:19 条冻结历史输入 17 PASS / 2 FAIL,新增 7 条相消排列/符号回归 7/7 PASS。两条 FAIL 中 GPU 为 Inf,NPU 分别为 1.0 和 1.0000001192092896,等于 FP64 参考的正确 FP32 舍入;框架特殊值分支要求 FP32 与未舍入 FP64 精确相等,仍报 NaN/Inf mismatch。未改比较器、阈值或 FAIL 记录,未重新启用已关闭的 TTK PR483。 - 正式 weekly20261021.01 Toolkit+950-ops 安装上部署当前生产源码对应的 custom_math 包,14/14 GEIR、静态/动态共 28/28 路径通过,包含原先失败的两条 int64 标量和未知 rank。此组无 LD_PRELOAD、无 V1 跳过、无安装库改写;真实进程加载路径全部来自新周包。另两条只记录的诊断四路径通过:V1 调用正常返回,V2 查询选中 custom_math 原生推导;不把查询次数当作调用次数。 - 保留旧 weekly20260923.01 包直接 GEIR 10/12、两条 V1 干扰失败的历史记录;新正式周包集成结果不是 canndev 源码整包构建,也不回写旧版本为通过。 - 受影响生产、Golden 和样例文件与既有实测源码一致:大元数据仅编译测试 5/5 BINARY_MATCH(原主线 4/5 Tiling 异常);release Kernel 新相消 7/7、常规 20/20、精度边界 48/48;确定性 GEIR 3 条各 3 次精度/MD5 通过;仓库入口构建运行图样例、独立核对 FP32 [2,4] 的 8 个值全部正确。超大元数据组不分配超大张量、不执行 Kernel。 - 任务内独立 CANN_Master/CANN_Revise 保留,新周包另装在任务内独立目录;构建最多 8 jobs,测试和两个仓库串行。未将 A2 构建和 Host UT 表述为 A2/A3 实机测试;TF 插件编译通过,TF 端到端未执行。Kernel 确定性选项的框架 number/string 序列化缺口仍保留。 - 通用部署脚本的 SUCCESS 文本/inc 目录误判原日志保留;实际包载荷哈希、逐文件 include 检查和执行分别核验,没有改公共脚本或虚造目录。 CSV精简前本地CI受测提交:7005de3cdf0406df39345ec5d8c472a90500a1a2 主线基点:584b2ea6cbaeba684a51a74296d82d4d50ab3b0f。已按单提交、完整 diff/tree 不变检查、最新主线 rebase 顺序整理,本地 CI 验证对应上述 CSV 精简前的提交,本次新增 CSV 提交未重跑完整本地 CI。 此前 2026-10-25 本地 CI 复验(CSV 精简前): 按指定统一入口串行复验,Ascend 950/A2定向构建及本地CI均通过;Host UT分别86/86、47/47,Graph UT两平台各1/1,API实际均为0条。完整pre-commit、隔离OAT、链接及样例静态检查通过;Kernel UT阶段未产生实际用例计数,不额外计入数值覆盖。该轮仅整理提交并rebase,无新增算子或文档修改,未重复运行NPU三方测试。 CSV精简前的CI受测提交:7005de3cdf0406df39345ec5d8c472a90500a1a2;官方master快照:584b2ea6cbaeba684a51a74296d82d4d50ab3b0f。保留原始提交、完整diff/tree核验记录及未跟踪日志;rebase前后目标算子内容一致。线上CI状态单独记录,不以本地通过代替线上通过。 ## 文档更新 局部更新README参数与约束;调用说明保留GE图模式的真实示例和算子IR入口,移除TF适配源码及内部转换说明,不增加环境安装或构建说明。 ## 类型标签 - [x] Bug修复 - [ ] 新特性 - [ ] 性能优化 - [x] 文档更新 - [ ] 其他 ## AI/Agent生成声明 - [x] AI辅助编写 See merge request: cann/ops-math!6648 | 23 days ago | |
fix: 修复 RaggedBinCount 边界、TF 标量适配和 Golden,精简 ST 用例 Co-authored-by: raoliang_sac<raoliang4@huawei.com> # message auto-generated for no-merge-commit merge: !6648 merge fix/august-scan-followup-20261023 into master fix: 修复 RaggedBinCount 边界、TF 标量适配和 Golden,精简 ST 用例 Created-by: raoliang_sac Commit-by: raoliang_sac Merged-by: cann-robot Description: ## 描述 修复 RaggedBinCount 在 Ascend 950 上的三处问题:私有直方图容量/流量计算在大元数据下溢出导致 Tiling 进程异常;合法标量 values 被 V2 InferShape 和 Tiling 拒绝;TensorFlow 源算子注册名误写为 RaggedBinCount,实际名称应为 RaggedBincount。 TF 标量 size 适配补齐:在保留标准源名 RaggedBincount 的基础上,设置 original_type 并通过图展开插入真实 Reshape,将 FP32 weights 路径的标量 size 转为原生要求的 [1],保持 int32/int64 的值依赖。整数与 FP64 weights 保留小写旧目标,不强制转 FP32。新增 4 条框架 UT,通过 RaggedBinCount 自己的 CMake 接入;未改公共 CMake、Kernel 或原生 size 接口。实际测试确认仅修正名称会在 GE 推导失败,适配后标准 TF GraphDef 可执行至 NPU。 Golden 的单 FP64 累加器会把 [2^100, 1, -2^100] 算成 0。为有限、异号的 Promote 输入使用 Torch 残差部分和,保留框架传入的 dtype 和非有限数语义;不根据用例名称选择计算方法。补充相消、标量图模式及仅编译的大元数据回归。 删除图模式样例中无用的 experiment_ops.h 依赖,把样例的 size 建成 Const 并显式设置输入描述,避免图编译读不到分箱数后错误恢复空 weights 形状;修正 dtype 错误日志。README同步标量范围,按现行要求移除产品差异表,调用说明保留GE图模式示例和算子IR入口。生产代码、Golden、样例和文档变更位于 math/ragged_bin_count;SquareSumAll 仅整理 ST CSV。未修改公共代码、Kernel 或 TTK 框架。 此前 CSV 整理阶段仅整理代码仓 arch35 ST CSV:RaggedBinCount 150→31 条(18 条 Kernel、13 条 GEIR),7 个 CSV 合并为 2 个,两个模式因表头不同分开;SquareSumAll 1200→18 条,两种模式共用一个表头一致的 CSV,保留 ttk_kernel_ 文件名以适配现有流水线发现规则。保留分块边界、标量、空输入、dtype、布局和数值回归代表;单个输入最多 8193 个元素。生成脚本及其他测例仓不改,Ragged 的 5 条仅编译元数据 UT 不在本次 ST 精简范围。 ## 关联的Issue https://gitcode.com/cann/ops-math/issues/3861 ## 测试 2026-10-27最终文档修复后的完整本地CI:**PASS**。受测提交d663e469efc3f3fc5c2db4f20cadcf4bed399217,官方master快照062cd425274de90c33afb82df32ae03049cb4881。 - README调用说明移除TF适配源码及节点/shape转换说明,保留GE图模式的真实示例和算子IR入口。仅删除该行5行HTML;产品、原生参数约束、生产代码、CSV及示例均未改变。用户指定的文档指引文件未修改。 - 两个相对链接、表格渲染、diff及文档检查通过;GE示例和TF插件源码哈希匹配此前实测版本,未重复运行NPU/GPU测试,也不把历史运行记为本次新上板结果。 - 指定本地CI统一入口串行覆盖950/A2:Host UT分别132/132、61/61,Graph UT各1/1;两平台定向package、GE依赖、完整pre-commit、15个现存变更文件隔离OAT、文档链接、Golden语法、示例语法及SKIP契约通过。API实际0条,Kernel UT阶段无实际用例计数,均不计数值覆盖。 - squash前后同原基点完整binary/mode diff及Git tree一致,再rebase到上述官方master;rebase后完整PR diff及19个文件状态一致。最终只有一个提交。线上CI针对该受测SHA单独触发,不与本地PASS混用。 以下保留此前阶段验证记录: 2026-10-26 TF 适配增量后的完整本地 CI:**PASS**。受测提交 f0b96ef53c7f1e8bc64a72bb7dfe0a80e5b01c56,本轮官方 master 快照 73b55be428c754e9b2e2fe32cf5da1cd379d8aef。使用指定 /workspace/CI-skills/ci_local_check.sh,按 PR 全部变更识别 RaggedBinCount、SquareSumAll,950/A2 串行定向构建,最大 8 jobs。 - 950 Host UT 132/132、A2 Host UT 61/61;Graph UT 各 1/1。API 实际均 0 条;Kernel UT 阶段未产生实际用例计数,不计数值覆盖。 - 两平台定向 package、生产库/Host UT 的 GE 依赖检查通过;完整 pre-commit、15 个现存变更文件的隔离 OAT、Markdown 链接、Golden Python 语法、图样例语法及 SKIP 退出契约检查通过。 - 原三个提交先 squash 为一个,同原始基点的完整 binary/mode diff 与 Git tree 不变,再 rebase 本轮官方 master;rebase 后全部 PR 文件内容及完整 PR diff 也未变化。没有为 CI 新增生产代码修改。 - 本轮未追加 NPU/GPU 算子测试。此前 TF/GEIR 回归保留原受测版本和同源码证明;GPU SSH 与小规模 CUDA 运算现已恢复,按本次 TF 形状适配范围不把额外三方作为阻塞。线上 CI 单独触发和记录,不能把本地通过称为线上通过。 以下为本次 CI 前的原验证记录: TF 定向回归时 HEAD:32002c41ad100500bc715663db5789c209f63ded;本轮 fetch 的官方 master:6a71e83e286cca85c0098543e72c6bf0eaed2f9b。此次按用户要求只做必要回归,不重跑完整本地 CI。 - 最终提交重新构建 RaggedBinCount Host UT:90/90 PASS,含新增 TF 图转换 UT 4 条。真实 size 连接、OriginShape、int32/int64、binary、旧 dtype 路由和非法属性均覆盖;Issue6 大形状只检查元数据,不分配大张量。 - 真实 TensorFlow GraphDef 经官方 CANN parser 导入后,5 个小用例在 Ascend 950 执行成功:4 个非空输出与 TensorFlow CPU 参考逐字节一致;size=0 检查空输出 shape/dtype,不能计为有效数值覆盖。涵盖 int32/int64、不同 rank 同元素数 weights、空 weights、binary;values 最多 6 个元素。 - 仓库正式 optf_plugin_math 目标构建通过;最终插件放入任务内 vendor/framework 自动加载,未显式 dlopen、未 LD_PRELOAD,标准 TF 标量 size 经 Reshape 进入大写 RaggedBinCount,输出 [2,4] 全值正确。测试后移除临时部署插件。 - 原版本标量 size 失败已实际复现;负 size 和多元素 size 各 1 条正确拒绝。原生 size=[1] 的 TTK GEIR 6 例、静态/动态 12 路径 PASS,显式 --pc=1,TTK 固定 5bc080fe。首轮内存压力下的超时记录保留,不改写为通过。 - 旧 int32/int64/FP64 weights 各做修改前后对照,均导入小写目标,并在旧 RaggedBincountVerify(math_ops.cc:393)相同 dtype 校验失败。未执行到 Kernel,不计精度 PASS,也不据此宣称旧路径完整验证通过。 - GPU SSH 仍在 banner exchange 超时,本轮 TF 用例仅与真实 TensorFlow CPU 参考比较,尚无 GPU 三方结果;此前 GPU 测试不转记到新输入。其他失败和未覆盖范围原样保留。 - 最终构建/测试全程使用任务内独立 CANN,实际 TF 执行使用已授权的正式 weekly20261021.01 包;构建最大 8 jobs,测试串行。pre-commit、3 文件增量 OAT 与本次增量 diff 检查通过。新增修复独立提交,rebase 后完整 binary/mode diff 与 rebase 前一致;本次没有套用旧提交的完整本地 CI 通过结论。 以下保留 2026-10-25 CSV 整理阶段及此前的验证记录,不代表当前提交已通过完整本地或线上 CI。 2026-10-25 CSV 阶段 HEAD:e1fdc59e35e6ee35f9d77ec5faf69551299e0500。CSV 精简前 HEAD:7005de3cdf0406df39345ec5d8c472a90500a1a2;两者之间仅有 CSV 改动。 - 本次检查:3 个 CSV 共 49 条记录完成结构检查;TTK --validate --pc=1 分模式解析共 67 valid / 0 invalid(SquareSumAll 的 18 条分别按 Kernel/GEIR 解析)。检查列数、用例名唯一性、shape 上限和手工数据依赖,git diff --check 通过。 - 按本次任务要求不重跑完整本地 CI,本次未新增 Math NPU 批次。当前提交推送后触发线上 CI,结果以该提交对应任务为准;不能将解析通过表述为实机精度通过。 - SquareSumAll 的共享 CSV 经两种模式解析确认;默认 ST 脚本按文件前缀发现 Kernel 用例,不声称合并后会自动重复执行 GEIR。 以下为 CSV 精简前的验证记录;不替代本次最终 CSV 的完整实机验收。 - 指定本地 CI 统一入口通过,受测 SHA 与下列提交一致;Ascend 950/A2 定向包、GE ABI、完整 pre-commit、全量 12 文件隔离 OAT、Markdown 链接和图样例语法检查通过。Host UT 分别 86/86、47/47,Graph UT 各 1/1;API 实际 0 条,Kernel UT 阶段未产生实际用例数,不额外计入精度覆盖。 - 首次本地 CI 暴露一条旧 UT 仍要求拒绝合法 scalar values;修正为成功并检查输出形状 [2,5],保留 rank 3 等非法输入拒绝测试。原 85/86 失败日志保留;修改后完整入口重新通过。该次补改只涉及算子自己的 UT。 - GPU 已恢复,使用未修改 TTK 官方 master 5bc080fe42c25b2a11654e514de10ac08771cb02、Promote、cross_check L1、显式 --pc=1:19 条冻结历史输入 17 PASS / 2 FAIL,新增 7 条相消排列/符号回归 7/7 PASS。两条 FAIL 中 GPU 为 Inf,NPU 分别为 1.0 和 1.0000001192092896,等于 FP64 参考的正确 FP32 舍入;框架特殊值分支要求 FP32 与未舍入 FP64 精确相等,仍报 NaN/Inf mismatch。未改比较器、阈值或 FAIL 记录,未重新启用已关闭的 TTK PR483。 - 正式 weekly20261021.01 Toolkit+950-ops 安装上部署当前生产源码对应的 custom_math 包,14/14 GEIR、静态/动态共 28/28 路径通过,包含原先失败的两条 int64 标量和未知 rank。此组无 LD_PRELOAD、无 V1 跳过、无安装库改写;真实进程加载路径全部来自新周包。另两条只记录的诊断四路径通过:V1 调用正常返回,V2 查询选中 custom_math 原生推导;不把查询次数当作调用次数。 - 保留旧 weekly20260923.01 包直接 GEIR 10/12、两条 V1 干扰失败的历史记录;新正式周包集成结果不是 canndev 源码整包构建,也不回写旧版本为通过。 - 受影响生产、Golden 和样例文件与既有实测源码一致:大元数据仅编译测试 5/5 BINARY_MATCH(原主线 4/5 Tiling 异常);release Kernel 新相消 7/7、常规 20/20、精度边界 48/48;确定性 GEIR 3 条各 3 次精度/MD5 通过;仓库入口构建运行图样例、独立核对 FP32 [2,4] 的 8 个值全部正确。超大元数据组不分配超大张量、不执行 Kernel。 - 任务内独立 CANN_Master/CANN_Revise 保留,新周包另装在任务内独立目录;构建最多 8 jobs,测试和两个仓库串行。未将 A2 构建和 Host UT 表述为 A2/A3 实机测试;TF 插件编译通过,TF 端到端未执行。Kernel 确定性选项的框架 number/string 序列化缺口仍保留。 - 通用部署脚本的 SUCCESS 文本/inc 目录误判原日志保留;实际包载荷哈希、逐文件 include 检查和执行分别核验,没有改公共脚本或虚造目录。 CSV精简前本地CI受测提交:7005de3cdf0406df39345ec5d8c472a90500a1a2 主线基点:584b2ea6cbaeba684a51a74296d82d4d50ab3b0f。已按单提交、完整 diff/tree 不变检查、最新主线 rebase 顺序整理,本地 CI 验证对应上述 CSV 精简前的提交,本次新增 CSV 提交未重跑完整本地 CI。 此前 2026-10-25 本地 CI 复验(CSV 精简前): 按指定统一入口串行复验,Ascend 950/A2定向构建及本地CI均通过;Host UT分别86/86、47/47,Graph UT两平台各1/1,API实际均为0条。完整pre-commit、隔离OAT、链接及样例静态检查通过;Kernel UT阶段未产生实际用例计数,不额外计入数值覆盖。该轮仅整理提交并rebase,无新增算子或文档修改,未重复运行NPU三方测试。 CSV精简前的CI受测提交:7005de3cdf0406df39345ec5d8c472a90500a1a2;官方master快照:584b2ea6cbaeba684a51a74296d82d4d50ab3b0f。保留原始提交、完整diff/tree核验记录及未跟踪日志;rebase前后目标算子内容一致。线上CI状态单独记录,不以本地通过代替线上通过。 ## 文档更新 局部更新README参数与约束;调用说明保留GE图模式的真实示例和算子IR入口,移除TF适配源码及内部转换说明,不增加环境安装或构建说明。 ## 类型标签 - [x] Bug修复 - [ ] 新特性 - [ ] 性能优化 - [x] 文档更新 - [ ] 其他 ## AI/Agent生成声明 - [x] AI辅助编写 See merge request: cann/ops-math!6648 | 23 days ago | |
fix(ragged_bin_count): fix weighted accuracy and validate GE splits Co-authored-by: raoliang_sac<raoliang4@huawei.com> # message auto-generated for no-merge-commit merge: !7037 merge fix/ragged-bin-count-august-regression into master fix(ragged_bin_count): fix weighted accuracy and validate GE splits Created-by: raoliang_sac Commit-by: raoliang_sac Merged-by: cann-robot Description: ## 描述 RaggedBinCount 的长加权输入在默认模式下使用 FP32 原子累加,舍入误差会超过混合容差标准。在官方 master c47568d3b5d22b1570bfbaad40dc63681ff5ca30 上,8 月测试记录中的 11 条失败用例使用原冻结输入全部复现。 - 非二值且带权重、values 元素数大于 256,且 direct/partials/integer-histogram 至少一条有界实现可用时,复用现有高精度累加路径;超出覆盖范围的默认模式保留原 ROW/VALUE 映射,避免逐 bin 重扫行。 - 在 GE 早期 verifier 中拒绝已知长度为 0 或 1 的 splits,避免零行输出在图通路绕过下游校验;原 L2_exc_constraint_030 已用实际 GEIR 对照确认修复。 - 将整数直方图 workspace 上限扩展到 1 GiB,使本批宽输出可使用现有整数累加实现;原 L1_259 所需用户直方图为 739,458,048 字节,上限仍有界。 - 更新路由及 workspace UT;在现有 kernel ST CSV 中补充两条约 26 万元素的回归,覆盖两种索引 dtype。 ## 关联的Issue https://gitcode.com/cann/ops-math/issues/4422 ## 测试 - Ascend950PR_9579;任务内独立 Master/Revise CANN,定向构建并核对部署内容与实际 binary 来源。 - TTK 5bc080fe42c25b2a11654e514de10ac08771cb02,全部执行显式 --pc=1;沿用原仓内 golden 和 mixed 精度标准,输入 SHA256 与原失败记录一致。 - 原失败 11 条:主线 mixed 11/11 FAIL,修复后 mixed 11/11 PASS;真实 A100 三方对照 11/11 PASS。 - 同输入性能:GPU 采用仓内 PyTorch eager 组合标杆,按交付口径 GPU_us / NPU_us * 1555 / 1400 折算,11 条最低值 0.786211,全部达到本次要求的 0.1。额外 3 条稀疏大输出真实 GPU 三方与性能边界均通过,最低折合 0.854664。 - Ascend 950 Host UT 92/92 PASS;新增有界路由 20/20 编译分支命中,覆盖恰好 1 GiB、单行与多行超界回退,显式确定性语义保持。Graph UT 3/3 PASS,通过真实 OperatorFactory/VerifyAllAttr 调用;旧注册对象 red 对照按预期失败,修复后通过。 - 仓内 kernel ST 20/20 PASS,包括新增两条回归;主线最小 ROW 用例先失败、修复后通过。 - 仓内 GEIR 静态、动态 ST 13/13 PASS,两条模式分别检查通过;原 4 条 nan 形状在 CSV 解析阶段失败,4 条错误的预期输出描述被 GE 正常推导;splits=0/1 在修复后均从实际 verifier 拒绝,不将原 ACLNN 错误码预期等同于 GEIR 验证通过。指定统一入口本地 CI 已通过,受测 SHA 58054666b6d248a8246dac86ac0b5536a761232d,官方 master 快照 c47568d3b5d22b1570bfbaad40dc63681ff5ca30;950 Host/Graph 为 92/3,910b 为 51/3,实际 UT 共 149 条(OpAPI/Kernel 的 0 用例不计入)。pre-commit、完整文件列表隔离 OAT、双 SOC 定向 package/UT 及实际依赖门禁均通过。 - 最终受测 SHA 已同步 PR;[compile 评论197755522](https://gitcode.com/cann/ops-math/merge_requests/7037#note_197755522) 已回查,对应[线上 run6502](https://gitcode.com/cann/ops-math/actions/runs/8946107c692649b993cd42f145e18490) 已全部通过,54 个任务节点 COMPLETED,PR HEAD 与本地 CI 受测 SHA 一致。 ## 文档更新 无。 ## 类型标签 - [x] Bug修复 - [ ] 新特性 - [ ] 性能优化 - [ ] 文档更新 - [ ] 其他,请描述: See merge request: cann/ops-math!7037 | 16 days ago | |
fix(ragged_bin_count): fix weighted accuracy and validate GE splits Co-authored-by: raoliang_sac<raoliang4@huawei.com> # message auto-generated for no-merge-commit merge: !7037 merge fix/ragged-bin-count-august-regression into master fix(ragged_bin_count): fix weighted accuracy and validate GE splits Created-by: raoliang_sac Commit-by: raoliang_sac Merged-by: cann-robot Description: ## 描述 RaggedBinCount 的长加权输入在默认模式下使用 FP32 原子累加,舍入误差会超过混合容差标准。在官方 master c47568d3b5d22b1570bfbaad40dc63681ff5ca30 上,8 月测试记录中的 11 条失败用例使用原冻结输入全部复现。 - 非二值且带权重、values 元素数大于 256,且 direct/partials/integer-histogram 至少一条有界实现可用时,复用现有高精度累加路径;超出覆盖范围的默认模式保留原 ROW/VALUE 映射,避免逐 bin 重扫行。 - 在 GE 早期 verifier 中拒绝已知长度为 0 或 1 的 splits,避免零行输出在图通路绕过下游校验;原 L2_exc_constraint_030 已用实际 GEIR 对照确认修复。 - 将整数直方图 workspace 上限扩展到 1 GiB,使本批宽输出可使用现有整数累加实现;原 L1_259 所需用户直方图为 739,458,048 字节,上限仍有界。 - 更新路由及 workspace UT;在现有 kernel ST CSV 中补充两条约 26 万元素的回归,覆盖两种索引 dtype。 ## 关联的Issue https://gitcode.com/cann/ops-math/issues/4422 ## 测试 - Ascend950PR_9579;任务内独立 Master/Revise CANN,定向构建并核对部署内容与实际 binary 来源。 - TTK 5bc080fe42c25b2a11654e514de10ac08771cb02,全部执行显式 --pc=1;沿用原仓内 golden 和 mixed 精度标准,输入 SHA256 与原失败记录一致。 - 原失败 11 条:主线 mixed 11/11 FAIL,修复后 mixed 11/11 PASS;真实 A100 三方对照 11/11 PASS。 - 同输入性能:GPU 采用仓内 PyTorch eager 组合标杆,按交付口径 GPU_us / NPU_us * 1555 / 1400 折算,11 条最低值 0.786211,全部达到本次要求的 0.1。额外 3 条稀疏大输出真实 GPU 三方与性能边界均通过,最低折合 0.854664。 - Ascend 950 Host UT 92/92 PASS;新增有界路由 20/20 编译分支命中,覆盖恰好 1 GiB、单行与多行超界回退,显式确定性语义保持。Graph UT 3/3 PASS,通过真实 OperatorFactory/VerifyAllAttr 调用;旧注册对象 red 对照按预期失败,修复后通过。 - 仓内 kernel ST 20/20 PASS,包括新增两条回归;主线最小 ROW 用例先失败、修复后通过。 - 仓内 GEIR 静态、动态 ST 13/13 PASS,两条模式分别检查通过;原 4 条 nan 形状在 CSV 解析阶段失败,4 条错误的预期输出描述被 GE 正常推导;splits=0/1 在修复后均从实际 verifier 拒绝,不将原 ACLNN 错误码预期等同于 GEIR 验证通过。指定统一入口本地 CI 已通过,受测 SHA 58054666b6d248a8246dac86ac0b5536a761232d,官方 master 快照 c47568d3b5d22b1570bfbaad40dc63681ff5ca30;950 Host/Graph 为 92/3,910b 为 51/3,实际 UT 共 149 条(OpAPI/Kernel 的 0 用例不计入)。pre-commit、完整文件列表隔离 OAT、双 SOC 定向 package/UT 及实际依赖门禁均通过。 - 最终受测 SHA 已同步 PR;[compile 评论197755522](https://gitcode.com/cann/ops-math/merge_requests/7037#note_197755522) 已回查,对应[线上 run6502](https://gitcode.com/cann/ops-math/actions/runs/8946107c692649b993cd42f145e18490) 已全部通过,54 个任务节点 COMPLETED,PR HEAD 与本地 CI 受测 SHA 一致。 ## 文档更新 无。 ## 类型标签 - [x] Bug修复 - [ ] 新特性 - [ ] 性能优化 - [ ] 文档更新 - [ ] 其他,请描述: See merge request: cann/ops-math!7037 | 16 days ago | |
fix(ragged_bin_count): fix weighted accuracy and validate GE splits Co-authored-by: raoliang_sac<raoliang4@huawei.com> # message auto-generated for no-merge-commit merge: !7037 merge fix/ragged-bin-count-august-regression into master fix(ragged_bin_count): fix weighted accuracy and validate GE splits Created-by: raoliang_sac Commit-by: raoliang_sac Merged-by: cann-robot Description: ## 描述 RaggedBinCount 的长加权输入在默认模式下使用 FP32 原子累加,舍入误差会超过混合容差标准。在官方 master c47568d3b5d22b1570bfbaad40dc63681ff5ca30 上,8 月测试记录中的 11 条失败用例使用原冻结输入全部复现。 - 非二值且带权重、values 元素数大于 256,且 direct/partials/integer-histogram 至少一条有界实现可用时,复用现有高精度累加路径;超出覆盖范围的默认模式保留原 ROW/VALUE 映射,避免逐 bin 重扫行。 - 在 GE 早期 verifier 中拒绝已知长度为 0 或 1 的 splits,避免零行输出在图通路绕过下游校验;原 L2_exc_constraint_030 已用实际 GEIR 对照确认修复。 - 将整数直方图 workspace 上限扩展到 1 GiB,使本批宽输出可使用现有整数累加实现;原 L1_259 所需用户直方图为 739,458,048 字节,上限仍有界。 - 更新路由及 workspace UT;在现有 kernel ST CSV 中补充两条约 26 万元素的回归,覆盖两种索引 dtype。 ## 关联的Issue https://gitcode.com/cann/ops-math/issues/4422 ## 测试 - Ascend950PR_9579;任务内独立 Master/Revise CANN,定向构建并核对部署内容与实际 binary 来源。 - TTK 5bc080fe42c25b2a11654e514de10ac08771cb02,全部执行显式 --pc=1;沿用原仓内 golden 和 mixed 精度标准,输入 SHA256 与原失败记录一致。 - 原失败 11 条:主线 mixed 11/11 FAIL,修复后 mixed 11/11 PASS;真实 A100 三方对照 11/11 PASS。 - 同输入性能:GPU 采用仓内 PyTorch eager 组合标杆,按交付口径 GPU_us / NPU_us * 1555 / 1400 折算,11 条最低值 0.786211,全部达到本次要求的 0.1。额外 3 条稀疏大输出真实 GPU 三方与性能边界均通过,最低折合 0.854664。 - Ascend 950 Host UT 92/92 PASS;新增有界路由 20/20 编译分支命中,覆盖恰好 1 GiB、单行与多行超界回退,显式确定性语义保持。Graph UT 3/3 PASS,通过真实 OperatorFactory/VerifyAllAttr 调用;旧注册对象 red 对照按预期失败,修复后通过。 - 仓内 kernel ST 20/20 PASS,包括新增两条回归;主线最小 ROW 用例先失败、修复后通过。 - 仓内 GEIR 静态、动态 ST 13/13 PASS,两条模式分别检查通过;原 4 条 nan 形状在 CSV 解析阶段失败,4 条错误的预期输出描述被 GE 正常推导;splits=0/1 在修复后均从实际 verifier 拒绝,不将原 ACLNN 错误码预期等同于 GEIR 验证通过。指定统一入口本地 CI 已通过,受测 SHA 58054666b6d248a8246dac86ac0b5536a761232d,官方 master 快照 c47568d3b5d22b1570bfbaad40dc63681ff5ca30;950 Host/Graph 为 92/3,910b 为 51/3,实际 UT 共 149 条(OpAPI/Kernel 的 0 用例不计入)。pre-commit、完整文件列表隔离 OAT、双 SOC 定向 package/UT 及实际依赖门禁均通过。 - 最终受测 SHA 已同步 PR;[compile 评论197755522](https://gitcode.com/cann/ops-math/merge_requests/7037#note_197755522) 已回查,对应[线上 run6502](https://gitcode.com/cann/ops-math/actions/runs/8946107c692649b993cd42f145e18490) 已全部通过,54 个任务节点 COMPLETED,PR HEAD 与本地 CI 受测 SHA 一致。 ## 文档更新 无。 ## 类型标签 - [x] Bug修复 - [ ] 新特性 - [ ] 性能优化 - [ ] 文档更新 - [ ] 其他,请描述: See merge request: cann/ops-math!7037 | 16 days ago | |
fix(ragged_bin_count): bound promoted golden memory usage Co-authored-by: raoliang_sac<raoliang4@huawei.com> # message auto-generated for no-merge-commit merge: !7059 merge fix/ragged-bin-count-remaining-issues into master fix(ragged_bin_count): bound promoted golden memory usage Created-by: raoliang_sac Commit-by: raoliang_sac Merged-by: cann-robot Description: ## 描述 RaggedBinCount 的 Promote golden 在大规模混合符号权重上先用 Tensor.unbind() 物化逐元素标量 Tensor,再执行 Python/Torch 标量求和,导致 CPU 内存膨胀和超时。基于合入 #7037 后的主线,原 L0_006 的 40,306,591 项输入已复现该问题。 残差恢复改用 math.fsum 消费 NumPy 视图,结果保持原 Torch dtype/device。稠密 bin 用计数枚举有输入的 bin,避免为找出占用 bin 而排序整个大索引向量;稀疏输出保留原枚举路径。占用判断使用输入计数,能保留原生加权和为零时的小残差。非有限值处理和精度标准保持一致。 - 新增 CPU 数学语义及 Python 堆资源回归,覆盖抵消、小残差、排列、FP32 极值、非有限值、dtype、稠密/稀疏 bin。 - kernel ST 的 257 元素用例重命名为 accurate,保持20条及全部输入参数。 - Host UT 将64字节partial槽提取为具名独立期望,补充两条非法size长度的拒绝验证。 ## 关联的Issue https://gitcode.com/cann/ops-math/issues/4435 ## 测试 - 最终单提交 ab1c966af3eca9fd168b847d15573e8e54b97fd4,rebase 到本次从官方目标仓获取的 master b58f9e3cfb3e424bba1bab657eecc4f7828cc35a;整理前完整 binary/mode diff 及 tree 一致,受测文件哈希保持一致。 - 本任务双独立CANN、TTK 5bc080fe42c25b2a11654e514de10ac08771cb02,全部TTK显式 --pc=1。 - 10条合法遗留大输入用例:最终golden、实际NPU mixed比较全部PASS且BINARY_MATCH;输入已冻结。2条size形状不符合 [1],由元数据UT验证主线正确拒绝,不计精度通过。 - 相同4M冻结输入及30秒阶段超时:旧插件在OnGenGolden超时(PROFILE_CRASH),最终实现完成实际TTK比较PASS/BINARY_MATCH,无外部保护中止。 - 同一公开golden资源UT在真实旧插件red失败:额外Python堆峰值5,769,724字节,超过1MiB预算;新实现最高2,357字节。新21项加原8项CPU测试共29/29 PASS,无计时阈值或Tensor API mock。 - 指定统一入口950/910b本地CI PASS,含完整pre-commit、隔离OAT、package/依赖门禁、149项实际C++ UT及21项Python回归;OpAPI/Kernel零用例不计入UT数量。 - kernel ST20/20、上一轮11条冻结输入精度失败回归11/11全部PASS,使用本次golden重新生成参考。1GiB histogram边界已实际分配执行PASS。 - GEIR静态13/13、动态13/13全部PASS,每个输出mixed指标均通过。 - NPU生产Host/Graph/Kernel源码未修改,两份数值binary与主线逐字节一致,GPU provider AST不变。本次未新增GPU性能测量,不沿用旧测量冒充新结果。 ## 文档更新 无产品文档修改。 ## 类型标签 - [x] Bug修复 - [ ] 新特性 - [ ] 性能优化 - [ ] 文档更新 - [ ] 其他,请描述: 线上[run6564](https://gitcode.com/cann/ops-math/actions/runs/0b3f0b6bd3fe443daf997443a4691498)全部通过,54个任务节点COMPLETED;通过[compile评论197943177](https://gitcode.com/cann/ops-math/merge_requests/7059#note_197943177)触发。三路UT实际checkout a1b1ff6250,其父提交为b58f9e3c与受测HEAD ab1c966a,已逐路核对。 <!-- RBC_ROUND4_20261105_BEGIN --> ### 2026-11-05 第四轮全范围复测:保留资源跳过及旧包环境结果 按第三轮完整630条清单对当前golden进行两方及实际A100三方复测。591条正向中589条输入合法,另外2条size形状非法,仅做元数据拒绝验证;39条异常单独判定,不混入精度通过数。 - 两方:552条PASS/BINARY_MATCH,37条因共享主机内存不足或不稳定未完成。 - 三方:304条PASS/BINARY_MATCH,284条受共享主机内存限制,1条保留实际GPU OOM结果。PASS均有实际GPU provider和cross_check记录,未使用手工GPU输出。 - 异常:6条观察到GE拒绝/框架错误(没有以此冒充原CSV的ACLNN错误码验证),3条Golden Disable下SKIP、4条nan形状CSV解析失败、1条旧CANN环境GEIR SIGSEGV、25条资源未完成。不称全量通过。 - 第三轮14条合法内存暂缓例及L1_268共15条,两方原规模全部通过,其中8条已完成实际三方。L1_268同一冻结输入,旧CPU golden实际300.001秒超时,当前golden179.697秒完成,均无外部保护中止;该例两方及GPU三方均通过。 - 全部通过记录逐条审计原始shape/dtype/format/属性、实际命令和binary来源;6296份数据文件完成SHA256归档,三方与两方1520对输入/FP64参考文件逐字节一致。没有冻结现场输入的用例按原CSV/seed42重新生成,不声称与第三轮已删除输入字节相同。 本轮本地受测HEAD为53c1b70e39e9845ff573734ba3a7df50c2b5c575,基于本次从官方master获取的快照c7ce8d1bcbea4708d120cd682f854760fd2046f7;单提交、备份、squash前后完整diff/tree一致以及rebase后变更文件哈希均已核验。Golden仍为df265b77430776cc1a1eb14206a3660c01dc3e64302cd9f579722d5c2507f9b9,TTK为5bc080fe42c25b2a11654e514de10ac08771cb02,全部显式--pc=1。本轮没有新增NPU生产源码修改,未新增性能测量。 指定统一入口本地CI以jobs=1请求950/910b:pre-commit、隔离OAT、链接和21项Python测试通过,但950编包期间被共享内存保护中止,任务自身PSS峰值633669632B(约604MiB);950构建未完成、910b未执行。完整CI不计通过,53c1b70e未推送,PR远端仍为ab1c966a,未触发新线上CI。前文ab1c966a的本地/线上通过保持原受测版本,不能代替这次CI。 029的实际原生返回值为-11,GDB定位于安装的20260923 CANN周包built-in libopsproto.so旧V1图推导,调用链CallInferFuncV1 → InferShapePass → GraphPrepare,尚未进入NPU kernel。TTK因子进程管道未退出表现为120秒超时。排除历史custom_math V1 fallback后仍复现,SDK配置已逐字节恢复。该记录归为旧包环境失败,不据此认定当前算子源码仍有V1或需要重复修复。 用户指出历史合入后,已重新核对:[PR #6538](https://gitcode.com/cann/ops-math/pull/6538)于2026-10-23合入efff352365576558b32dff8d3225e55b8ccc687b,删除原生V1 shape实现及注册;本次新取官方master 91e127092ca1d239b61eb56a0520117466040ebf仍包含该修复,仅有V2 shape注册。canndev最新源码的RaggedBinCount V1/Verify及legacy V2注册均有TILING_REG_FLAG隔离;PR82602未重复修改RaggedBinCount的原因正是主线已经隔离,不能将“排除本次范围”理解为尚未修复。早期综合[Issue #3697](https://gitcode.com/cann/ops-math/issues/3697)仍open,不代表本项源码修复未合入。另已找到20261028产品包及其其他算子的CI记录,但本任务尚未切换包复测029,仍保留该验证边界;没有把旧包崩溃改记为新包通过。 评审关于bincount超大/负索引的意见已分析:公开golden入口先处理负值、过滤超界值后才调用私有计数辅助函数;6项带保护探针通过,无需重复增加过滤。 完整记录已归档到用户指定第四轮目录的8月/RaggedBinCount:测试记录.md、逐例结果.csv、state.json、accepted_artifact_sha256.json及executions/。任务专用GPU服务和隧道已关闭;其他任务进程未管理。 <!-- RBC_ROUND4_20261105_END --> See merge request: cann/ops-math!7059 | 13 days ago | |
fix: 修复 RaggedBinCount 边界、TF 标量适配和 Golden,精简 ST 用例 Co-authored-by: raoliang_sac<raoliang4@huawei.com> # message auto-generated for no-merge-commit merge: !6648 merge fix/august-scan-followup-20261023 into master fix: 修复 RaggedBinCount 边界、TF 标量适配和 Golden,精简 ST 用例 Created-by: raoliang_sac Commit-by: raoliang_sac Merged-by: cann-robot Description: ## 描述 修复 RaggedBinCount 在 Ascend 950 上的三处问题:私有直方图容量/流量计算在大元数据下溢出导致 Tiling 进程异常;合法标量 values 被 V2 InferShape 和 Tiling 拒绝;TensorFlow 源算子注册名误写为 RaggedBinCount,实际名称应为 RaggedBincount。 TF 标量 size 适配补齐:在保留标准源名 RaggedBincount 的基础上,设置 original_type 并通过图展开插入真实 Reshape,将 FP32 weights 路径的标量 size 转为原生要求的 [1],保持 int32/int64 的值依赖。整数与 FP64 weights 保留小写旧目标,不强制转 FP32。新增 4 条框架 UT,通过 RaggedBinCount 自己的 CMake 接入;未改公共 CMake、Kernel 或原生 size 接口。实际测试确认仅修正名称会在 GE 推导失败,适配后标准 TF GraphDef 可执行至 NPU。 Golden 的单 FP64 累加器会把 [2^100, 1, -2^100] 算成 0。为有限、异号的 Promote 输入使用 Torch 残差部分和,保留框架传入的 dtype 和非有限数语义;不根据用例名称选择计算方法。补充相消、标量图模式及仅编译的大元数据回归。 删除图模式样例中无用的 experiment_ops.h 依赖,把样例的 size 建成 Const 并显式设置输入描述,避免图编译读不到分箱数后错误恢复空 weights 形状;修正 dtype 错误日志。README同步标量范围,按现行要求移除产品差异表,调用说明保留GE图模式示例和算子IR入口。生产代码、Golden、样例和文档变更位于 math/ragged_bin_count;SquareSumAll 仅整理 ST CSV。未修改公共代码、Kernel 或 TTK 框架。 此前 CSV 整理阶段仅整理代码仓 arch35 ST CSV:RaggedBinCount 150→31 条(18 条 Kernel、13 条 GEIR),7 个 CSV 合并为 2 个,两个模式因表头不同分开;SquareSumAll 1200→18 条,两种模式共用一个表头一致的 CSV,保留 ttk_kernel_ 文件名以适配现有流水线发现规则。保留分块边界、标量、空输入、dtype、布局和数值回归代表;单个输入最多 8193 个元素。生成脚本及其他测例仓不改,Ragged 的 5 条仅编译元数据 UT 不在本次 ST 精简范围。 ## 关联的Issue https://gitcode.com/cann/ops-math/issues/3861 ## 测试 2026-10-27最终文档修复后的完整本地CI:**PASS**。受测提交d663e469efc3f3fc5c2db4f20cadcf4bed399217,官方master快照062cd425274de90c33afb82df32ae03049cb4881。 - README调用说明移除TF适配源码及节点/shape转换说明,保留GE图模式的真实示例和算子IR入口。仅删除该行5行HTML;产品、原生参数约束、生产代码、CSV及示例均未改变。用户指定的文档指引文件未修改。 - 两个相对链接、表格渲染、diff及文档检查通过;GE示例和TF插件源码哈希匹配此前实测版本,未重复运行NPU/GPU测试,也不把历史运行记为本次新上板结果。 - 指定本地CI统一入口串行覆盖950/A2:Host UT分别132/132、61/61,Graph UT各1/1;两平台定向package、GE依赖、完整pre-commit、15个现存变更文件隔离OAT、文档链接、Golden语法、示例语法及SKIP契约通过。API实际0条,Kernel UT阶段无实际用例计数,均不计数值覆盖。 - squash前后同原基点完整binary/mode diff及Git tree一致,再rebase到上述官方master;rebase后完整PR diff及19个文件状态一致。最终只有一个提交。线上CI针对该受测SHA单独触发,不与本地PASS混用。 以下保留此前阶段验证记录: 2026-10-26 TF 适配增量后的完整本地 CI:**PASS**。受测提交 f0b96ef53c7f1e8bc64a72bb7dfe0a80e5b01c56,本轮官方 master 快照 73b55be428c754e9b2e2fe32cf5da1cd379d8aef。使用指定 /workspace/CI-skills/ci_local_check.sh,按 PR 全部变更识别 RaggedBinCount、SquareSumAll,950/A2 串行定向构建,最大 8 jobs。 - 950 Host UT 132/132、A2 Host UT 61/61;Graph UT 各 1/1。API 实际均 0 条;Kernel UT 阶段未产生实际用例计数,不计数值覆盖。 - 两平台定向 package、生产库/Host UT 的 GE 依赖检查通过;完整 pre-commit、15 个现存变更文件的隔离 OAT、Markdown 链接、Golden Python 语法、图样例语法及 SKIP 退出契约检查通过。 - 原三个提交先 squash 为一个,同原始基点的完整 binary/mode diff 与 Git tree 不变,再 rebase 本轮官方 master;rebase 后全部 PR 文件内容及完整 PR diff 也未变化。没有为 CI 新增生产代码修改。 - 本轮未追加 NPU/GPU 算子测试。此前 TF/GEIR 回归保留原受测版本和同源码证明;GPU SSH 与小规模 CUDA 运算现已恢复,按本次 TF 形状适配范围不把额外三方作为阻塞。线上 CI 单独触发和记录,不能把本地通过称为线上通过。 以下为本次 CI 前的原验证记录: TF 定向回归时 HEAD:32002c41ad100500bc715663db5789c209f63ded;本轮 fetch 的官方 master:6a71e83e286cca85c0098543e72c6bf0eaed2f9b。此次按用户要求只做必要回归,不重跑完整本地 CI。 - 最终提交重新构建 RaggedBinCount Host UT:90/90 PASS,含新增 TF 图转换 UT 4 条。真实 size 连接、OriginShape、int32/int64、binary、旧 dtype 路由和非法属性均覆盖;Issue6 大形状只检查元数据,不分配大张量。 - 真实 TensorFlow GraphDef 经官方 CANN parser 导入后,5 个小用例在 Ascend 950 执行成功:4 个非空输出与 TensorFlow CPU 参考逐字节一致;size=0 检查空输出 shape/dtype,不能计为有效数值覆盖。涵盖 int32/int64、不同 rank 同元素数 weights、空 weights、binary;values 最多 6 个元素。 - 仓库正式 optf_plugin_math 目标构建通过;最终插件放入任务内 vendor/framework 自动加载,未显式 dlopen、未 LD_PRELOAD,标准 TF 标量 size 经 Reshape 进入大写 RaggedBinCount,输出 [2,4] 全值正确。测试后移除临时部署插件。 - 原版本标量 size 失败已实际复现;负 size 和多元素 size 各 1 条正确拒绝。原生 size=[1] 的 TTK GEIR 6 例、静态/动态 12 路径 PASS,显式 --pc=1,TTK 固定 5bc080fe。首轮内存压力下的超时记录保留,不改写为通过。 - 旧 int32/int64/FP64 weights 各做修改前后对照,均导入小写目标,并在旧 RaggedBincountVerify(math_ops.cc:393)相同 dtype 校验失败。未执行到 Kernel,不计精度 PASS,也不据此宣称旧路径完整验证通过。 - GPU SSH 仍在 banner exchange 超时,本轮 TF 用例仅与真实 TensorFlow CPU 参考比较,尚无 GPU 三方结果;此前 GPU 测试不转记到新输入。其他失败和未覆盖范围原样保留。 - 最终构建/测试全程使用任务内独立 CANN,实际 TF 执行使用已授权的正式 weekly20261021.01 包;构建最大 8 jobs,测试串行。pre-commit、3 文件增量 OAT 与本次增量 diff 检查通过。新增修复独立提交,rebase 后完整 binary/mode diff 与 rebase 前一致;本次没有套用旧提交的完整本地 CI 通过结论。 以下保留 2026-10-25 CSV 整理阶段及此前的验证记录,不代表当前提交已通过完整本地或线上 CI。 2026-10-25 CSV 阶段 HEAD:e1fdc59e35e6ee35f9d77ec5faf69551299e0500。CSV 精简前 HEAD:7005de3cdf0406df39345ec5d8c472a90500a1a2;两者之间仅有 CSV 改动。 - 本次检查:3 个 CSV 共 49 条记录完成结构检查;TTK --validate --pc=1 分模式解析共 67 valid / 0 invalid(SquareSumAll 的 18 条分别按 Kernel/GEIR 解析)。检查列数、用例名唯一性、shape 上限和手工数据依赖,git diff --check 通过。 - 按本次任务要求不重跑完整本地 CI,本次未新增 Math NPU 批次。当前提交推送后触发线上 CI,结果以该提交对应任务为准;不能将解析通过表述为实机精度通过。 - SquareSumAll 的共享 CSV 经两种模式解析确认;默认 ST 脚本按文件前缀发现 Kernel 用例,不声称合并后会自动重复执行 GEIR。 以下为 CSV 精简前的验证记录;不替代本次最终 CSV 的完整实机验收。 - 指定本地 CI 统一入口通过,受测 SHA 与下列提交一致;Ascend 950/A2 定向包、GE ABI、完整 pre-commit、全量 12 文件隔离 OAT、Markdown 链接和图样例语法检查通过。Host UT 分别 86/86、47/47,Graph UT 各 1/1;API 实际 0 条,Kernel UT 阶段未产生实际用例数,不额外计入精度覆盖。 - 首次本地 CI 暴露一条旧 UT 仍要求拒绝合法 scalar values;修正为成功并检查输出形状 [2,5],保留 rank 3 等非法输入拒绝测试。原 85/86 失败日志保留;修改后完整入口重新通过。该次补改只涉及算子自己的 UT。 - GPU 已恢复,使用未修改 TTK 官方 master 5bc080fe42c25b2a11654e514de10ac08771cb02、Promote、cross_check L1、显式 --pc=1:19 条冻结历史输入 17 PASS / 2 FAIL,新增 7 条相消排列/符号回归 7/7 PASS。两条 FAIL 中 GPU 为 Inf,NPU 分别为 1.0 和 1.0000001192092896,等于 FP64 参考的正确 FP32 舍入;框架特殊值分支要求 FP32 与未舍入 FP64 精确相等,仍报 NaN/Inf mismatch。未改比较器、阈值或 FAIL 记录,未重新启用已关闭的 TTK PR483。 - 正式 weekly20261021.01 Toolkit+950-ops 安装上部署当前生产源码对应的 custom_math 包,14/14 GEIR、静态/动态共 28/28 路径通过,包含原先失败的两条 int64 标量和未知 rank。此组无 LD_PRELOAD、无 V1 跳过、无安装库改写;真实进程加载路径全部来自新周包。另两条只记录的诊断四路径通过:V1 调用正常返回,V2 查询选中 custom_math 原生推导;不把查询次数当作调用次数。 - 保留旧 weekly20260923.01 包直接 GEIR 10/12、两条 V1 干扰失败的历史记录;新正式周包集成结果不是 canndev 源码整包构建,也不回写旧版本为通过。 - 受影响生产、Golden 和样例文件与既有实测源码一致:大元数据仅编译测试 5/5 BINARY_MATCH(原主线 4/5 Tiling 异常);release Kernel 新相消 7/7、常规 20/20、精度边界 48/48;确定性 GEIR 3 条各 3 次精度/MD5 通过;仓库入口构建运行图样例、独立核对 FP32 [2,4] 的 8 个值全部正确。超大元数据组不分配超大张量、不执行 Kernel。 - 任务内独立 CANN_Master/CANN_Revise 保留,新周包另装在任务内独立目录;构建最多 8 jobs,测试和两个仓库串行。未将 A2 构建和 Host UT 表述为 A2/A3 实机测试;TF 插件编译通过,TF 端到端未执行。Kernel 确定性选项的框架 number/string 序列化缺口仍保留。 - 通用部署脚本的 SUCCESS 文本/inc 目录误判原日志保留;实际包载荷哈希、逐文件 include 检查和执行分别核验,没有改公共脚本或虚造目录。 CSV精简前本地CI受测提交:7005de3cdf0406df39345ec5d8c472a90500a1a2 主线基点:584b2ea6cbaeba684a51a74296d82d4d50ab3b0f。已按单提交、完整 diff/tree 不变检查、最新主线 rebase 顺序整理,本地 CI 验证对应上述 CSV 精简前的提交,本次新增 CSV 提交未重跑完整本地 CI。 此前 2026-10-25 本地 CI 复验(CSV 精简前): 按指定统一入口串行复验,Ascend 950/A2定向构建及本地CI均通过;Host UT分别86/86、47/47,Graph UT两平台各1/1,API实际均为0条。完整pre-commit、隔离OAT、链接及样例静态检查通过;Kernel UT阶段未产生实际用例计数,不额外计入数值覆盖。该轮仅整理提交并rebase,无新增算子或文档修改,未重复运行NPU三方测试。 CSV精简前的CI受测提交:7005de3cdf0406df39345ec5d8c472a90500a1a2;官方master快照:584b2ea6cbaeba684a51a74296d82d4d50ab3b0f。保留原始提交、完整diff/tree核验记录及未跟踪日志;rebase前后目标算子内容一致。线上CI状态单独记录,不以本地通过代替线上通过。 ## 文档更新 局部更新README参数与约束;调用说明保留GE图模式的真实示例和算子IR入口,移除TF适配源码及内部转换说明,不增加环境安装或构建说明。 ## 类型标签 - [x] Bug修复 - [ ] 新特性 - [ ] 性能优化 - [x] 文档更新 - [ ] 其他 ## AI/Agent生成声明 - [x] AI辅助编写 See merge request: cann/ops-math!6648 | 23 days ago | |
fix: 修复 RaggedBinCount 边界、TF 标量适配和 Golden,精简 ST 用例 Co-authored-by: raoliang_sac<raoliang4@huawei.com> # message auto-generated for no-merge-commit merge: !6648 merge fix/august-scan-followup-20261023 into master fix: 修复 RaggedBinCount 边界、TF 标量适配和 Golden,精简 ST 用例 Created-by: raoliang_sac Commit-by: raoliang_sac Merged-by: cann-robot Description: ## 描述 修复 RaggedBinCount 在 Ascend 950 上的三处问题:私有直方图容量/流量计算在大元数据下溢出导致 Tiling 进程异常;合法标量 values 被 V2 InferShape 和 Tiling 拒绝;TensorFlow 源算子注册名误写为 RaggedBinCount,实际名称应为 RaggedBincount。 TF 标量 size 适配补齐:在保留标准源名 RaggedBincount 的基础上,设置 original_type 并通过图展开插入真实 Reshape,将 FP32 weights 路径的标量 size 转为原生要求的 [1],保持 int32/int64 的值依赖。整数与 FP64 weights 保留小写旧目标,不强制转 FP32。新增 4 条框架 UT,通过 RaggedBinCount 自己的 CMake 接入;未改公共 CMake、Kernel 或原生 size 接口。实际测试确认仅修正名称会在 GE 推导失败,适配后标准 TF GraphDef 可执行至 NPU。 Golden 的单 FP64 累加器会把 [2^100, 1, -2^100] 算成 0。为有限、异号的 Promote 输入使用 Torch 残差部分和,保留框架传入的 dtype 和非有限数语义;不根据用例名称选择计算方法。补充相消、标量图模式及仅编译的大元数据回归。 删除图模式样例中无用的 experiment_ops.h 依赖,把样例的 size 建成 Const 并显式设置输入描述,避免图编译读不到分箱数后错误恢复空 weights 形状;修正 dtype 错误日志。README同步标量范围,按现行要求移除产品差异表,调用说明保留GE图模式示例和算子IR入口。生产代码、Golden、样例和文档变更位于 math/ragged_bin_count;SquareSumAll 仅整理 ST CSV。未修改公共代码、Kernel 或 TTK 框架。 此前 CSV 整理阶段仅整理代码仓 arch35 ST CSV:RaggedBinCount 150→31 条(18 条 Kernel、13 条 GEIR),7 个 CSV 合并为 2 个,两个模式因表头不同分开;SquareSumAll 1200→18 条,两种模式共用一个表头一致的 CSV,保留 ttk_kernel_ 文件名以适配现有流水线发现规则。保留分块边界、标量、空输入、dtype、布局和数值回归代表;单个输入最多 8193 个元素。生成脚本及其他测例仓不改,Ragged 的 5 条仅编译元数据 UT 不在本次 ST 精简范围。 ## 关联的Issue https://gitcode.com/cann/ops-math/issues/3861 ## 测试 2026-10-27最终文档修复后的完整本地CI:**PASS**。受测提交d663e469efc3f3fc5c2db4f20cadcf4bed399217,官方master快照062cd425274de90c33afb82df32ae03049cb4881。 - README调用说明移除TF适配源码及节点/shape转换说明,保留GE图模式的真实示例和算子IR入口。仅删除该行5行HTML;产品、原生参数约束、生产代码、CSV及示例均未改变。用户指定的文档指引文件未修改。 - 两个相对链接、表格渲染、diff及文档检查通过;GE示例和TF插件源码哈希匹配此前实测版本,未重复运行NPU/GPU测试,也不把历史运行记为本次新上板结果。 - 指定本地CI统一入口串行覆盖950/A2:Host UT分别132/132、61/61,Graph UT各1/1;两平台定向package、GE依赖、完整pre-commit、15个现存变更文件隔离OAT、文档链接、Golden语法、示例语法及SKIP契约通过。API实际0条,Kernel UT阶段无实际用例计数,均不计数值覆盖。 - squash前后同原基点完整binary/mode diff及Git tree一致,再rebase到上述官方master;rebase后完整PR diff及19个文件状态一致。最终只有一个提交。线上CI针对该受测SHA单独触发,不与本地PASS混用。 以下保留此前阶段验证记录: 2026-10-26 TF 适配增量后的完整本地 CI:**PASS**。受测提交 f0b96ef53c7f1e8bc64a72bb7dfe0a80e5b01c56,本轮官方 master 快照 73b55be428c754e9b2e2fe32cf5da1cd379d8aef。使用指定 /workspace/CI-skills/ci_local_check.sh,按 PR 全部变更识别 RaggedBinCount、SquareSumAll,950/A2 串行定向构建,最大 8 jobs。 - 950 Host UT 132/132、A2 Host UT 61/61;Graph UT 各 1/1。API 实际均 0 条;Kernel UT 阶段未产生实际用例计数,不计数值覆盖。 - 两平台定向 package、生产库/Host UT 的 GE 依赖检查通过;完整 pre-commit、15 个现存变更文件的隔离 OAT、Markdown 链接、Golden Python 语法、图样例语法及 SKIP 退出契约检查通过。 - 原三个提交先 squash 为一个,同原始基点的完整 binary/mode diff 与 Git tree 不变,再 rebase 本轮官方 master;rebase 后全部 PR 文件内容及完整 PR diff 也未变化。没有为 CI 新增生产代码修改。 - 本轮未追加 NPU/GPU 算子测试。此前 TF/GEIR 回归保留原受测版本和同源码证明;GPU SSH 与小规模 CUDA 运算现已恢复,按本次 TF 形状适配范围不把额外三方作为阻塞。线上 CI 单独触发和记录,不能把本地通过称为线上通过。 以下为本次 CI 前的原验证记录: TF 定向回归时 HEAD:32002c41ad100500bc715663db5789c209f63ded;本轮 fetch 的官方 master:6a71e83e286cca85c0098543e72c6bf0eaed2f9b。此次按用户要求只做必要回归,不重跑完整本地 CI。 - 最终提交重新构建 RaggedBinCount Host UT:90/90 PASS,含新增 TF 图转换 UT 4 条。真实 size 连接、OriginShape、int32/int64、binary、旧 dtype 路由和非法属性均覆盖;Issue6 大形状只检查元数据,不分配大张量。 - 真实 TensorFlow GraphDef 经官方 CANN parser 导入后,5 个小用例在 Ascend 950 执行成功:4 个非空输出与 TensorFlow CPU 参考逐字节一致;size=0 检查空输出 shape/dtype,不能计为有效数值覆盖。涵盖 int32/int64、不同 rank 同元素数 weights、空 weights、binary;values 最多 6 个元素。 - 仓库正式 optf_plugin_math 目标构建通过;最终插件放入任务内 vendor/framework 自动加载,未显式 dlopen、未 LD_PRELOAD,标准 TF 标量 size 经 Reshape 进入大写 RaggedBinCount,输出 [2,4] 全值正确。测试后移除临时部署插件。 - 原版本标量 size 失败已实际复现;负 size 和多元素 size 各 1 条正确拒绝。原生 size=[1] 的 TTK GEIR 6 例、静态/动态 12 路径 PASS,显式 --pc=1,TTK 固定 5bc080fe。首轮内存压力下的超时记录保留,不改写为通过。 - 旧 int32/int64/FP64 weights 各做修改前后对照,均导入小写目标,并在旧 RaggedBincountVerify(math_ops.cc:393)相同 dtype 校验失败。未执行到 Kernel,不计精度 PASS,也不据此宣称旧路径完整验证通过。 - GPU SSH 仍在 banner exchange 超时,本轮 TF 用例仅与真实 TensorFlow CPU 参考比较,尚无 GPU 三方结果;此前 GPU 测试不转记到新输入。其他失败和未覆盖范围原样保留。 - 最终构建/测试全程使用任务内独立 CANN,实际 TF 执行使用已授权的正式 weekly20261021.01 包;构建最大 8 jobs,测试串行。pre-commit、3 文件增量 OAT 与本次增量 diff 检查通过。新增修复独立提交,rebase 后完整 binary/mode diff 与 rebase 前一致;本次没有套用旧提交的完整本地 CI 通过结论。 以下保留 2026-10-25 CSV 整理阶段及此前的验证记录,不代表当前提交已通过完整本地或线上 CI。 2026-10-25 CSV 阶段 HEAD:e1fdc59e35e6ee35f9d77ec5faf69551299e0500。CSV 精简前 HEAD:7005de3cdf0406df39345ec5d8c472a90500a1a2;两者之间仅有 CSV 改动。 - 本次检查:3 个 CSV 共 49 条记录完成结构检查;TTK --validate --pc=1 分模式解析共 67 valid / 0 invalid(SquareSumAll 的 18 条分别按 Kernel/GEIR 解析)。检查列数、用例名唯一性、shape 上限和手工数据依赖,git diff --check 通过。 - 按本次任务要求不重跑完整本地 CI,本次未新增 Math NPU 批次。当前提交推送后触发线上 CI,结果以该提交对应任务为准;不能将解析通过表述为实机精度通过。 - SquareSumAll 的共享 CSV 经两种模式解析确认;默认 ST 脚本按文件前缀发现 Kernel 用例,不声称合并后会自动重复执行 GEIR。 以下为 CSV 精简前的验证记录;不替代本次最终 CSV 的完整实机验收。 - 指定本地 CI 统一入口通过,受测 SHA 与下列提交一致;Ascend 950/A2 定向包、GE ABI、完整 pre-commit、全量 12 文件隔离 OAT、Markdown 链接和图样例语法检查通过。Host UT 分别 86/86、47/47,Graph UT 各 1/1;API 实际 0 条,Kernel UT 阶段未产生实际用例数,不额外计入精度覆盖。 - 首次本地 CI 暴露一条旧 UT 仍要求拒绝合法 scalar values;修正为成功并检查输出形状 [2,5],保留 rank 3 等非法输入拒绝测试。原 85/86 失败日志保留;修改后完整入口重新通过。该次补改只涉及算子自己的 UT。 - GPU 已恢复,使用未修改 TTK 官方 master 5bc080fe42c25b2a11654e514de10ac08771cb02、Promote、cross_check L1、显式 --pc=1:19 条冻结历史输入 17 PASS / 2 FAIL,新增 7 条相消排列/符号回归 7/7 PASS。两条 FAIL 中 GPU 为 Inf,NPU 分别为 1.0 和 1.0000001192092896,等于 FP64 参考的正确 FP32 舍入;框架特殊值分支要求 FP32 与未舍入 FP64 精确相等,仍报 NaN/Inf mismatch。未改比较器、阈值或 FAIL 记录,未重新启用已关闭的 TTK PR483。 - 正式 weekly20261021.01 Toolkit+950-ops 安装上部署当前生产源码对应的 custom_math 包,14/14 GEIR、静态/动态共 28/28 路径通过,包含原先失败的两条 int64 标量和未知 rank。此组无 LD_PRELOAD、无 V1 跳过、无安装库改写;真实进程加载路径全部来自新周包。另两条只记录的诊断四路径通过:V1 调用正常返回,V2 查询选中 custom_math 原生推导;不把查询次数当作调用次数。 - 保留旧 weekly20260923.01 包直接 GEIR 10/12、两条 V1 干扰失败的历史记录;新正式周包集成结果不是 canndev 源码整包构建,也不回写旧版本为通过。 - 受影响生产、Golden 和样例文件与既有实测源码一致:大元数据仅编译测试 5/5 BINARY_MATCH(原主线 4/5 Tiling 异常);release Kernel 新相消 7/7、常规 20/20、精度边界 48/48;确定性 GEIR 3 条各 3 次精度/MD5 通过;仓库入口构建运行图样例、独立核对 FP32 [2,4] 的 8 个值全部正确。超大元数据组不分配超大张量、不执行 Kernel。 - 任务内独立 CANN_Master/CANN_Revise 保留,新周包另装在任务内独立目录;构建最多 8 jobs,测试和两个仓库串行。未将 A2 构建和 Host UT 表述为 A2/A3 实机测试;TF 插件编译通过,TF 端到端未执行。Kernel 确定性选项的框架 number/string 序列化缺口仍保留。 - 通用部署脚本的 SUCCESS 文本/inc 目录误判原日志保留;实际包载荷哈希、逐文件 include 检查和执行分别核验,没有改公共脚本或虚造目录。 CSV精简前本地CI受测提交:7005de3cdf0406df39345ec5d8c472a90500a1a2 主线基点:584b2ea6cbaeba684a51a74296d82d4d50ab3b0f。已按单提交、完整 diff/tree 不变检查、最新主线 rebase 顺序整理,本地 CI 验证对应上述 CSV 精简前的提交,本次新增 CSV 提交未重跑完整本地 CI。 此前 2026-10-25 本地 CI 复验(CSV 精简前): 按指定统一入口串行复验,Ascend 950/A2定向构建及本地CI均通过;Host UT分别86/86、47/47,Graph UT两平台各1/1,API实际均为0条。完整pre-commit、隔离OAT、链接及样例静态检查通过;Kernel UT阶段未产生实际用例计数,不额外计入数值覆盖。该轮仅整理提交并rebase,无新增算子或文档修改,未重复运行NPU三方测试。 CSV精简前的CI受测提交:7005de3cdf0406df39345ec5d8c472a90500a1a2;官方master快照:584b2ea6cbaeba684a51a74296d82d4d50ab3b0f。保留原始提交、完整diff/tree核验记录及未跟踪日志;rebase前后目标算子内容一致。线上CI状态单独记录,不以本地通过代替线上通过。 ## 文档更新 局部更新README参数与约束;调用说明保留GE图模式的真实示例和算子IR入口,移除TF适配源码及内部转换说明,不增加环境安装或构建说明。 ## 类型标签 - [x] Bug修复 - [ ] 新特性 - [ ] 性能优化 - [x] 文档更新 - [ ] 其他 ## AI/Agent生成声明 - [x] AI辅助编写 See merge request: cann/ops-math!6648 | 23 days ago | |
docs: add English translations for markdown files Co-authored-by: jenny_xiang<jenny.xiang@huawei.com> # message auto-generated for no-merge-commit merge: !7113 merge docs/add-english-translations into master docs: add English translations for markdown files Created-by: jenny_xiang Commit-by: jenny_xiang Merged-by: cann-robot Description: ## 描述 新增仓库Markdown文档英文译稿(第二批,共409个文件):第一批(已合入)之外的其余全部译稿,覆盖conversion、examples、ge、math、random各类算子README译稿,以及CHANGELOG_en.md、.gitcode PR模板英文版等。 本批内全部仓内链接均指向master已有文件(含第一批已合入的21+2篇译稿),合入后本仓432篇英文文档全部就位,链接完整生效。 本批同时包含4篇基于最新源文档的增量更新(math/ada_cast、math/prod_force_se_a、math/sinkhorn、math/xlogy,对应上游近期文档变更)。 ## 关联的Issue 无 ## 测试 文档类变更,无需算子测试;已通过链接有效性校验(本批全部相对链接仅指向master已有文件,无指向本PR外未提交文件的链接),并完成逐篇翻译规范自查与语义校对(含支持状态表、限定词、术语、数值符号核对)。 ## 文档更新 新增409个英文译稿文件(*_en.md / .en-US.md),不修改任何现有文件。 ## 类型标签 - [ ] Bug修复 - [ ] 新特性 - [ ] 性能优化 - [x] 文档更新 - [ ] 其他,请描述: See merge request: cann/ops-math!7113 | 14 days ago |
RaggedBinCount
English | 简体中文
Product Support Status
| Product | Supported |
|---|---|
| Ascend 950PR&950DT products | √ |
| Atlas A3 products | √ |
| Atlas A2 products | √ |
| Atlas 200I/500 A2 inference products | × |
| Atlas inference products | × |
| Atlas training products | √ |
Function Description
-
Operator function: For the ragged rows partitioned by
splits, RaggedBinCount counts the number of occurrences or the weight sum of each bin. LetB = numel(splits) - 1andM = size[0]. Rowbcorresponds tovalues[splits[b]:splits[b + 1]], and the output shape is[B, M].For elements satisfying
0 <= values[i] < M: whenbinary_output=falseandweightsis empty,1.0is accumulated at the corresponding position; whenbinary_output=falseandweightsis not empty,weights[i]is accumulated; whenbinary_output=true, a bin that has appeared outputs1.0and the weight values are ignored. Bins greater than or equal toMare ignored, and a negative bin is invalid input.Usage scenario: performs row-wise histogram statistics on a batch of variable-length sequences (ragged batch), for example, counting vocabulary hits or class weight sums by sample.
-
Computation formula:
Non-binary (
binary_output = false):
outputb,m=∑i=splitsbsplitsb+1−11[valuesi=m]⋅wioutput_{b,m} = \sum_{i=splits_b}^{splits_{b+1}-1} \mathbb{1}[values_i = m] \cdot w_i outputb,m=i=splitsb∑splitsb+1−11[valuesi=m]⋅wi
where wi=weightsflat[i]w_i = weights_{flat}[i]wi=weightsflat[i] (the number of elements of weights is not 0) or wi=1.0w_i = 1.0wi=1.0 (the number of elements of weights is 0).
Binary (binary_output = true), ignoring weights:
outputb,m=1[∃ i∈[splitsb, splitsb+1), valuesi=m]output_{b,m} = \mathbb{1}\left[\exists\, i \in [splits_b,\ splits_{b+1}),\ values_i = m\right] outputb,m=1[∃i∈[splitsb, splitsb+1), valuesi=m]
where b∈[0,B)b \in [0, B)b∈[0,B) and m∈[0,M)m \in [0, M)m∈[0,M), and 1[⋅]\mathbb{1}[\cdot]1[⋅] is the indicator function (1 if the condition holds, otherwise 0).
Parameter Description
| Parameter Name | Input/Output/Attribute | Description | Data Type | Data Format |
|---|---|---|---|---|
| splits | Input | Strictly 1D row-splits tensor, with at least 2 elements. | INT64 | ND |
| values | Input | 0D, 1D, or 2D bin index tensor, flattened in the order of consecutive elements. | INT32, INT64 | ND |
| size | Input | 1D with 1 element (that is, the shape is [1]). size[0] is the non-negative number of bins, and the dtype is the same as that of values. |
INT32, INT64 | ND |
| weights | Input | 0D, 1D, or 2D weight tensor, which must be passed. When the number of elements is 0 (empty tensor), weights are not used, which is equivalent to all 1s. Otherwise, the number of elements must be the same as that of values, corresponding element-wise in the flattened order of values. | FLOAT | ND |
| binary_output | Attribute | Specifies whether to output the binary result. The default value is false. | BOOL | - |
| output | Output | Strictly 2D, with the shape [numel(splits)-1, size[0]]. |
FLOAT | ND |
Constraint Description
-
For all supported products, both static shapes and dynamic shapes use the ND format. The supported data type combinations and shape constraints are the same, and
valuessupports 0 to 2 dimensions. -
During graph compilation,
-1indicates an unknown dimension and[-2]indicates an unknown rank. The output rank is fixed to 2, and an output axis that cannot be determined by the length ofsplitsor the constantsizeis recorded as-1. During execution, each input must be resolved to specific non-negative dimensions and satisfy the rank and element count constraints of each parameter. -
The data types of all inputs must match one of the rows in the following table as a complete set, and cross-row combinations are not allowed (the dtype of
sizemust be the same as that ofvalues):
| splits | values | size | weights | output | Data Format |
|---|---|---|---|---|---|
| INT64 | INT32 | INT32 | FLOAT | FLOAT | ND |
| INT64 | INT64 | INT64 | FLOAT | FLOAT | ND |
splits[0]must be 0,splitsmust be monotonically non-decreasing, andsplits[-1]must equal the number of elements of values.- An out-of-range
splitsor a failure to satisfy the preceding data value constraints, as well as negative values invalues, are invalid inputs. Do not rely on the output content of invalid inputs. - The number of dimensions of
weightsitself must not exceed 2. Within this range, only the number of elements is validated, and the shape or number of dimensions is not required to be the same as that ofvalues: a value of 0 elements means weights are not used, and a non-zero value must be the same as the number of elements ofvalues(corresponding in the flattened order). - Empty tensor support is described separately as follows:
- When
size[0]is 0: the output is an empty tensor[numel(splits)-1, 0]. No valid computation is delivered, and success is returned directly. - When the number of elements of
valuesis 0: all elements ofsplitsmust be 0, and all positions of the output are+0.0. - When the number of elements of
weightsis 0 (for example, the shape is[0],[0,3],[2,0], or[0,0]): it indicates no weights, which is equivalent to all 1s. All cases are valid. - Empty tensors are not supported for
splits. The number of elements must be at least 2. Otherwise, validation fails and an error is returned.
- When
Invocation Description
| Invocation Method | Invocation Sample | Description |
|---|---|---|
| GE graph mode | test_geir_ragged_bin_count | Invokes the RaggedBinCount operator by building a graph through the operator IR. |
This operator does not provide an aclnn API with the same name.