Closed
[Bug-Report|缺陷反馈]: ApplyCamePart1直接归约及长归约窄列场景的精度与UB规划问题 #8291
zsq_888Add on  16 days agoClosed at  15 days ago
zsq_888
zsq_888Collaborators
16 days ago Create

Describe the current behavior / 问题描述 (Mandatory / 必填)

ApplyCamePart1在arch35路径的直接归约、长归约及窄列场景存在精度风险,UB规划也需要与各阶段同时存活的缓冲区需求保持一致:

  1. 直接归约路径在结果写回前未合并归约补偿项,可能丢失低位结果。
  2. 长归约、窄列场景存在多次FP32累加,舍入误差可能累积;需要分块补偿累加。
  3. 固定tile和后处理缓冲区规划未按当前设备UB容量及阶段峰值存活量统一计算,需要动态规划tile和各阶段可用缓冲区,并复用生命周期不重叠的空间。
  4. CPU golden需要将平方、加eps及归约全流程提升到FP64,保留FP64参考输出,避免参考精度影响比较结论。

相关代码位于optim/apply_came_part1/op_host/arch35、op_kernel/arch35及tests/assets/golden.py。

Environment Information / 环境信息 (Mandatory / 必填)

  • 涉及实现:ApplyCamePart1的arch35路径。
  • 验证硬件:PR作者描述为Ascend950;未附npu-smi info原始输出。
  • CANN版本、Python版本:PR未提供,待补充。
  • PR目标基线:bc7ef8bf891da78089bdeadbc9288cba44e0ff4f。
  • PR修复提交:dd212443b4fb901c541d87dd856b5ab08a065660。

Steps to reproduce the issue / 重现步骤 (Mandatory / 必填)

  1. 使用修复前版本,在支持arch35路径的设备上构造ApplyCamePart1合法输入grad和eps,分别覆盖直接归约、长归约和窄列场景。
  2. 计算values = grad² + eps,将设备返回的三个输出分别与沿最后一维、倒数第二维及最后两维归约的FP64参考结果比较。
  3. 检查直接归约结果是否合并补偿项,以及长归约、窄列场景的累计误差;同时核对tiling规划的各阶段缓冲区峰值是否满足实际UB容量。

以上为验证步骤。PR未提供修复前的具体失败shape、随机种子、执行命令及误差数值,尚不能据此独立复现某一条失败用例。

Describe the expected behavior / 预期结果 (Mandatory / 必填)

  • 直接归约写回前合并补偿项,长归约和窄列场景通过分块补偿累加控制舍入误差,三个输出满足算子验收精度要求。
  • 根据输入数据类型、核数和设备UB容量选择可行tile,按各阶段峰值存活量规划缓冲区,安全复用生命周期不重叠的空间;无法满足容量时明确拒绝。
  • CPU golden全流程使用FP64计算并保留FP64输出,作为高精度参考。

PR作者说明已完成算子包编译、安装并在Ascend950上验证,GEIR图模式下三方精度比较的三个输出均为PASS。

本次仅核对PR代码差异,未重新执行编译或上板测试;PR描述未附完整原始日志、失败数值或截图,待作者补充。

Special notes for this issue/备注 (Optional / 选填)

关联PR:https://gitcode.com/cann/ops-nn/pull/13736

修复涉及UB动态规划、直接归约补偿项合并、窄列分块补偿累加及FP64 golden,共10个文件。

likedislike
zsq_888zsq_888Collaborators
16 days ago Added label: bug-report
zsq_888zsq_888Collaborators
16 days ago Associated pull request
yuning_chenyuning_chenCollaborators
16 days ago Assign qq_57796320 as responsible person
CANN-robotCANN-robotCollaborators
15 days ago Close issue
CANN-robotCANN-robotCollaborators
15 days ago Added label: resolved