Closed
[apply_adam_v2] quality-hardening:算子质量加固修复(准入+检视问题整改) #11221
handsomeRobot_SKAdd on Sep 24Closed at 18 days ago
[apply_adam_v2] quality-hardening:算子质量加固修复(准入+检视问题整改) #11221
Closed
handsomeRobot_SKAdd on Sep 24Closed at 18 days ago
handsomeRobot_SK
handsomeRobot_SKCollaborators
Sep 24

[apply_adam_v2] quality-hardening:算子质量加固修复(准入+检视问题整改)

一、变更概述

apply_adam_v2(Adam/ MBART-Adam 优化器更新算子,ops-nn/optim/apply_adam_v2,ascend950/arch35,RegBase VF 链 + TBuf 管理 UB,仅 GEIR 通路)在 2026-09-23 质量扫描中结论为准入 FAIL(P1 产品支持 / P2 golden 一致性 2 项 FAIL + P3 格式校验 WARN + P4 空 Tensor 转检视)与代码检视 3 FAIL / 5 SUSPICIOUS / 设计一致性 6 项偏差 / 风格 3 FAIL(问题 C1~C14)。

本分支 apply_adam_v2_quality_hardening(自 quality-hardening 基线 ae74ae0da 起,共 9 个提交)对上述问题逐条整改,并同步交付件仓 operator-artifacts/ApplyAdamV2(DESIGN/REQUIREMENTS/spec/golden/异常用例)。整改原则:

  1. 代码侧:C1(NDDMA CopyIn 重写)、C3/P4(空 Tensor Host 早退)、C5(rank 4/8 双档)、C6(内存泄漏)、C7(日志宏)、C8(UT 安全编译选项)、C9(死代码清理)、C10(魔数常量化)、C11(C++ 转换与日志参数名)、C13(一行多变量拆分)、X2/P3(FORMAT_ND 显式校验)全部落地;
  2. 资料/交付件侧:README 支持表误改回退、DESIGN 数字单位格式(D1)、DESIGN 设计偏差回写(S1 梯度裁剪、8-key TilingKey 表、API 映射表)、REQUIREMENTS/spec step_size 口径修正、golden 违禁函数合规、L2 异常用例补齐;
  3. 禁区不触碰:canndev TBE ini、ACLNN/op_api 接口、LongTailInfo 归档仓三处维持现状,问题转入未修项追踪。

二、分类修改清单

2.1 代码修改(ops-nn/optim/apply_adam_v2)

文件 修改 对应问题
op_kernel/arch35/apply_adam_v2_kernel.h CopyInBrc 由 DataCopyPad 1D 改为 NDDMA 多维 DataCopy(rank≤5 单次 / rank>5 外层循环+内层 NDDMA),Init NDDMA 参数预计算转正;魔数 1e30f/1e-10f 改用 kInfApproxThreshold/kGradNormFloor;int64_t start, end 拆分初始化 C1、C9、C10、C13
op_kernel/arch35/apply_adam_v2_tiling_data.h 删除 kMaxNDDMA;新增 kAdamModeAdam/kAdamModeMbart/kInfApproxThreshold/kGradNormFloor 命名常量;clipCoeff/stepSizeVal/lrVal 标注 ABI 占位与设计偏差记录注释 C9、C10、C4
op_kernel/arch35/apply_adam_v2_struct.h TilingKey 扩为 rank 档位 × dtype × adam_mode 共 8 Key(RANK8_OFFSET=4) C5
op_kernel/apply_adam_v2.cpp 新增 TilingData<4>/<8> 按 KEY 编译期双档分派 C5
op_host/arch35/apply_adam_v2_tiling_arch35.cpp 新增 FORMAT_ND 显式运行时校验;空 Tensor 检测与 RunTiling 早退短路;16 处裸 OP_LOGE 替换预定义宏;全量 static_cast;kAdamModeAdam/kAdamModeMbart;RunTiling rank 双档分派;clipCoeff 等 ABI 占位注释 P3、P4/C3、C7、C10、C11、C5、C4
op_host/arch35/apply_adam_v2_tiling_arch35.h 新增 is_empty_ 成员 P4/C3
op_host/apply_adam_v2_infershape.cpp 9 处裸 OP_LOGE 替换预定义宏;beta1 日志修正参数名(exp_avg → beta1)并带实际 shape C7、C11
examples/test_geir_apply_adam_v2.cpp new 后判空 + Tensor 构造后 delete[] C6
tests/ut/op_host/CMakeLists.txt、arch35/CMakeLists.txt UT 目标补齐 -fPIE/-fstack-protector-all/-pie/-Wl,-z,relro,now,noexecstack/-s + 文件许可证头 C8
README.md 产品支持表误改回退(恢复全 √ 原始状态) P1(过程性)+ A1 待裁决

2.2 资料修改(operator-artifacts/ApplyAdamV2)

文件 修改 对应问题
DESIGN.md D1 数字单位空格 5 处修复;TilingKey 表同步 8-key(rank 档位编码);S1 梯度裁剪决策表「⚠️ 实现偏差」标注 + 偏差说明段落;API 映射表 1/global_grad_norm 与裁剪判断改为 kernel 运行时;运行期数据流 adam 公式 lr 修正;stepSize 约束去「必填」 C14、C5、C4、step_size 口径
REQUIREMENTS.md step_size 语义修正(adam 不使用 / mbart 可选缺省用 lr) step_size 口径
spec.yaml step_size 描述修正(与 kernel/README/golden 一致) step_size 口径
Golden/apply_adam_v2.py np.isnan/np.isinf → math.isnan/math.isinf;tolerance cross_check+L0 确认合规 P2(交付件侧)

2.3 用例修改(operator-artifacts/ApplyAdamV2)

文件 修改 对应问题
测试用例/apply_adam_v2_l2_exception.csv 新增 3 条 L2 预期报错用例:int32 不支持 dtype、NCHW×FLOAT/FLOAT16 不支持 format 用例覆盖度缺口(dtype/format 异常枚举式)

三、逐 commit 摘要(分支 9 提交)

# commit 日期 提交信息 涉及文件 对应问题
1 094dc03f8 09-24 08:10 回退 README 产品支持表误改 README.md P1 过程性回退
2 b29fe6a41 09-24 08:38 修复示例内存泄漏与分配判空 examples/test_geir_apply_adam_v2.cpp C6
3 1290fc00f 09-24 08:39 补齐 UT 目标安全编译选项与文件许可证头 tests/ut/op_host/CMakeLists.txt ×2 C8
4 6f8d17ced 09-24 08:40 日志宏规范、魔数常量化与空 Tensor 早退短路修复 infershape.cpp、tiling_arch35.cpp/.h、kernel.h、tiling_data.h C7、C10、C11、P4/C3、C9
5 63e73089e 09-24 10:43 TilingKey 增加 rank 双档分派 apply_adam_v2.cpp、struct.h、tiling_arch35.cpp C5
6 078a9ea99 09-24 10:44 CopyIn 改为 NDDMA 多维 DataCopy kernel.h C1、C9
7 f712ac344 09-24 10:45 tiling 增加 FORMAT_ND 显式运行时校验 tiling_arch35.cpp P3/X2
8 d37f400c2 09-24 10:46 TilingData 标注 clipCoeff 等 ABI 预留字段 tiling_arch35.cpp、tiling_data.h C4、C9
9 6996bf14b 09-24 10:46 kernel 拆分一行多变量声明 kernel.h C13/STYLE-2.8

交付件同步提交(operator-artifacts/ApplyAdamV2 本算子部分)

commit 提交信息 本算子修改 对应问题
6d0e429 golden 标量 NaN/Inf 校验改用 math.isnan/isinf Golden/apply_adam_v2.py P2
625b165 19 算子批量修复——设计同步、golden 合规、用例覆盖缺口补齐 DESIGN.md(D1 格式 5 处)、测试用例/apply_adam_v2_l2_exception.csv(新建) C14、覆盖度缺口
8a47e70 第二轮补修交付件同步 DESIGN.md(8-key 表 / S1 偏差说明 / API 映射表 / stepSize 约束 / 数据流公式)、REQUIREMENTS.md、spec.yaml C4、C5、step_size 口径

四、测试与验证

  • 静态验证:全部修改逐条对照准入/检视报告的修复建议落地(修复位置见各报告对应条目),包括 ND 格式显式拦截、空 Tensor Host 早退、NDDMA 多维 CopyIn、rank 双档 TilingKey(rank 通过 TilingKey 编译期编码,与 Broadcast 范式 RANK_4/RANK_8 分档机制一致)。
  • InferShape UT:2/2 PASSED(infershape_case_0、infershape_rank_6,此前的纯动态链接手动链路运行记录);本次 C7/C11 修改不改变校验语义,仅换宏与消息文案。
  • Tiling UT:4 例(float32_adam/float16_adam/float32_mbart_adam/large_float32_adam)此前因仓库 faker 框架 blocker(TilingContextFaker::Build 依赖 libmetadef 在当前 CANN 环境静默返回空 context)无法运行,本分支未解决该框架问题,见「未完成事项」。
  • 用例覆盖度:扫描期 kernel 侧 92.0% PASS(2 文件 303 用例);本轮补齐 3 条 dtype/format 不支持异常用例,关闭报告中记录的枚举式缺口。
  • Golden 合规:交付件 golden cross_check + math.isnan/math.isinf,符合 longtail-docs-verification 规则 f(仅允许 torch/tf 计算)。
  • 构建/编译验证:不确定项——本环境无 NPU,未执行 C++ 单测与 kernel 端到端编译验证;UT 目标的安全编译选项(CS-1~CS-6)为直接添加标准 gcc/ld 选项,编译期兼容性待流水线验证。

五、未完成事项与限制

5.1 三禁区声明(本分支不触碰,问题转入未修项追踪)

  1. canndev TBE ini 不改动:ascend910b/910/910_93/310b/031/as31xm1 六类 aic-*-ops-info.ini 的 [ApplyAdamV2] 注册节维持现状(架构既定),README 支持面最终口径待产品/架构决策(未修项 A1)。
  2. ACLNN/op_api 接口不新增:本期仅 GEIR 通路(ACLNNTYPE=aclnn_exclude 维持),DESIGN §2.1/§2.4/§6 交付清单中 ACLNN 两段式接口的删除/豁免标注待架构回写(未修项 A2)。
  3. LongTailInfo 归档仓 golden 不触碰:归档仓不在工作区、无写入权限,其 golden 的 math.isnan 与 cross_check 同步待归档仓维护者执行后复扫 1.6(未修项 B3)。

5.2 环境限制(无 NPU/TTK)

  • 无 NPU/TTK 环境:GEIR/TTK 实测与 TTK 异常实测未执行(admission 报告对应 UNAVAILABLE 项),全部结论基于白盒静态证据 + LLM 审视;异常校验(X1-X7 运行时验证面)无法闭环(未修项 B5)。
  • 无 asc-devkit 文档访问:RegBase CreateAddrReg 索引上限与 UpdateMask(count) 尾段掩码语义(API-8)离线无法核实,repCount≤199<255 由 UB 预算保证(未修项 B4)。
  • Tiling UT 4 例受仓库 faker 框架 blocker 阻跑(框架级问题,非本算子 UT 代码问题);C4 设计偏差(clip_coeff 由 kernel 运行时计算)的证据化与 DESIGN 回写已完成,正式豁免签字待架构确认(未修项 D8)。

5.3 未修项索引

完整未修项(8 条:A1/A2/B3/B4/B5/C6/C7/D8)与处置建议见《apply_adam_v2_未修项明细.md》(guide/未修项明细/ 目录),含工具链/仓内惯例冲突豁免(STYLE-1.4 snake_case 成员、STYLE-2.3 Type* 风格)等待工具链 owner 裁决。

likedislike
The current Pull Request has been closed by chenqi317.
handsomeRobot_SKhandsomeRobot_SKCollaborators
Sep 24 Created pull request, commit cba8038e
atomgit-bot
atomgit-bot
Sep 24 Comments:

变更摘要

本 PR 对 apply_adam_v2 算子进行质量加固,核心围绕 TilingKey 按 rank 分层编码、空张量短路、kernel 侧 NDDMA 多维搬运重写、主机侧校验与错误日志规范化,以及示例代码资源释放修正。改动涉及 op_host(tiling、infershape)、op_kernel(kernel、struct、tiling_data)与 examples 三部分。

主要改动

  • TilingKey 按 rank 分层编码: 在 apply_adam_v2_struct.h 中新增 APPLY_ADAM_V2_RANK8_FP32_ADAM 等 Key 4~7 与 APPLY_ADAM_V2_RANK8_OFFSET,使 rank<=4 映射到 ApplyAdamV2TilingData<4>、rank>4 映射到 <8>;apply_adam_v2.cpp 通过 if constexpr (KEY < APPLY_ADAM_V2_RANK8_OFFSET) 选择对应模板并在 Process 中扣除偏移。
  • 空张量短路处理: 在 apply_adam_v2_tiling_arch35.h 新增成员 is_empty_,RunTiling 检测到 var 元素数为 0 时直接返回成功、设置 blockDim=1 并输出零 tile,跳过 kernel 计算。
  • kernel NDDMA 多维搬运重写: apply_adam_v2_kernel.h 中 CopyInOne 由一维 DataCopyPad 改为基于 AscendC::DataCopy + NdDmaConfig 的多维搬运,并区分 RANK <= 5(单次 NDDMA)与 RANK > 5(外层循环逐块搬运);同时 Init 中以 ndmaStart 统一 NDDMA 起始维度。
  • 主机侧校验与错误日志规范化: 在 apply_adam_v2_tiling_data.h 引入 kAdamModeAdam、kAdamModeMbart、kInfApproxThreshold、kGradNormFloor 命名常量,tiling 中新增输入 Format 必须为 FORMAT_ND 的校验,并将多处 OP_LOGE 替换为 OP_LOGE_FOR_INVALID_* 结构化宏。
  • 可选输入与示例资源修正: apply_adam_v2_infershape.cpp 按 GetOptionalInputShape 动态判断 step_size、max_grad_norm 是否参与形状校验;test_geir_apply_adam_v2.cpp 在 new 后增加空指针检查并在构造 Tensor 后 delete[] 释放内存。
likedislike
Incorrect?
atomgit-bot
atomgit-bot
Sep 24 Comments:

代码审查

✅ 未发现问题

likedislike
Incorrect?
CANN-robotCANN-robotCollaborators
Sep 24 Added label: stat/needs-squash
CANN-robotCANN-robotCollaborators
Sep 24 Added label: cann-cla/yes
CANN-robot
CANN-robotCollaborators
Sep 24 Comments:

Thanks for your pull-request.
The full list of commands accepted by me can be found at here.
You can get sig-info at here.
You can self-configure the PR merge rules for this repository. For more details, please refer to Here.
For more, you also can visit HICANN.


PR Approval Progress

⚠️ This PR does not yet meet the following requirements:lgtm (requires ≥ 2 person(s) per module)、approve (requires ≥ 1 person(s) per module)

Module Approval Details

module lgtm status approve status
*/*/README.md ❌ (0/2)(You can also ask: 胡碧霞, 刘波, 曾娟, 杜慧萍, 上官秦南) ❌ (0/1)(You can also ask: 杜慧萍, 冯英, 蔡雯雯, 杨露, 陈娇)
optim ❌ (0/2)(You can also ask: 王星, 曾娟, 上官秦南, 陈展熹, 刘波) ❌ (0/1)(You can also ask: 王星, 苏跃明, 汤平川, 钱泽洪, 陈展熹)

💡 Tip:

  • Committer can comment /approve or /lgtm
  • Commenting /approve implies both code review (lgtm) and intent to merge (approve)

CLA Signature Pass

handsomeRobot_SK, thanks for your pull request. All authors of the commits have signed the CLA. 👍

likedislike
CANN-robotCANN-robotCollaborators
Sep 24 Set zengjuan,u010470851,chenfeng61,chaotang233,crystalhu,yu-xinjie62,yangyang016,fanqirui,gitee-duhuiping,su-yueming,yourealize,chenqi317,wang-xing001,liubo75,tangweiwei2,gitcode-chenjiao,pingchuantang,qianzehong,fengying555682,caiwenwen,yanglu-1 as approver
CANN-robotCANN-robotCollaborators
Sep 24 Set u010470851,chenfeng61,yu-xinjie62,gitee-duhuiping,su-yueming,yourealize,wang-xing001,gitcode-chenjiao,pingchuantang,qianzehong,fengying555682,caiwenwen,yanglu-1 as approver
handsomeRobot_SK
handsomeRobot_SKCollaborators
Oct 12 Comments:

compile

likedislike
handsomeRobot_SKhandsomeRobot_SKCollaborators
Oct 12 Pre merge succeeded (commit_id: b6278b6696793514fe1e60b7e481533b3fa30282)
CANN-robot
CANN-robotCollaborators
Oct 12 Comments:
🚀 CI 流水线已启动
📋 执行详情: 点击查看流水线
likedislike
CANN-robotCANN-robotCollaborators
Oct 12 Added label: ci-pipeline-running
CANN-robotCANN-robotCollaborators
Oct 12 Removed label: ci-pipeline-running
CANN-robotCANN-robotCollaborators
Oct 12 Added label: ci-pipeline-passed
handsomeRobot_SKhandsomeRobot_SKCollaborators
Oct 12 Modify description of pull request
handsomeRobot_SKhandsomeRobot_SKCollaborators
Oct 12 Change title to "[apply_adam_v2] quality-hardening:算子质量加固修复(准入+检视问题整改)", originally titled "apply_adam_v2".
handsomeRobot_SKhandsomeRobot_SKCollaborators
Oct 12 Associated issue: [apply_adam_v2] 算子质量加固问题修复记录
yuning_chen
yuning_chenCollaborators
Oct 12 Comments:

您好,pr合入已准备就绪,请尽快联系committer进行检视,谢谢!

likedislike
chenqi317
chenqi317CollaboratorsOct 18Start code review1
optim/apply_adam_v2/README.md
@@ -85,3 +85,3 @@
8585- lr、beta1、beta2、epsilon、max_grad_norm、global_grad_norm、weight_decay、step_size 为标量(shape [1]),数据类型必须与 Tensor 的数据类型一致。
8686- FP16 输入时,内部计算提升到 FP32 进行,输出再转回 FP16,以保证长期训练中矩估计的精度。
87-- adam 模式下,若提供 max_grad_norm 和 global_grad_norm,则进行梯度裁剪:clip_coeff = min(1.0, max_grad_norm / global_grad_norm)。
87+- adam 模式下,若提供 max_grad_norm 且满足 max_grad_norm > 0、global_grad_norm > 1,则进行梯度裁剪:clip_coeff = 1 / global_grad_norm(global_grad_norm < 1e-10 时内置置为 1.0)。
chenqi317
chenqi317Oct 18Comments:

触发条件:adam 模式下传入 0 < max_grad_norm < 1 且 global_grad_norm > 1。base 版本文档与标准 Adam 裁剪语义均为 clip_coeff = min(1, max_grad_norm / global_grad_norm),而 kernel 只把 max_grad_norm 当开关(apply_adam_v2_kernel.h:383 判断 maxGradNorm > 0 && globalGradNorm > 1 后直接 clip_coeff = 1/globalGradNorm),其数值完全不参与运算。后果:本 PR 未修实现,而是把 README 口径改成与实现一致,等于用文档消除设计偏差;若 spec/golden 仍为 min 公式则线上数值系统性偏大(如 max=0.5、global=0.8 应为 0.625,实现给出 1.0),且 kernel 对 NaN/Inf 置 1.0 的保护也未写入文档。建议:按 spec 修正 kernel 为 min(1, max/global),或按设计变更流程同步 spec/golden 并在 README 明确标注“实现差异”,同时补充 max_grad_norm≠1 的精度用例。


如已修复请回复说明,我会在确认后把该意见标记为已解决。

likedislike
chenqi317
chenqi317CollaboratorsOct 18Start code review1
optim/apply_adam_v2/op_host/apply_adam_v2_infershape.cpp
@@ -110,3 +115,3 @@
110115 (beta1Shape->GetDimNum() == 1 && beta1Shape->GetDim(0) == -1) ||
111116 (beta1Shape->GetDimNum() == 1 && beta1Shape->GetDim(0) == 1) || beta1Shape->IsScalar())) {
112- OP_LOGE(context->GetNodeName(), "shape of exp_avg must be (1, )");
117+ OP_LOGE_FOR_INVALID_SHAPE(OP_NAME, "beta1", Ops::Base::ToString(*beta1Shape), "(1,) or scalar");
chenqi317
chenqi317Oct 18Comments:

触发条件:编译 op_host/apply_adam_v2_infershape.cpp。本文件仅 include log/log.h、register/op_impl_registry.h 以及新加的 op_kernel/arch35/apply_adam_v2_tiling_data.h,而 Ops::Base::ToString 声明在 util/shape_util.h;仓内其余使用该工具函数的 infershape(如 loss/mse_loss、optim/sparse_apply_ftrl)均显式 #include "util/shape_util.h",log/log.h 不提供该声明。后果:该翻译单元报 “Ops 未声明”,op_host 构建以及本 PR 刚加固过安全编译选项的 infershape UT 目标都会编译失败,质量加固分支无法出包。建议:在 log/log.h 之后补 #include "util/shape_util.h",并本地编译 infershape 目标验证。


如已修复请回复说明,我会在确认后把该意见标记为已解决。

likedislike
chenqi317
chenqi317CollaboratorsOct 18Start code review1
optim/apply_adam_v2/op_host/arch35/apply_adam_v2_tiling_arch35.cpp
@@ -314,2 +334,4 @@
314334 dtype_size_ = static_cast<int64_t>(dtypeSize);
315335 
336+ // ===== 6.5 Empty tensor short-circuit (Design §3.4/§5.4: host-side early detection) =====
337+ if (ctx_->GetInputShape(0)->GetStorageShape().GetShapeSize() == 0) {
chenqi317
chenqi317Oct 18Comments:

触发条件:var 为 0 元素(shape 含 0)且其它输入非法,例如 lr/beta1/epsilon 传了 0 元素张量,或 m/v/grad 与 var 不广播兼容。该“6.5 空 Tensor 早退”插入在 dtype 校验之后、标量 shape 约束(第 7 段)、has_max_grad_norm_/has_step_size_ 探测与 PadAndSqueeze/broadcast 校验之前,命中即 return GRAPH_SUCCESS。后果:非法标量/不兼容形状被当作合法调用接受;而 kernel 的 Process() 即使 0 个 tile 也会无条件执行 *(gmInPtr_[IN_LR]) 等标量 GM 读取(apply_adam_v2_kernel.h:365-369),0 元素标量会造成非法 GM 访问;同时 rank_ 保持 0,一旦后续在空分支外复用会取到错误值。建议:将空 Tensor 早退移到标量校验之后、DoTilingAndSet/PadAndSqueeze 之前(空场景仍需跳过切分以避免 MultiCoreSplit 除零),或至少在空分支内补做标量与可选输入校验。


如已修复请回复说明,我会在确认后把该意见标记为已解决。

likedislike
chenqi317
chenqi317CollaboratorsOct 18Start code review1
optim/apply_adam_v2/op_kernel/arch35/apply_adam_v2_tiling_data.h
@@ -55,0 +58,4 @@
58+ // 设计原定 Host 预计算 clip_coeff、kernel 无条件 Muls;但 max_grad_norm/global_grad_norm/lr/step_size
59+ // 均为 GM 标量张量,Host 编译期仅可见 shape/dtype,拿不到运行期数值(self-check.md 已证),
60+ // 动态 shape 场景下 Host 预计算不可行。故 clip_coeff 保留 kernel 运行时计算(含 NaN/Inf/1e-10 下限保护,
61+ // 语义与 spec/golden 一致),以下三字段仅作 ABI 占位,Host 不写入有效值:
chenqi317
chenqi317Oct 18Comments:

注释写“以下三字段仅作 ABI 占位,Host 不写入有效值”,但紧随其后的三个字段是 clipCoeff、hasMaxGradNorm、hasStepSize:其中 hasMaxGradNorm/hasStepSize 由 host 写入有效值(apply_adam_v2_tiling_arch35.cpp:489-490)并被 kernel 用于决定是否读取 max_grad_norm/step_size 以及 mbart 模式下用 lr 兜底(apply_adam_v2_kernel.h:373、392-396),真正的三个占位字段是 clipCoeff/stepSizeVal/lrVal。后果:维护者按注释清理“占位字段”会直接破坏梯度裁剪与 mbart 步长逻辑,且该结构同时是 host/kernel ABI,删除会引入静默错位。建议:把 clipCoeff/stepSizeVal/lrVal 归并到一处并注释为占位字段,hasMaxGradNorm/hasStepSize 单独说明其真实语义。


如已修复请回复说明,我会在确认后把该意见标记为已解决。

likedislike
chenqi317
chenqi317CollaboratorsOct 18Start code review1
optim/apply_adam_v2/examples/test_geir_apply_adam_v2.cpp
@@ -92,3 +96,4 @@
9296 for (size_t i = 0; i < size; ++i)
9397 *(pData + i) = value;
9498 input_tensor = Tensor(input_tensor_desc, (uint8_t*)pData, data_len);
99+ delete[] pData; // GE Tensor 构造已拷贝,立即释放
chenqi317
chenqi317Oct 18Comments:

本 PR 只给 GenOnesDataFloat32 的 new 补了判空并补了 delete[],同一文件 main() 中 “Session* session = new Session(build_opts);”(第 151 行)仍未做判空,且 “ret = session->AddGraph(...)”(第 154 行)的返回值未检查就无条件打印 AddGraph success。后果:内存不足或图注册失败时示例会静默打印成功结论或空指针解引用,内存与错误处理整改未真正闭环。建议:同批补 Session new 判空与 AddGraph 返回值判断(失败时打印错误、释放 session 并返回 FAILED)。


如已修复请回复说明,我会在确认后把该意见标记为已解决。

likedislike
chenqi317
chenqi317CollaboratorsOct 21Start code review1
optim/apply_adam_v2/tests/ut/op_host/CMakeLists.txt
@@ -2,2 +10,4 @@
10+# Generated By CANNBot
11+#
212# InferShape UT:独立编译,不依赖 CANN faker 框架
313add_executable(test_apply_adam_v2_infershape test_apply_adam_v2_infershape.cpp)
chenqi317
chenqi317Oct 21Comments:

这里用 add_executable/add_test 创建独立测试可执行文件,未接入仓内标准 UT 框架(同目录兄弟 PR 11222 用 add_modules_ut_sources 接入 nn_op_host_ut)。后果:该 infershape UT 不会被仓级 nn_op_host_ut 收集,CI 的 op_host_ut 门禁不会执行它,测试形同虚设。建议改为 add_modules_ut_sources(HOSTNAME ${OP_INFERSHAPE_MODULE_NAME} ...) 的标准写法。

likedislike
chenqi317
chenqi317Collaborators
Oct 21 Comments:

@handsomeRobot_SK 请处理检视意见。未解决的检视意见:

  • 触发条件:adam 模式下传入 0 < max_grad_norm < 1 且 global_grad_norm > 1。base 版本文档与标准 Adam 裁剪语义均为 clip_coeff = min(1, max_grad_norm / global_grad_norm),而 kernel 只...
  • 触发条件:编译 op_host/apply_adam_v2_infershape.cpp。本文件仅 include log/log.h、register/op_impl_registry.h 以及新加的 op_kernel/arch35/apply_adam_v2_tiling_data.h,而 O...
  • 触发条件:var 为 0 元素(shape 含 0)且其它输入非法,例如 lr/beta1/epsilon 传了 0 元素张量,或 m/v/grad 与 var 不广播兼容。该“6.5 空 Tensor 早退”插入在 dtype 校验之后、标量 shape 约束(第 7 段)、has_max_gra...
  • 注释写“以下三字段仅作 ABI 占位,Host 不写入有效值”,但紧随其后的三个字段是 clipCoeff、hasMaxGradNorm、hasStepSize:其中 hasMaxGradNorm/hasStepSize 由 host 写入有效值(apply_adam_v2_tiling_arch3...
  • 本 PR 只给 GenOnesDataFloat32 的 new 补了判空并补了 delete[],同一文件 main() 中 “Session* session = new Session(build_opts);”(第 151 行)仍未做判空,且 “ret = session->AddGraph...
likedislike
chenqi317
chenqi317Collaborators
Oct 21 Comments:

@handsomeRobot_SK 请处理检视意见。未解决的检视意见:

  • 触发条件:adam 模式下传入 0 < max_grad_norm < 1 且 global_grad_norm > 1。base 版本文档与标准 Adam 裁剪语义均为 clip_coeff = min(1, max_grad_norm / global_grad_norm),而 kernel 只...
  • 触发条件:编译 op_host/apply_adam_v2_infershape.cpp。本文件仅 include log/log.h、register/op_impl_registry.h 以及新加的 op_kernel/arch35/apply_adam_v2_tiling_data.h,而 O...
  • 触发条件:var 为 0 元素(shape 含 0)且其它输入非法,例如 lr/beta1/epsilon 传了 0 元素张量,或 m/v/grad 与 var 不广播兼容。该“6.5 空 Tensor 早退”插入在 dtype 校验之后、标量 shape 约束(第 7 段)、has_max_gra...
  • 注释写“以下三字段仅作 ABI 占位,Host 不写入有效值”,但紧随其后的三个字段是 clipCoeff、hasMaxGradNorm、hasStepSize:其中 hasMaxGradNorm/hasStepSize 由 host 写入有效值(apply_adam_v2_tiling_arch3...
  • 本 PR 只给 GenOnesDataFloat32 的 new 补了判空并补了 delete[],同一文件 main() 中 “Session* session = new Session(build_opts);”(第 151 行)仍未做判空,且 “ret = session->AddGraph...
likedislike
chenqi317
chenqi317Collaborators
Oct 21 Comments:

@handsomeRobot_SK 请处理检视意见。未解决的检视意见:

  • 触发条件:adam 模式下传入 0 < max_grad_norm < 1 且 global_grad_norm > 1。base 版本文档与标准 Adam 裁剪语义均为 clip_coeff = min(1, max_grad_norm / global_grad_norm),而 kernel 只...
  • 触发条件:编译 op_host/apply_adam_v2_infershape.cpp。本文件仅 include log/log.h、register/op_impl_registry.h 以及新加的 op_kernel/arch35/apply_adam_v2_tiling_data.h,而 O...
  • 触发条件:var 为 0 元素(shape 含 0)且其它输入非法,例如 lr/beta1/epsilon 传了 0 元素张量,或 m/v/grad 与 var 不广播兼容。该“6.5 空 Tensor 早退”插入在 dtype 校验之后、标量 shape 约束(第 7 段)、has_max_gra...
  • 注释写“以下三字段仅作 ABI 占位,Host 不写入有效值”,但紧随其后的三个字段是 clipCoeff、hasMaxGradNorm、hasStepSize:其中 hasMaxGradNorm/hasStepSize 由 host 写入有效值(apply_adam_v2_tiling_arch3...
  • 本 PR 只给 GenOnesDataFloat32 的 new 补了判空并补了 delete[],同一文件 main() 中 “Session* session = new Session(build_opts);”(第 151 行)仍未做判空,且 “ret = session->AddGraph...
likedislike
chenqi317
chenqi317Collaborators
29 days ago Comments:

@handsomeRobot_SK 请处理检视意见。未解决的检视意见:

  • 触发条件:adam 模式下传入 0 < max_grad_norm < 1 且 global_grad_norm > 1。base 版本文档与标准 Adam 裁剪语义均为 clip_coeff = min(1, max_grad_norm / global_grad_norm),而 kernel 只把 max_grad_norm 当开关(apply_adam_v2_kernel.h:383 判断 maxGradNorm > 0 && globalGradNorm > 1 后直接 clip_coeff = 1/glo
  • 触发条件:编译 op_host/apply_adam_v2_infershape.cpp。本文件仅 include log/log.h、register/op_impl_registry.h 以及新加的 op_kernel/arch35/apply_adam_v2_tiling_data.h,而 Ops::Base::ToString 声明在 util/shape_util.h;仓内其余使用该工具函数的 infershape(如 loss/mse_loss、optim/sparse_apply_ftrl)均显式 #
  • 触发条件:var 为 0 元素(shape 含 0)且其它输入非法,例如 lr/beta1/epsilon 传了 0 元素张量,或 m/v/grad 与 var 不广播兼容。该“6.5 空 Tensor 早退”插入在 dtype 校验之后、标量 shape 约束(第 7 段)、has_max_grad_norm_/has_step_size_ 探测与 PadAndSqueeze/broadcast 校验之前,命中即 return GRAPH_SUCCESS。后果:非法标量/不兼容形状被当作合法调用接受;而 kern
  • 注释写“以下三字段仅作 ABI 占位,Host 不写入有效值”,但紧随其后的三个字段是 clipCoeff、hasMaxGradNorm、hasStepSize:其中 hasMaxGradNorm/hasStepSize 由 host 写入有效值(apply_adam_v2_tiling_arch35.cpp:489-490)并被 kernel 用于决定是否读取 max_grad_norm/step_size 以及 mbart 模式下用 lr 兜底(apply_adam_v2_kernel.h:373、392-39
  • 本 PR 只给 GenOnesDataFloat32 的 new 补了判空并补了 delete[],同一文件 main() 中 “Session* session = new Session(build_opts);”(第 151 行)仍未做判空,且 “ret = session->AddGraph(...)”(第 154 行)的返回值未检查就无条件打印 AddGraph success。后果:内存不足或图注册失败时示例会静默打印成功结论或空指针解引用,内存与错误处理整改未真正闭环。建议:同批补 Session n
  • 这里用 add_executable/add_test 创建独立测试可执行文件,未接入仓内标准 UT 框架(同目录兄弟 PR 11222 用 add_modules_ut_sources 接入 nn_op_host_ut)。后果:该 infershape UT 不会被仓级 nn_op_host_ut 收集,CI 的 op_host_ut 门禁不会执行它,测试形同虚设。建议改为 add_modules_ut_sources(HOSTNAME ${OP_INFERSHAPE_MODULE_NAME} ...) 的标准写
likedislike
chenqi317
chenqi317Collaborators
18 days ago Comments:

该 PR 存在未解决的代码冲突,且已超过 10 天未更新,已被暂时关闭。若需继续合入,请先解决冲突并重新打开 PR。

likedislike
chenqi317chenqi317Collaborators
18 days ago Close pull request