Closed
[Bug-Report|缺陷反馈]: foreach_log/Log1p/Log2 三个 kernel UT 永久绿:compare_data 丢弃 diff_idx + 无退出码传播 + log1p golden 与被测实现同源 #7998
liuhanwen8Add on 19 days agoClosed at 11 days ago
19 days ago Modify description of issue
19 days ago Modify description of issue
19 days ago Assign Tian_1122 as responsible person
yuning_chen
19 days ago Comments:
19 days ago Comments:
yuning_chen
19 days ago Comments:
19 days ago Comments:
您好,该问题已收到,当前问题 @Tian_1122 正在处理中


11 days ago Close issue
11 days ago changed custom state from 进行中 to 已完成
11 days ago Added label: resolved
chenjiayi_
10 days ago Comments:
10 days ago Comments:
补充当前 master 的核对结果(2026-11-12):PR#13918 已合入,foreach/foreach_log/tests/ut/op_kernel/log_data/compare_data.py 与 log2_data/compare_data.py 已按 diff_idx 判定并在失败时 sys.exit(1);两个 test_foreach_log*.cpp 已用 ASSERT_EQ(cmpRc, 0) 传播退出码。foreach_log1p 的比对脚本与 C++ 断言也已具备同样门禁。剩余项:foreach/foreach_log1p/tests/ut/op_kernel/log1p_data/gen_data.py:39-40 的输入仍为 [-1,1) 均匀随机,golden 仍为 np.log(tmp_input + 1),与 kernel 的 log(1+x) 同源。建议改为 np.log1p(tmp_input) 并补 ±1e-8、±1e-7、±ulp(1) 等边界点。如果还有后续需要,请重新提 issue。


10 days ago Assign chenjiayi_ as responsible person
5 days ago Associated pull request
2 days ago Associated pull request
1 day ago Removed responsible person chenjiayi_
现象
三个 foreach 单目 log 接口的 UT 数据校验脚本失效,无论 kernel 算得多错都会打印
PASSED!:compare_data.py路径foreach_logtests/ut/op_kernel/log_data/compare_data.pyforeach_log1ptests/ut/op_kernel/log1p_data/compare_data.pyforeach_log2tests/ut/op_kernel/log2_data/compare_data.py而全仓 58 个
compare_data.py里另外 55 个是正确实现(foreach_log10也已在其中修好),说明这是孤立的 3 个漏改,不是设计取舍。
根因(源码级,三处叠加)
1.
compare_data.py算出差异却不用,无条件打印 PASSED三个接口的写法完全一致:
def compare_data(golden_file_lists, output_file_lists, d_type): ... data_same = True # ① 永远是 True for gold, out in zip(golden_file_lists, output_file_lists): tmp_out = np.fromfile(out, np_dtype) tmp_gold = np.fromfile(gold, np_dtype) diff_res = np.isclose(tmp_out, tmp_gold, precision, 0, True) diff_idx = np.where(diff_res != True)[0] # ② 算出来了 print("PASSED!") # ③ 但不看 diff_idx,直接打印 return data_same # ④ 永远返回 True对比
foreach_log10的正确写法:diff_idx = np.flatnonzero(~diff_res) if len(diff_idx) == 0: print("PASSED!") else: data_same = False for idx in diff_idx[:5]: ...后果:kernel 输出全错时,UT 仍然
PASSED。2.
log1p的 golden 用np.log(x+1)计算 —— 与错误实现同源foreach_log1p/tests/ut/op_kernel/log1p_data/gen_data.py:tmp_input = np.random.rand(*shape) * 2 - 1 # 值域 [-1, 1) tmp_golden = np.log((tmp_input + 1).astype(np_type)) # ← golden 也是 log(1+x)!而 kernel 实现(
op_kernel/foreach_log1p.cpp:25-31)正是:Adds(dstLocal, srcLocal, scalarVal, uValue); // x + 1 Log<T>(dstLocal, srcLocal); // log(x+1)golden 与被测实现用同一套有精度缺陷的公式,即使测到极小 x 也会「一致通过」。
正确写法应是
np.log1p(tmp_input)(numpy 有专门的高精度实现)。3. 数据值域
[-1, 1)均匀分布,几乎不可能命中极小 xnp.random.rand()是[0,1)均匀分布,*2-1后值域[-1,1)。要触发
|x| < ulp(1)/2 = 5.96e-8:2 × 5.96e-8 / 2 = 5.96e-8且即使命中,由于 golden 同样算错(第 2 点),仍然判 PASS。
4. C++ 用例只看
system()退出码,三个脚本永远exit 0tests/ut/op_kernel/test_foreach_log1p.cpp三处调用:system("cd ./log1p_data/ && python3 compare_data.py 'float32'");system()只返回进程退出码,完全丢弃脚本的返回值与 stdoutcompare_data.py全篇没有任何sys.exit(1),非 0 退出永不发生data_same = False(foreach_log10的正确版本),只要不sys.exit(1),C++ 侧仍然通过
因此
foreach_log10那个「正确版」其实也只修了一半:它会把 FAIL 打印出来,但 C++ 侧因为不看退出码,用例依旧是绿的 —— 只是人工看日志时能发现。
修复要求(补充):
compare_data.py末尾必须sys.exit(0 if data_same else 1)并且 C++ 侧要用
int rc = system(...); ASSERT_EQ(rc, 0);而非忽略返回值。期望
compare_data.py:对齐foreach_log10的写法,diff_idx非空时置data_same = False并打印差异位置;data_same要真正参与用例判定(供test_foreach_*.cpp断言)。gen_data.py:log1p的 golden 改为np.log1p(tmp_input),不要手写log(x+1)。x ∈ {±1e-8, ±1e-7, ±ulp(1), ±0.1, ±0.9, ±1e-38(次正规)}这类边界点,而不是纯均匀随机。参考
foreach_log10是否已有分段做法。环境
Ascend 910B2 | CANN 9.2.0(
timestamp=20261015)| 仓cann/ops-nnmaster @6f576e5关联
本 issue 是
#7977(aclnnForeachLog1p 极小 |x| 精度缺陷)能长期逃过仓内测试的直接原因:#7977的缺陷路径log(1+x)在|x| < 5.96e-8时返回 0gen_data.py用同样的log(1+x)算 golden → 两边一起错 → 判 PASScompare_data.py根本不看差异 → 连错都发现不了两条 issue 建议一起修:先修 UT(否则后续任何精度修复都无法用 UT 验证),再修 kernel。
影响面
foreach_log/log1p/log2kernel 的改动都不会被 UT 拦住但 #7356 只修了 ForeachLog10 的用例,这三个接口的比对脚本遗漏了
与已知 issue 的关系(查重结论)
#880(closed)#2995(closed)#5511/#861/#3012(closed)zip静默截断(golden/output 数量不一致)#7356(closed)本 issue 是 #880 修复清单中遗漏的 3 个文件,外加一条 #880 未涉及的问题:
gen_data.py的 golden 公式与被测实现同源(log(x+1)vslog1p)。即便按 #880 的方式把
data_same接通、把退出码改对,本 issue 的 log1p 部分仍然测不出精度缺陷——因为 golden 自己就是错的。这一条需要单独修。