已开启
DevEnv_254766机器 显示提示950pr 故障,然后机器无法启动,显示故障,现在卡死在99%, #55
zhangfeng1133创建于 3 天前
zhangfeng1133
3 天前 评论:
3 天前 评论:
npu-smi info 是正常的。但是就是有错误


condfuse_3
2 天前 评论:
2 天前 评论:
是否删除了什么东西
@zhangfeng1133


zhangfeng1133
2 天前 评论:
2 天前 评论:
没有啊。我就算子开发 。。。


npu-smi info 是正常的。但是就是有错误


是否删除了什么东西
@zhangfeng1133


没有啊。我就算子开发 。。。


DevEnv_254766机器 显示提示950pr 故障,然后机器无法启动,显示故障,现在卡死在99%,
程序还没有git 个人仓库呢
6 小时看护进程已挂:干净窗(zero<63000 且 mr≥99%)一出现即自动抓 3 份样本 + 自动 --bench 20 计时;
NPU(容器内无权限),这是唯一能稳定恢复干净窗的途径;
设备侧日志(最能反映 AI Core 真实状态)
ls -lt /var/log/npu/slog/device-0/ 2>/dev/null | head
host 侧 plog
ls -lt ~/ascend/log/plog/ /var/log/npu/slog/host-0/ 2>/dev/null | head
抓关键错误码——这是软死锁的指纹
grep -rE "0x31|vector core exception|AICORE_TIMEOUT|507014|0x711000c|Stream Synchronize failed|args.*after execute:0, 0, 0"
/var/log/npu/slog/device-0/ ~/ascend/log/plog/ 2>/dev/null | tail -20
root@ab7612364cbb:/workspace#
@condfuse_3 @fullt @Ascend-CANN