0
代码
代码
Issues
Pull Requests
讨论
Wiki
分析
0
ascend-robotascend-robot【ut】新增NanCheckDataProcessor单元测试
159f556f创建于 3 天前历史提交
文件最后提交记录最后更新时间
api_dump
更新为木兰版权头 Co-authored-by: wugengjun<wugengjun1@huawei.com> 4 个月前
data_dump
【ut】新增NanCheckDataProcessor单元测试 Co-authored-by: l30036321<lvkaimeng@gmail.com> # message auto-generated for no-merge-commit merge: !739 merge master into master 【ut】新增NanCheckDataProcessor单元测试 Created-by: lv-kaimeng Commit-by: l30036321 Merged-by: ascend-robot Description: 【feat】新增NanCheckDataProcessor单元测试 See merge request: Ascend/msprobe!7393 天前
dump2db
【feature】趋势可视化工具数据解析接口合一 Co-authored-by: Jian_Daobao<jiandaobao19@163.com> 3 个月前
test_common_config.py
新增dump黑名单 Co-authored-by: TAJh<taojiaheng1@huawei.com> # message auto-generated for no-merge-commit merge: !411 merge specify into master 【feat】新增对模块输入/输出的具体黑名单过滤 Created-by: Tjh-UKN Commit-by: TAJh Merged-by: ascend-robot Description: ### 1. 变更背景 在 API Dump 场景下，部分算子的某些输入/输出（例如通信算子的承接输入、Torch.empty/zeros）会产生大量干扰数据，影响排查效率。 这里增加了tensor过滤黑名单能力，可按 API 的 input/output 精细忽略指定索引或全部数据。 ### 2. 核心改动 - 新增内建规则文件：[builtin_ignore_ops.yaml] - 在 dump 数据处理层增加规则加载、归一化、命中与应用逻辑：[base.py] - 规则加载入口接入 PyTorch data processor：[pytorch_processor.py] - Hook 链路统一使用 API 名更新当前上下文，供规则命中：[hook_manager.py] ### 3. 代码逻辑 1. 启动时加载 builtin_ignore_ops.yaml，归一化为内部规则结构。 2. 每次 API 采集时调用 update_api_or_module_name(...)，并缓存当前 API 对应的 ignore rule。 3. 在 forward input/output 分析前调用 _apply_ignore_rules(...)： - input: all / output: all -> 对应位置全部置 None - input: [i, j] / output: [i, j] -> 对应索引置 None 4. API 名解析通过 _parse_ignore_key(full_name) 从运行时名（如 Torch.empty.0.forward）提取规则键 Torch.empty 后进行精确命中。 ### 4. 使用方式 在 yaml 中按 前缀 -> api_name -> input/output 配置： ```yaml Distributed: recv: input: [0] Torch: empty: input: all output: all ``` 说明： - input/output 支持 all 或下标数组（非负整数） - 运行时 API 名需能提取到同名规则键（如 Torch.empty） ### 5. 自验报告 参见[自验报告](https://www.yuque.com/taejohnson/tzgbbf/helpca9h81ko93yf) See merge request: Ascend/msprobe!4112 个月前
test_hook_manager.py
【feat】dump 堆栈采集优化 Co-authored-by: curry808<485078529@qq.com> # message auto-generated for no-merge-commit merge: !618 merge master into master 【feat】dump 堆栈采集优化 Created-by: curry808 Commit-by: curry808 Merged-by: ascend-robot Description: 【feat】dump 堆栈采集优化 See merge request: Ascend/msprobe!61828 天前
test_service.py
【feature】dump增加数据集处理阶段采集 Co-authored-by: curry808<485078529@qq.com> 3 个月前