| 文件 | 最后提交记录 | 最后更新时间 |
|---|---|---|
feat: add Agent Skills, ACLNN output auto-fill, and docs polish Co-authored-by: dengguojie<dengguojie@huawei.com> # message auto-generated for no-merge-commit merge: !16 merge dev-1 into master feat: add Agent Skills, ACLNN output auto-fill, and docs polish Created-by: dengguojie Commit-by: dengguojie Merged-by: cann-robot Description: ## 描述 - Add 4 Agent Skills (run-test, write-case, diagnose, write-plugin) with progressive disclosure structure (SKILL.md + references/) - Auto-fill output_tensor_indexes for ACLNN by naming convention (*Ref, *Out, *Output, *OutOptional, *OutputOptional, "output") - Add 20 unit tests for ACLNN auto-fill logic - Update docs (CN/EN): output auto-fill, scalar_dtypes, e2e section, input_data_ranges [min,max] closed interval + must values - Add AGENTS.md for CLI agent entry point - Update README with Agent Skills usage (3 loading methods) - Fix diagnose skill: __golden__ dict registration (not decorator) - Fix error-patterns: CANN paths for root/user, ast.parse check, exit -9/-11 diagnosis, proc-timeout clarification - Update CLI params: remove deprecated -s/--static, -l to GB unit, --validate as common option, update compile mode descriptions - Sync CN/EN guide docs for Task Execution, Kernel, E2E ## 关联的Issue https://gitcode.com/cann/ops-test-kit/issues/16 ## 测试 <!--描述进行了哪些测试来验证你的改动。--> ## 文档更新 <!--如果这个PR包含文档的更新，请在这里指出。例如：更新了README.md文件。--> ## 类型标签 <!-- [x] 表示选中 --> - [x] Bug修复 - [x] 新特性 - [ ] 性能优化 - [x] 文档更新 - [ ] 其他，请描述： See merge request: cann/ops-test-kit!16 | 1 个月前 | |
TTK init repo | 2 个月前 | |
feat(ttk): 通路验证四项能力补齐 + 三方性能统计修正 Co-authored-by: tangpingchuan<tangpingchuan@huawei.com> # message auto-generated for no-merge-commit merge: !81 merge master into master feat(ttk): 通路验证四项能力补齐 + 三方性能统计修正 Created-by: zl_hw Commit-by: tangpingchuan Merged-by: cann-robot Description: <!-- 感谢您的合入申请! --> ### 当前PR是否有AI参与: [x] 否 [ ] 是 __1. AI Agent 平台: __2. AI 模型: __3. Prompt上下文 : ### PR功能描述 / 为什么需要这个合入**: 1、支持可选入参在必选入参前场景下按序输入算子入参 2、支持golden侧能获取golden-mode模式，决策是三方场景还是非三方场景 3、新增quant量化判据，对标新精度标准要求，支持量化类型精度判断 4、优化竞品性能统计算法，去除冗余统计，确保只统计kernel耗时 5、geir支持自实现compare脚本加载 6、修复GPU server 卡死问题 ### 该PR关联的issue *(格式为fixes #<issue号>, 或者resolves #<issue号>)*: fixes # ### 希望检视人员了解: ## 测试 自测gnsq和nzv算子，kernel/geir通路验证OK ## 文档更新 <!--如果这个PR包含文档的更新，请在这里指出。例如：更新了README.md文件。--> ## 类型标签 <!-- [x] 表示选中 --> - [ ] Bug修复 - [ ] 新特性 - [ ] 性能优化 - [ ] 文档更新 - [x] 其他，请描述： See merge request: cann/ops-test-kit!81 | 1 天前 | |
add strict two-stage input and golden cache Co-authored-by: j60100428<jingsong5@h-partners.com> # message auto-generated for no-merge-commit merge: !48 merge 0724 into master add strict two-stage input and golden cache Created-by: SH_jingsong Commit-by: j60100428 Merged-by: cann-robot Description: ## 描述 add strict two-stage input and golden cache ## 关联的Issue https://gitcode.com/cann/ops-test-kit/issues/34 本 PR 为 E2E、ACLNN 和 Kernel 测试增加 输入/ CPU Golden保存、NPU执行 的两阶段执行能力： 1. Prepare 阶段生成 input 和 CPU Golden，保存为 bin、npy 或 pt 文件，不执行目标 NPU API/Kernel。 2. Replay 阶段根据 CSV testcase name 查找数据目录，恢复 input 和 Golden，只执行 NPU 并沿用原 compare 链路。 3. 数据目录只有目标格式文件 ## 测试 <!--描述进行了哪些测试来验证你的改动。--> ## 文档更新 <!--如果这个PR包含文档的更新，请在这里指出。例如：更新了README.md文件。--> ## 类型标签 <!-- [x] 表示选中 --> - [ ] Bug修复 - [ ] 新特性 - [ ] 性能优化 - [ ] 文档更新 - [ ] 其他，请描述： See merge request: cann/ops-test-kit!48 | 12 天前 | |
feat: 顺序下发testcase，使用List替代Set保证执行顺序 Co-authored-by: chenqianyu<chenqianyu1@h-partners.com> Co-authored-by: gitcode-bot<noreply@gitcode.com> # message auto-generated for no-merge-commit merge: !78 merge feat3 into master feat: 顺序下发testcase，使用List替代Set保证执行顺序 Created-by: FishPotatoChen Commit-by: chenqianyu;gitcode-bot Merged-by: cann-robot Description: <!-- 感谢您的合入申请! --> ### 当前PR是否有AI参与: [x] 否 [ ] 是 __1. AI Agent 平台: __2. AI 模型: __3. Prompt上下文 : ### PR功能描述 / 为什么需要这个合入**: TTK 读取 CSV 用例后，将 testcase 存入 set（无序集合），导致用例下发顺序与 CSV 行序不一致。配合多进程并行执行，最终 result.csv 的行顺序与输入 CSV 完全脱节，不利于结果定位与回归比对。 本 PR 将用例存储容器由 set 改为 list，保持 CSV 行序： - testcase_manager.py: testcases 由 Set 改为 List，add → append，get() 返回 List - instance_base.py: flatten_testcases 由 Set 改为 List，union → extend - 各 object.py / profile_object.py: init_tasks 签名 Set → Iterable（向下兼容） - testcase_op.py: hash_cases_to_groups 签名 Set → Iterable 去重逻辑保持不变（TestcaseBase.__hash__ 基于 testcase_name，list 的 in / remove 行为与 set 一致）。 ### 该PR关联的issue https://gitcode.com/cann/ops-test-kit/issues/75 ### 希望检视人员了解: - init_tasks / hash_cases_to_groups 签名改为 Iterable 而非 List，set/list 均兼容，避免对调用方的破坏性 - list 的 in 查找为 O(n)，但用例量级（几十到几百）下无性能影响 - 单卡单进程（--dev 1 --pc 1）时 result.csv 严格按 CSV 行序输出；多进程模式下完成顺序仍会影响 result.csv 行序（属预期行为） ## 测试 <!--描述进行了哪些测试来验证你的改动。--> 使用 examples/case_store/aclnn/aclnn_add.csv（26 个用例）验证： - 单卡单进程（--dev 1 --pc 1）：26/26 PASS，result.csv 按 aclnnAdd_00 → aclnnAdd_25 严格保序 - 默认多进程（2 卡）：26/26 PASS，功能无回归 ## 文档更新 <!--如果这个PR包含文档的更新，请在这里指出。例如：更新了README.md文件。--> 无 ## 类型标签 <!-- [x] 表示选中 --> - [ ] Bug修复 - [x] 新特性 - [ ] 性能优化 - [ ] 文档更新 - [ ] 其他，请描述： See merge request: cann/ops-test-kit!78 | 1 天前 | |
feat(ttk): 通路验证四项能力补齐 + 三方性能统计修正 Co-authored-by: tangpingchuan<tangpingchuan@huawei.com> # message auto-generated for no-merge-commit merge: !81 merge master into master feat(ttk): 通路验证四项能力补齐 + 三方性能统计修正 Created-by: zl_hw Commit-by: tangpingchuan Merged-by: cann-robot Description: <!-- 感谢您的合入申请! --> ### 当前PR是否有AI参与: [x] 否 [ ] 是 __1. AI Agent 平台: __2. AI 模型: __3. Prompt上下文 : ### PR功能描述 / 为什么需要这个合入**: 1、支持可选入参在必选入参前场景下按序输入算子入参 2、支持golden侧能获取golden-mode模式，决策是三方场景还是非三方场景 3、新增quant量化判据，对标新精度标准要求，支持量化类型精度判断 4、优化竞品性能统计算法，去除冗余统计，确保只统计kernel耗时 5、geir支持自实现compare脚本加载 6、修复GPU server 卡死问题 ### 该PR关联的issue *(格式为fixes #<issue号>, 或者resolves #<issue号>)*: fixes # ### 希望检视人员了解: ## 测试 自测gnsq和nzv算子，kernel/geir通路验证OK ## 文档更新 <!--如果这个PR包含文档的更新，请在这里指出。例如：更新了README.md文件。--> ## 类型标签 <!-- [x] 表示选中 --> - [ ] Bug修复 - [ ] 新特性 - [ ] 性能优化 - [ ] 文档更新 - [x] 其他，请描述： See merge request: cann/ops-test-kit!81 | 1 天前 | |
feat(ttk): 通路验证四项能力补齐 + 三方性能统计修正 Co-authored-by: tangpingchuan<tangpingchuan@huawei.com> # message auto-generated for no-merge-commit merge: !81 merge master into master feat(ttk): 通路验证四项能力补齐 + 三方性能统计修正 Created-by: zl_hw Commit-by: tangpingchuan Merged-by: cann-robot Description: <!-- 感谢您的合入申请! --> ### 当前PR是否有AI参与: [x] 否 [ ] 是 __1. AI Agent 平台: __2. AI 模型: __3. Prompt上下文 : ### PR功能描述 / 为什么需要这个合入**: 1、支持可选入参在必选入参前场景下按序输入算子入参 2、支持golden侧能获取golden-mode模式，决策是三方场景还是非三方场景 3、新增quant量化判据，对标新精度标准要求，支持量化类型精度判断 4、优化竞品性能统计算法，去除冗余统计，确保只统计kernel耗时 5、geir支持自实现compare脚本加载 6、修复GPU server 卡死问题 ### 该PR关联的issue *(格式为fixes #<issue号>, 或者resolves #<issue号>)*: fixes # ### 希望检视人员了解: ## 测试 自测gnsq和nzv算子，kernel/geir通路验证OK ## 文档更新 <!--如果这个PR包含文档的更新，请在这里指出。例如：更新了README.md文件。--> ## 类型标签 <!-- [x] 表示选中 --> - [ ] Bug修复 - [ ] 新特性 - [ ] 性能优化 - [ ] 文档更新 - [x] 其他，请描述： See merge request: cann/ops-test-kit!81 | 1 天前 | |
feat: XPU 硬件抽象 + 远程执行 + 精度标准2.1 Co-authored-by: dengguojie<dengguojie@huawei.com> # message auto-generated for no-merge-commit merge: !28 merge dev-1-integration into master feat: XPU 硬件抽象 + 远程执行 + 精度标准2.1 Created-by: dengguojie Commit-by: dengguojie Merged-by: cann-robot Description: ## 描述 新增 ttk/remote/ 远程执行框架： - server/: xpu_server, executor, execution_container, container, config(+xpu_server.yaml), Dockerfile.{torch,tf}, executor_main, README - client/: dispatcher, endpoint_view, xpu_collector, heartbeat, heartbeat_manager, health_file, config, tls(mTLS) - scripts/gen_tls_certs.sh framework_api/backends/ 硬件抽象： - 新增 base(Backend ABC)、torch_backend；gpu_backend 重命名为 xpu_backend - profiler 改为 backend 数据驱动；新增 CpuTorchBackend + --cpu CLI - config/: 新增 loader、default.yaml（hardware profile 探测） comparison/ 精度比对： - 新增 cross_check（output/golden/third_party 三方比对）、stat_rel_err、resolve - registry form-based 分派重构 - npu/op/comparison.py：comparing() 日志 with {standard}，删 DYN_OFF 长度断言 test_spec / plugin： - loader 惰性加载（语法错误仅对 __spec__ 文件记 error）；新增 validator、manager - plugin_loader 重构，删 builtin_plugin_loader - 删 user_defined_modules/（旧注册机制） - 新增 utilities/func_dispatch（统一分派 helper） npu/op: output_generation、profiling 接入 cross_check + third_party(tensorflow→tf 规范化)。 ## 关联的Issue <!-- 如果这个PR是为了解决特定的Issue，请在这里提供Issue链接。例如：关联Issue #000--> ## 测试 <!--描述进行了哪些测试来验证你的改动。--> ## 文档更新 <!--如果这个PR包含文档的更新，请在这里指出。例如：更新了README.md文件。--> ## 类型标签 <!-- [x] 表示选中 --> - [ ] Bug修复 - [x] 新特性 - [ ] 性能优化 - [ ] 文档更新 - [ ] 其他，请描述： See merge request: cann/ops-test-kit!28 | 26 天前 | |
修复mix算子的profiling解析失败，性能为unknown Co-authored-by: lichunxiang8<lichunxiang8@huawei.com> # message auto-generated for no-merge-commit merge: !18 merge master into master 修复mix算子的profiling解析失败，性能为unknown Created-by: lichunxiang8 Commit-by: lichunxiang8 Merged-by: cann-robot Description: ## 描述 修复mix算子的profiling解析失败，性能为unknown 性能解析关键字增加 "KERNEL_MIX_AIC", "KERNEL_MIX_AIV" ## 关联的Issue https://gitcode.com/cann/ops-test-kit/issues/17 ## 测试 <!--描述进行了哪些测试来验证你的改动。--> ## 文档更新 <!--如果这个PR包含文档的更新，请在这里指出。例如：更新了README.md文件。--> ## 类型标签 <!-- [x] 表示选中 --> - [x] Bug修复 - [ ] 新特性 - [ ] 性能优化 - [ ] 文档更新 - [ ] 其他，请描述： See merge request: cann/ops-test-kit!18 | 1 个月前 |
| 文件 | 最后提交记录 | 最后更新时间 |
|---|---|---|
| 1 个月前 | ||
| 2 个月前 | ||
| 1 天前 | ||
| 12 天前 | ||
| 1 天前 | ||
| 1 天前 | ||
| 1 天前 | ||
| 26 天前 | ||
| 1 个月前 |