ge/tests/framework · CANN/ge

cann-robotfeat: 语言无关Custom Task Info 适配 OM2

文件	最后提交记录	最后更新时间
cmake	fix: precommit整改 Co-authored-by: yelongjian<yelongjian1@huawei.com> # message auto-generated for no-merge-commit merge: !3726 merge dev-precommit into develop fix: precommit整改 Created-by: yelongjian Commit-by: yelongjian Merged-by: cann-robot Description: # Pull Request ## 描述 precommit整改 ## 变更类型请选择本次引入的变更类型： <!-- [x] 表示选中 --> - [ ] 🐛 Bug 修复 - [ ] ✨ 新功能 - [x] 💄 代码风格更新（格式化，局部变量） - [ ] ♻️ 重构（既不修复错误也不增加功能的代码变动） - [ ] 📦 构建过程或辅助工具的变动 - [ ] 📝 文档内容更新 ## 关联的Issue <!-- 如果这个PR是为了解决特定的Issue，请在当前页面的右侧'关联Issue'部分添加相应Issue链接，并勾选'合并后关闭已关联的 Issue'选项。 --> ## 如何测试描述测试此变更的步骤和前提条件： 1.NA ## 核对清单 <!-- [x] 表示选中 --> - [x] 我的代码遵循了项目的代码风格 - [x] 我已对代码进行了自测 - [x] 我已更新了相关的文档 - [x] 我在标题中使用了合适的类型标签（如：`feat:`, `fix:`） - [x] 我已经详细阅读了贡献指南（CONTRIBUTING.md），并遵守了其中的所有规定，包括但不限于commit message的格式、无效commit的合并等 ## 其他信息在此添加任何其他关于本次 PR 的说明。 See merge request: cann/ge!3726	1 个月前
eager_style_graph_builder	fix: precommit整改 Co-authored-by: yelongjian<yelongjian1@huawei.com> # message auto-generated for no-merge-commit merge: !3726 merge dev-precommit into develop fix: precommit整改 Created-by: yelongjian Commit-by: yelongjian Merged-by: cann-robot Description: # Pull Request ## 描述 precommit整改 ## 变更类型请选择本次引入的变更类型： <!-- [x] 表示选中 --> - [ ] 🐛 Bug 修复 - [ ] ✨ 新功能 - [x] 💄 代码风格更新（格式化，局部变量） - [ ] ♻️ 重构（既不修复错误也不增加功能的代码变动） - [ ] 📦 构建过程或辅助工具的变动 - [ ] 📝 文档内容更新 ## 关联的Issue <!-- 如果这个PR是为了解决特定的Issue，请在当前页面的右侧'关联Issue'部分添加相应Issue链接，并勾选'合并后关闭已关联的 Issue'选项。 --> ## 如何测试描述测试此变更的步骤和前提条件： 1.NA ## 核对清单 <!-- [x] 表示选中 --> - [x] 我的代码遵循了项目的代码风格 - [x] 我已对代码进行了自测 - [x] 我已更新了相关的文档 - [x] 我在标题中使用了合适的类型标签（如：`feat:`, `fix:`） - [x] 我已经详细阅读了贡献指南（CONTRIBUTING.md），并遵守了其中的所有规定，包括但不限于commit message的格式、无效commit的合并等 ## 其他信息在此添加任何其他关于本次 PR 的说明。 See merge request: cann/ge!3726	1 个月前
easy_graph	fix: precommit整改 Co-authored-by: yelongjian<yelongjian1@huawei.com> # message auto-generated for no-merge-commit merge: !3726 merge dev-precommit into develop fix: precommit整改 Created-by: yelongjian Commit-by: yelongjian Merged-by: cann-robot Description: # Pull Request ## 描述 precommit整改 ## 变更类型请选择本次引入的变更类型： <!-- [x] 表示选中 --> - [ ] 🐛 Bug 修复 - [ ] ✨ 新功能 - [x] 💄 代码风格更新（格式化，局部变量） - [ ] ♻️ 重构（既不修复错误也不增加功能的代码变动） - [ ] 📦 构建过程或辅助工具的变动 - [ ] 📝 文档内容更新 ## 关联的Issue <!-- 如果这个PR是为了解决特定的Issue，请在当前页面的右侧'关联Issue'部分添加相应Issue链接，并勾选'合并后关闭已关联的 Issue'选项。 --> ## 如何测试描述测试此变更的步骤和前提条件： 1.NA ## 核对清单 <!-- [x] 表示选中 --> - [x] 我的代码遵循了项目的代码风格 - [x] 我已对代码进行了自测 - [x] 我已更新了相关的文档 - [x] 我在标题中使用了合适的类型标签（如：`feat:`, `fix:`） - [x] 我已经详细阅读了贡献指南（CONTRIBUTING.md），并遵守了其中的所有规定，包括但不限于commit message的格式、无效commit的合并等 ## 其他信息在此添加任何其他关于本次 PR 的说明。 See merge request: cann/ge!3726	1 个月前
ge_graph_dsl	fix: precommit整改 Co-authored-by: yelongjian<yelongjian1@huawei.com> # message auto-generated for no-merge-commit merge: !3726 merge dev-precommit into develop fix: precommit整改 Created-by: yelongjian Commit-by: yelongjian Merged-by: cann-robot Description: # Pull Request ## 描述 precommit整改 ## 变更类型请选择本次引入的变更类型： <!-- [x] 表示选中 --> - [ ] 🐛 Bug 修复 - [ ] ✨ 新功能 - [x] 💄 代码风格更新（格式化，局部变量） - [ ] ♻️ 重构（既不修复错误也不增加功能的代码变动） - [ ] 📦 构建过程或辅助工具的变动 - [ ] 📝 文档内容更新 ## 关联的Issue <!-- 如果这个PR是为了解决特定的Issue，请在当前页面的右侧'关联Issue'部分添加相应Issue链接，并勾选'合并后关闭已关联的 Issue'选项。 --> ## 如何测试描述测试此变更的步骤和前提条件： 1.NA ## 核对清单 <!-- [x] 表示选中 --> - [x] 我的代码遵循了项目的代码风格 - [x] 我已对代码进行了自测 - [x] 我已更新了相关的文档 - [x] 我在标题中使用了合适的类型标签（如：`feat:`, `fix:`） - [x] 我已经详细阅读了贡献指南（CONTRIBUTING.md），并遵守了其中的所有规定，包括但不限于commit message的格式、无效commit的合并等 ## 其他信息在此添加任何其他关于本次 PR 的说明。 See merge request: cann/ge!3726	1 个月前
ge_running_env	test: 补充 api/atc、api/session/client、api/session/common/plugin 三个目录的 UT 覆盖率至 95%+ Co-authored-by: @SeasonChu<zhuxincheng2@huawei.com> # message auto-generated for no-merge-commit merge: !4064 merge utfix into develop test: 补充 api/atc、api/session/client、api/session/common/plugin 三个目录的 UT 覆盖率至 95%+ Created-by: SeasonChu Commit-by: @SeasonChu Merged-by: cann-robot Description: # Pull Request ## 描述根据覆盖率报告（coverage_result 2）补充 `api/atc/`、`api/session/client/`、`api/session/common/plugin/` 三个目录下源文件的 UT 用例，目标是将这三个目录的行覆盖率提升至 95% 以上。 ### 覆盖率提升情况 \| 目录 \| 文件 \| 修改前 \| 目标 \| \|------\|------\|--------\|------\| \| `api/atc/` \| `atc_option_map.cc` \| 83.3% \| 95%+ \| \| `api/atc/` \| `cmd_flag_info.cc` \| 95.4% \| 已达标 \| \| `api/atc/` \| `main_impl.cc` \| 85.1% \| 95%+ \| \| `api/atc/` \| `omg.cc` \| 85.1% \| 95%+ \| \| `api/session/client/` \| `ge_api.cc` \| 86.9% \| 95%+ \| \| `api/session/client/` \| `ge_api_v2.cc` \| 81.3% \| 95%+ \| \| `api/session/common/plugin/` \| `tbe_plugin_manager.cc` \| 88.6% \| 95%+ \| ### 变更内容 1. `tests/ge/ut/ge/plugin_manager/plugin_manager_unittest.cc`（+4 用例） - 覆盖 `tbe_plugin_manager.cc` 的 `LoadPluginSo`（含 framework_type）、`InitPreparation`、`FindParserUsedSo`（递归深度边界）、dlopen 失败路径 2. `tests/ge/ut/ge/session/ge_api_unittest.cc`（+6 用例） - 覆盖 `ge_api.cc` 的未初始化 API 路径、`ExecuteGraphWithStreamAsync`、`CompileGraph` 相关内存 API、`PrintOutputResult` 3. `tests/ge/ut/ge/session_v2/ge_api_v2_unittest.cc`（+11 用例） - 覆盖 `ge_api_v2.cc` 的 `AddGraph`/`AddGraphClone` 默认重载、`GraphDebugJSONPrint`、`PrintOutputResult` 多数据类型、内存 API 成功路径、slice schedule 不支持路径 4. `tests/ge/ut/ge/session/omg_omg_unittest.cc`（+28 用例） - 覆盖 `omg.cc` 的 `CheckOpNameMap`、`CheckInputFp16Nodes`、`StringToInt` 异常、`ParseOutNodes`、`FindParserSo`、`GetGroupName`、`ConvertOm` OM2 可视化 JSON 路径 5. `tests/ge/ut/ge/session/main_unittest.cc`（+47 用例） - 覆盖 `main_impl.cc` 的 flag 校验失败路径（output path、op_precision_mode、weight file 等）、`CheckFlags` 直接调用、`CheckPathWithName`、mode=1/6 转换路径、pyatc 命令识别 6. `tests/framework/ge_running_env/include/ge_running_env/atc_utils.h` - 补充 `AtcTest::TearDown` 中缺失的 FLAGS 重置（`buffer_optimize`、`enable_single_stream`、`enable_attr_compression`、`disable_reuse_memory`），保证新增用例间的状态隔离 ## 变更类型请选择本次引入的变更类型： <!-- [x] 表示选中 --> - [ ] 🐛 Bug 修复 - [ ] ✨ 新功能 - [ ] 💄 代码风格更新（格式化，局部变量） - [ ] ♻️ 重构（既不修复错误也不增加功能的代码变动） - [ ] 📦 构建过程或辅助工具的变动 - [x] 📝 文档内容更新 ## 关联的Issue <!-- 如果这个PR是为了解决特定的Issue，请在当前页面的右侧'关联Issue'部分添加相应Issue链接，并勾选'合并后关闭已关联的 Issue'选项。 --> ## 如何测试描述测试此变更的步骤和前提条件： ## 核对清单 <!-- [x] 表示选中 --> - [x] 我的代码遵循了项目的代码风格 - [x] 我已对代码进行了自测 - [ ] 我已更新了相关的文档 - [x] 我在标题中使用了合适的类型标签（如：`feat:`, `fix:`） - [x] 我已经详细阅读了贡献指南（CONTRIBUTING.md），并遵守了其中的所有规定，包括但不限于commit message的格式、无效commit的合并等 ## 其他信息 See merge request: cann/ge!4064	29 天前
ge_runtime_stub	feat: 语言无关Custom Task Info 适配 OM2 Co-authored-by: fary86<fary.fanrui@huawei.com> # message auto-generated for no-merge-commit merge: !4407 merge dev_custom_op_new into develop feat: 语言无关Custom Task Info 适配 OM2 Created-by: fary86 Commit-by: fary86 Merged-by: cann-robot Description: # Pull Request ## 描述 ### 变更摘要此 PR 为 OM2 模型管线新增了自定义算子（Custom Op）的完整支持。在数据结构侧，`Om2ModelData` 新增 `custom_kernel_binaries` 与 `custom_shared_libs` 字段；在打包阶段，`Om2PackageHelper` 新增 `CollectUsedCustomOpTypes` 遍历图中自定义算子类型并调用 `PortableOp::Serialize` 序列化算子二进制，同时封装自定义算子动态库入库；在代码生成阶段，新增 `MODEL_TASK_CUSTOM_KERNEL` 任务类型与 `CustomTaskCodeBuilder` 类，生成 `KernelCustTaskDistribute` 分发函数及 `DeserializeCustKernelBinaries` 反序列化辅助函数；在运行时阶段，`om2_model_executor.cc` 新增对自定义 so 的 `mmDlopen` 加载及自定义内核二进制到 `kernel_bin_info` 的合并。主要改动 - 新增 `CustomTaskCodeBuilder` 类与 `DISPATCH_CUSTOM_KERNEL` 分发类型：新增 `custom_task_code_builder.cc/h`，实现 `CustomTaskCodeBuilder` 类处理 `MODEL_TASK_CUSTOM_KERNEL` 任务，生成 `RenderDispatchCustomKernel` 等分发逻辑；`OpDispatchType` 枚举扩展增加 `DISPATCH_CUSTOM_KERNEL = 21`，`TaskDispatchInfo` 联合体新增 `CustomDispatchInfo custom` 字段 - 新增自定义算子二进制收集与序列化逻辑：`Om2PackageHelper` 新增 `CollectUsedCustomOpTypes`（遍历 root 图及游离子图收集 `CustomOpFactory` 注册的自定义算子类型）、`BuildCustomKernelBinaries`（调用 `PortableOp::Serialize` 序列化）、`BuildCustomSharedLibs`（读取自定义 op so 文件），并集成到 `BuildOm2ModelData` 流程中；同时重构多个 Build 方法接口，将分散的 `Om2ProgramBody`/`Om2ModelMeta`/`Om2ConstantsData` 等参数统一改为传递 `Om2ModelData` 引用 - 新增代码生成中的自定义算子运行时辅助代码：`stable_part_provider.cc` 新增 `kCreateClassCustomOpFactory` 与 `kCustomTaskHelpers` 两个 StablePart，分别生成 `CustomOpFactory` 类声明和 `CustKernelContextHolder`、`KernelCustTaskDistribute`、`DeserializeCustKernelBinaries` 等辅助函数；`program_generator.cc` 在存在自定义 kernel 时引入 `graph/custom_op.h` 头文件并嵌入相应 StablePart - 运行时支持自定义 so 加载与内核反序列化：`om2_model_executor.cc` 新增 `CustSharedLibInfo` 结构体，在 `HandleArchiveEntry` 中解析 `data/custom_ops/shared_libs` 和 `data/custom_ops/binaries_` 条目；模型加载时对自定义 so 执行 `mmDlopen`，并将 `custom_kernel_binaries` 合并到 `kernel_bin_info` 供后续 `DeserializeCustKernelBinaries` 使用 - 新增 `OM2_CUSTOM_KERNELS_DIR_FORMAT` 路径常量与 ZIP 序列化方法*：`om2_package_contants.h` 新增 `OM2_CUSTOM_KERNELS_DIR_FORMAT` 宏；`om2_zip_saver.cc` 新增 `SerializeCustomKernelBinaries` 和 `SerializeCustomKernelSharedLibs`，分别将自定义算子二进制和共享库写入 `data/custom_ops/` 目录下的 ZIP 条目 ## 变更类型请选择本次引入的变更类型： <!-- [x] 表示选中 --> - [ ] 🐛 Bug 修复 - [x] ✨ 新功能 - [ ] 💄 代码风格更新（格式化，局部变量） - [ ] ♻️ 重构（既不修复错误也不增加功能的代码变动） - [ ] 📦 构建过程或辅助工具的变动 - [ ] 📝 文档内容更新 ## 关联的Issue <!-- 如果这个PR是为了解决特定的Issue，请在当前页面的右侧'关联Issue'部分添加相应Issue链接，并勾选'合并后关闭已关联的 Issue'选项。 --> ## 如何测试描述测试此变更的步骤和前提条件： 1. 2. ## 核对清单 <!-- [x] 表示选中 --> - [ ] 我的代码遵循了项目的代码风格 - [ ] 我已对代码进行了自测 - [ ] 我已更新了相关的文档 - [ ] 我在标题中使用了合适的类型标签（如：`feat:`, `fix:`） - [ ] 我已经详细阅读了贡献指南（CONTRIBUTING.md），并遵守了其中的所有规定，包括但不限于commit message的格式、无效commit的合并等 ## 其他信息在此添加任何其他关于本次 PR 的说明。 See merge request: cann/ge!4407	3 天前
macro_utils	fix: precommit整改 Co-authored-by: yelongjian<yelongjian1@huawei.com> # message auto-generated for no-merge-commit merge: !3726 merge dev-precommit into develop fix: precommit整改 Created-by: yelongjian Commit-by: yelongjian Merged-by: cann-robot Description: # Pull Request ## 描述 precommit整改 ## 变更类型请选择本次引入的变更类型： <!-- [x] 表示选中 --> - [ ] 🐛 Bug 修复 - [ ] ✨ 新功能 - [x] 💄 代码风格更新（格式化，局部变量） - [ ] ♻️ 重构（既不修复错误也不增加功能的代码变动） - [ ] 📦 构建过程或辅助工具的变动 - [ ] 📝 文档内容更新 ## 关联的Issue <!-- 如果这个PR是为了解决特定的Issue，请在当前页面的右侧'关联Issue'部分添加相应Issue链接，并勾选'合并后关闭已关联的 Issue'选项。 --> ## 如何测试描述测试此变更的步骤和前提条件： 1.NA ## 核对清单 <!-- [x] 表示选中 --> - [x] 我的代码遵循了项目的代码风格 - [x] 我已对代码进行了自测 - [x] 我已更新了相关的文档 - [x] 我在标题中使用了合适的类型标签（如：`feat:`, `fix:`） - [x] 我已经详细阅读了贡献指南（CONTRIBUTING.md），并遵守了其中的所有规定，包括但不限于commit message的格式、无效commit的合并等 ## 其他信息在此添加任何其他关于本次 PR 的说明。 See merge request: cann/ge!3726	1 个月前
CMakeLists.txt	fix: precommit整改 Co-authored-by: yelongjian<yelongjian1@huawei.com> # message auto-generated for no-merge-commit merge: !3726 merge dev-precommit into develop fix: precommit整改 Created-by: yelongjian Commit-by: yelongjian Merged-by: cann-robot Description: # Pull Request ## 描述 precommit整改 ## 变更类型请选择本次引入的变更类型： <!-- [x] 表示选中 --> - [ ] 🐛 Bug 修复 - [ ] ✨ 新功能 - [x] 💄 代码风格更新（格式化，局部变量） - [ ] ♻️ 重构（既不修复错误也不增加功能的代码变动） - [ ] 📦 构建过程或辅助工具的变动 - [ ] 📝 文档内容更新 ## 关联的Issue <!-- 如果这个PR是为了解决特定的Issue，请在当前页面的右侧'关联Issue'部分添加相应Issue链接，并勾选'合并后关闭已关联的 Issue'选项。 --> ## 如何测试描述测试此变更的步骤和前提条件： 1.NA ## 核对清单 <!-- [x] 表示选中 --> - [x] 我的代码遵循了项目的代码风格 - [x] 我已对代码进行了自测 - [x] 我已更新了相关的文档 - [x] 我在标题中使用了合适的类型标签（如：`feat:`, `fix:`） - [x] 我已经详细阅读了贡献指南（CONTRIBUTING.md），并遵守了其中的所有规定，包括但不限于commit message的格式、无效commit的合并等 ## 其他信息在此添加任何其他关于本次 PR 的说明。 See merge request: cann/ge!3726	1 个月前