| Files | Last commit | Last update |
|---|---|---|
[feat]hccl支持channel/res模块日志可配置 Co-authored-by: wangjiawen16<wangjiawen16@h-partners.com> # message auto-generated for no-merge-commit merge: !4720 merge feature/hccp-log into master [feat]hccl支持channel/res模块日志可配置 Created-by: wangjiawen16 Commit-by: wangjiawen16 Merged-by: cann-robot Description: ## 描述 本 PR 引入"按域/模块可开关"的调试日志能力,统一资源类日志打印资源 ID(qpn),降低默认日志量。 ### 改动动机 1. hccp/hccm 数据面高频路径(WR/send/recv、建链后每请求级调用)默认即打印 INFO 级日志,批量收发场景刷屏并显著损耗性能。 2. 控制面资源申请/销毁日志(Create/Destroy Qp、Stream/Notify/Event 等)此前打印进程内指针,跨进程/跨重启无法与设备侧资源对账。 3. 原有 run 日志无法按模块独立开关,调测时需整体开启,噪声大。 ### 改动方法 1. 新增 PLF 调试配置解析(plf_debug_config.cc/.h、config_plf_log_v2.h): - 环境变量 HCCL_DEBUG_CONFIG 支持域:ALG、TASK、RESOURCE; - 环境变量 HCOMM_DEBUG_CONFIG 支持域:TASK、RESOURCE、DATA_OP、CHANNEL; - 取值格式:逗号分隔的域关键字(大小写不敏感),支持前缀 ^ 取反(配置的域关闭、其余打开);非法域项打印错误日志并返回 0; - 掩码位含义:bit0 ALG、bit1 TASK、bit2 RES、bit3 DATA_OP、bit4 CHANNEL。 2. 新增 PLF_CONFIG_INFO / PLF_CONFIG_DEBUG 宏:命中对应域掩码时走 run 日志,否则走普通 INFO/DEBUG;数据面高频路径补充 if (GetPlfDebugConfigValue() & <DOMAIN>) 门控以默认静默。 3. 新增 hccp 模块级日志开关(inc/private/network/log/config_log.h、perf.h):HccpSetDebugConfig/HccpGetDebugConfig + hccp_info_*/hccp_warn_* 模块宏 + PERF_TRACE 性能探针;模块位定义见 ra_rs_opcode.h(bit0 INIT、bit1 RDMA_OP、bit2 SOCKET_OP、bit3 OTHERS)。 4. 新增对外接口 RaSetDebugConfig(info, debugConfig)(inc/network/hccp.h,经 ra.map 导出),三分支:PEER_ONLINE 直写、OFFLINE 经 RaHdcSetDebugConfig 下发(ra_hdc.map 导出)、非法 mode 返回 -EPROTONOSUPPORT。 5. 资源类日志统一打印 qpn:Create/Destroy Qp、批量销毁 Qp 等日志由打印指针/vector 地址改为打印 qpn。 ## 变更类型 请选择本次引入的变更类型: - [ ] 🐛 Bug修复 - [x] ✨ 新特性 - [ ] 🚀 性能优化 - [ ] 📝 文档更新 - [ ] 📋 其他,请描述: ## 关联的Issue NA ## 测试 已完成的测试用例和场景: 1. 为 TransportStatusToChannelStatus 补充 ut_channel_roce_factory.cc 用例 2. 更新受影响的既有 UT:ut_env_config.cc、ut_rtsq_a5.cc、ut_aicpu_task_utils.cc、ut_aicpu_task_cache_entry.cc、ut_include/user_log.h 等 补充的UT用例: 3. 为 RaSetDebugConfig 补充 tc_host.c 三分支用例:参数校验(info 空 / phyId 越界)、PEER_ONLINE 直写生效(HccpGetDebugConfig 校验)、OFFLINE 经 RaHdcSetDebugConfig 下发、非法 mode 返回错误。 4.RDV 以及本地测试已经验证通过 ## 文档更新 NA ## 合入检查 <!-- 在正式合入前,请做好必要的代码测试,用例补充,软件代码风格检查等。提高合入效率。--> <!-- [x] 表示选中 --> - [ ] 🧐 已经详细阅读了贡献指南(CONTRIBUTING.md),并遵守了其中的所有规定,包括但不限于commit message的格式、无效commit的合并等 - [ ] 🔍 邀请 committer评论/lgtm前的必要检查 - [ ] 🏷️ 标题中使用了合适的类型标签(如:[feat], [fix]) - [ ] 📄 代码修改内容已简要描述,相关文档已更新 - [ ] 📝 代码注释已更新,代码遵循项目整体代码风格 - [ ] 🧪 代码UT测试已更新,覆盖率已达标 - [ ] 🔬 验证方法已更新到"测试"部分 - [ ] 🛠️ 代码已通过静态分析工具检查,无错误 - [ ] 👥 代码检视/code review/同行评议和必要的代码串讲,确保代码质量 - [ ] ✅ 代码检视意见已处理或答复,无未处理的检视意见 - [ ] 🚀 预约 前冒烟 用例前的必要检查 - [ ] ✔️ 代码已有committer的/lgtm 和 模块committer的/lgtm评论 - [ ] 🔧 代码已通过compile,编译无错误,无告警 - [ ] 🖥️ 代码已通过基本功能本地测试或者在线测试,确保基本功能正常 - [ ] 🎯 预约 approver评论/approve,正式合入前的必要检查 - [ ] 📊 前冒烟 用例已全量通过 - [ ] 📦 新增功能已同步补充基本功能测试用例到前冒烟里 See merge request: cann/hcomm!4720 | 2 months ago | |
[feat] experimental roce内存导入按(EndpointDesc,pid)区分远端进程 Co-authored-by: hanjf<hanjiafeng1@huawei.com> # message auto-generated for no-merge-commit merge: !5504 merge roce-pid-exp into master [feat] experimental roce内存导入按(EndpointDesc,pid)区分远端进程 Created-by: SunHaiyan Commit-by: hanjf Merged-by: cann-robot Description: ## 描述 RoCE 注册内存远端导入: experimental/base_comm 实现中远端内存管理器仅以 EndpointDesc(网卡)为 key,同一网卡上不同远端进程导出的内存会被误判为 already imported(HCCL_E_AGAIN)。本 PR 将远端管理 key 扩展为 (EndpointDesc, pid): - 导出侧 GetMemDesc 在 memDesc 尾部追加本进程 pid - 导入侧 GetParamsFromMemDesc 解析 pid,MemoryImport/MemoryUnimport 按 (EndpointDesc, pid) 分组登记远端缓冲 背景:src/base_comm 主实现已由 #5149(远端内存实例级管理:BuildMemDesc/ParseMemDesc + EndpointRemoteRegedMemMgr)实现同等能力;本 PR 将该修复同步到 experimental/base_comm 平行实现(该目录保持独立演进,master 未同步重构)。 同时修复原 PR #4992 检视意见: - [HIGH] MemoryImport/MemoryUnimport 加锁保护 remoteRdmaRmaBufferMgrs_(对齐 src 版 memMtx_) - [HIGH] MemoryUnimport 引用归零后清理空管理器条目,避免 map 条目泄漏增长 原 PR [#4992](https://gitcode.com/cann/hcomm/pull/4992) 因 CI precommit 组件在 rebase/force-push 后仍按旧文件列表检查而无法恢复(head 与 diff 均已正确更新,仅流水线文件列表残留旧 5 文件),故重开本 PR 接续,评审记录见原 PR。 ## 变更类型 - [x] 🐛 Bug修复 - [x] ✨ 新特性 ## 关联的Issue NA(接手并替代原 PR #4992,7 条检视意见处置见"描述"与原 PR) ## 测试 已完成的测试用例和场景: 1. 流水线通过 2.rdv通过 补充的UT用例: - NA(experimental 目录无 UT 设施,行为对齐 src 版已被 master UT 覆盖的实现) ## 文档更新 无 See merge request: cann/hcomm!5504 | 1 month ago | |
[build] License Header Co-authored-by: ouyangcaike<ouyangcaike@h-partners.com> # message auto-generated for no-merge-commit merge: !4556 merge build/oat into master [build] License Header Created-by: ouyangcaike Commit-by: ouyangcaike Merged-by: cann-robot Description: ## 描述 <!--在这里详细描述你的改动,包括改动的原因和所采取的方法。--> 1. 全仓C/C++、CMake、Python、Shell文件规范头部License的使用 ## 变更类型 请选择本次引入的变更类型: <!-- [x] 表示选中 --> - [ ] 🐛 Bug修复 - [ ] ✨ 新特性 - [ ] 🚀 性能优化 - [ ] 📝 文档更新 - [x] 📋 其他,请描述:工程 ## 关联的Issue <!-- 如果这个PR是为了解决特定的Issue,请在这里提供Issue链接。--> <!-- 如果这个PR不涉及Issue,可填写"NA"。--> NA ## 测试 <!--描述进行了哪些测试来验证你的改动。包括但不限于构造对应xx测试用例、二级冒烟、算子泛化等。--> 已完成的测试用例和场景: 1. 编译成功 2. 全量拦截项通过 补充的UT用例: NA ## 文档更新 <!--如果这个PR包含文档的更新,请在这里指出。例如:更新了README.md文件。--> NA ## 合入检查 <!-- 在正式合入前,请做好必要的代码测试,用例补充,软件代码风格检查等。提高合入效率。--> <!-- [x] 表示选中 --> - [x] 🧐 已经详细阅读了贡献指南(CONTRIBUTING.md),并遵守了其中的所有规定,包括但不限于commit message的格式、无效commit的合并等 - [x] 🔍 邀请 committer评论 /lgtm前的必要检查 - [x] 🏷️ 标题中使用了合适的类型标签(如:[feat], [fix]) - [x] 📄 代码修改内容已简要描述,相关文档已更新 - [x] 📝 代码注释已更新,代码遵循项目整体代码风格 - [x] 🧪 代码UT测试已更新,覆盖率已达标 - [x] 🔬 验证方法已更新到"测试"部分 - [x] 🛠️ 代码已通过静态分析工具检查,无错误 - [x] 👥 代码检视/code review/同行评议和必要的代码串讲,确保代码质量 - [x] ✅ 代码检视意见已处理或答复,无未处理的检视意见 - [x] 🚀 预约 前冒烟 用例前的必要检查 - [x] ✔️ 代码已有committer的/lgtm 和 模块committer的/lgtm评论 - [x] 🔧 代码已通过compile,编译无错误,无告警 - [x] 🖥️ 代码已通过基本功能本地测试或者在线测试,确保基本功能正常 - [x] 🎯 预约 approver评论/approve,正式合入前的必要检查 - [x] 📊 前冒烟 用例已全量通过 - [x] 📦 新增功能已同步补充基本功能测试用例到前冒烟里 See merge request: cann/hcomm!4556 | 3 months ago | |
[build] 符号隐藏仅在 Release 构建下生效 Co-authored-by: ouyangcaike<ouyangcaike@h-partners.com> # message auto-generated for no-merge-commit merge: !5374 merge build/symbol into master [build] 符号隐藏仅在 Release 构建下生效 Created-by: ouyangcaike Commit-by: ouyangcaike Merged-by: cann-robot Description: ## 描述 <!--在这里详细描述你的改动,包括改动的原因和所采取的方法。--> ### 问题背景 白名单符号导出控制(-Wl,--version-script 挂载 .map)原以 NOT ENABLE_TEST 为挂载条件:仅 UT/ST 构建保留动态符号,Debug、ASAN、GCOV 等非 Release 构建的符号仍被隐藏,影响这些场景下的打桩、诊断与动态链接调测。 ### 改动内容 - 符号隐藏挂载条件由 if(NOT ENABLE_TEST) 统一调整为 if(CMAKE_BUILD_TYPE STREQUAL "Release") - 注释语义同步更新:“UT/ST 打桩依赖动态符号,不挂载” → “非 Release 模式依赖动态符号,不挂载” - 覆盖 ascend910(hccl_alg、aicpu_custom、ccl_kernel、hcomm、ccl_kernel_plf、hccl_plf、hccd、rs 等)、ascend950(ccl_dpu、hccl_v2)及 rdma_agent、netco 等所有挂载 version-script 的目标,行为一致 ### 改动效果 Release 发布构建行为不变(仅导出白名单符号);非 Release 构建保留完整动态符号,便于打桩与问题定位。 ## 变更类型 请选择本次引入的变更类型: <!-- [x] 表示选中 --> - [ ] 🐛 Bug修复 - [ ] ✨ 新特性 - [ ] 🚀 性能优化 - [ ] 📝 文档更新 - [x] 📋 其他,请描述:工程构建 ## 关联的Issue <!-- 如果这个PR是为了解决特定的Issue,请在这里提供Issue链接。--> <!-- 如果这个PR不涉及Issue,可填写"NA"。--> NA ## 测试 <!--描述进行了哪些测试来验证你的改动。包括但不限于构造对应xx测试用例、二级冒烟、算子泛化等。--> 已完成的测试用例和场景: 1. 编译通过 2. 全量拦截任务通过 补充的UT用例: NA ## 文档更新 <!--如果这个PR包含文档的更新,请在这里指出。例如:更新了README.md文件。--> NA ## 合入检查 <!-- 在正式合入前,请做好必要的代码测试,用例补充,软件代码风格检查等。提高合入效率。--> <!-- [x] 表示选中 --> - [x] 🧐 已经详细阅读了贡献指南(CONTRIBUTING.md),并遵守了其中的所有规定,包括但不限于commit message的格式、无效commit的合并等 - [x] 🔍 邀请 committer评论 /lgtm前的必要检查 - [x] 🏷️ 标题中使用了合适的类型标签(如:[feat], [fix]) - [x] 📄 代码修改内容已简要描述,相关文档已更新 - [x] 📝 代码注释已更新,代码遵循项目整体代码风格 - [x] 🧪 代码UT测试已更新,覆盖率已达标 - [x] 🔬 验证方法已更新到"测试"部分 - [x] 🛠️ 代码已通过静态分析工具检查,无错误 - [x] 👥 代码检视/code review/同行评议和必要的代码串讲,确保代码质量 - [x] ✅ 代码检视意见已处理或答复,无未处理的检视意见 - [x] 🚀 预约 前冒烟 用例前的必要检查 - [x] ✔️ 代码已有committer的/lgtm 和 模块committer的/lgtm评论 - [x] 🔧 代码已通过compile,编译无错误,无告警 - [x] 🖥️ 代码已通过基本功能本地测试或者在线测试,确保基本功能正常 - [x] 🎯 预约 approver评论/approve,正式合入前的必要检查 - [x] 📊 前冒烟 用例已全量通过 - [x] 📦 新增功能已同步补充基本功能测试用例到前冒烟里 See merge request: cann/hcomm!5374 | 1 month ago |
| Files | Last commit | Last update |
|---|---|---|
| 2 months ago | ||
| 1 month ago | ||
| 3 months ago | ||
| 1 month ago |