Star849

Star849

cann-robotmodified md file(aclnn*.md and README.md)

9d227114创建于 7月7日历史提交

文件	最后提交记录	最后更新时间
docs	modified md file(aclnn.md and README.md) Co-authored-by: duhuiping<duhuiping@h-partners.com> # message auto-generated for no-merge-commit merge: !7121 merge 9.1.0 into 9.1.0 modified md file(aclnn.md and README.md) Created-by: gitee-duhuiping Commit-by: duhuiping Merged-by: cann-robot Description: ## 描述 1. Updated the constraints on the C and group parameters in aclnnGroupNormBackward.md. 2. Updated the calculation formula and parameter types of the lp_norm_v2 operator, and updated the parameter description of aclnn. 3. Updated the case of parameter names in the README.md file of renorm. 4. Updated the calculation formula of sync_batch_norm_backward_elemt and added the constraints on the combination of data types in the README file. 5. Updated the attribute parameter types and default values in the README file of sync_batch_norm_backward_elemt. ## 关联的Issue [#3701](https://gitcode.com/cann/ops-nn/issues/3701) [#3702](https://gitcode.com/cann/ops-nn/issues/3702) [#3693](https://gitcode.com/cann/ops-nn/issues/3693) ## 测试 Only involves updating the MD document description, does not involve testing. ## 文档更新 docs/zh/op_list.md norm/group_norm_grad/docs/aclnnGroupNormBackward.md norm/lp_norm_v2/README.md norm/lp_norm_v2/docs/aclnnNorm.md norm/renorm/README.md norm/sync_batch_norm_backward_elemt/README.md norm/sync_batch_norm_backward_elemt/docs/aclnnBatchNormElemtBackward.md norm/sync_batch_norm_backward_elemt/docs/aclnnBatchNormElemtBackward.md ## 类型标签 <!-- [x] 表示选中 --> - [ ] Bug修复 - [ ] 新特性 - [ ] 性能优化 - [x] 文档更新 - [ ] 其他，请描述： ## AI/Agent生成声明 <!-- [x] 表示选中 --> - [ ] AI辅助编写 See merge request: cann/ops-nn!7121	1 个月前
examples	SyncBatchNorm类算子支持Ascend950 Co-authored-by: wrzwrz123<wangrunze20@h-partners.com> # message auto-generated for no-merge-commit merge: !2230 merge master into master SyncBatchNorm类算子支持Ascend950 Created-by: hahaha22 Commit-by: wrzwrz123 Merged-by: cann-robot Description: ## 描述 <!--在这里详细描述你的改动，包括改动的原因和所采取的方法。--> SyncBatchNorm类算子支持Ascend950 ## 关联的Issue <!-- 如果这个PR是为了解决特定的Issue，请在这里提供Issue链接。例如：关联Issue #000--> [#1502](https://gitcode.com/cann/ops-nn/issues/1502) ## 测试 <!--描述进行了哪些测试来验证你的改动。--> ## 文档更新 <!--如果这个PR包含文档的更新，请在这里指出。例如：更新了README.md文件。--> 更新了SyncBatchNorm类算子的README.md文档 ## 类型标签 <!-- [x] 表示选中 --> - [ ] Bug修复 - [x] 新特性 - [ ] 性能优化 - [ ] 文档更新 - [ ] 其他，请描述： See merge request: cann/ops-nn!2230	4 个月前
op_api	SyncBatchNorm类算子支持Ascend950 Co-authored-by: wrzwrz123<wangrunze20@h-partners.com> # message auto-generated for no-merge-commit merge: !2230 merge master into master SyncBatchNorm类算子支持Ascend950 Created-by: hahaha22 Commit-by: wrzwrz123 Merged-by: cann-robot Description: ## 描述 <!--在这里详细描述你的改动，包括改动的原因和所采取的方法。--> SyncBatchNorm类算子支持Ascend950 ## 关联的Issue <!-- 如果这个PR是为了解决特定的Issue，请在这里提供Issue链接。例如：关联Issue #000--> [#1502](https://gitcode.com/cann/ops-nn/issues/1502) ## 测试 <!--描述进行了哪些测试来验证你的改动。--> ## 文档更新 <!--如果这个PR包含文档的更新，请在这里指出。例如：更新了README.md文件。--> 更新了SyncBatchNorm类算子的README.md文档 ## 类型标签 <!-- [x] 表示选中 --> - [ ] Bug修复 - [x] 新特性 - [ ] 性能优化 - [ ] 文档更新 - [ ] 其他，请描述： See merge request: cann/ops-nn!2230	4 个月前
op_graph	增加SyncBatchNorm类算子proto目录下的cmake文件，删除proto多余头文件 Co-authored-by: wrzwrz123<wangrunze20@h-partners.com> # message auto-generated for no-merge-commit merge: !3821 merge master into master 增加SyncBatchNorm类算子proto目录下的cmake文件，删除proto多余头文件 Created-by: hahaha22 Commit-by: wrzwrz123 Merged-by: cann-robot Description: ## 描述 <!--在这里详细描述你的改动，包括改动的原因和所采取的方法。--> 增加SyncBatchNorm类算子proto目录下的cmake文件,proto删除多余头文件。没有该cmake会导致cann包中算子proto的所在位置不合理。 ## 关联的Issue <!-- 如果这个PR是为了解决特定的Issue，请在这里提供Issue链接。例如：关联Issue #000--> ## 测试 <!--描述进行了哪些测试来验证你的改动。--> 冒烟、ST测试OK ## 文档更新 <!--如果这个PR包含文档的更新，请在这里指出。例如：更新了README.md文件。--> ## 类型标签 <!-- [x] 表示选中 --> - [x] Bug修复 - [ ] 新特性 - [ ] 性能优化 - [ ] 文档更新 - [ ] 其他，请描述： See merge request: cann/ops-nn!3821	3 个月前
op_host	remove simplified_key, default value is 0 Co-authored-by: cong-jiyu<congjiyu@h-partners.com> # message auto-generated for no-merge-commit merge: !4892 merge master into master remove simplified_key, default value is 0 Created-by: cong-jiyu Commit-by: cong-jiyu Merged-by: cann-robot Description: ## 描述当simplified_key中属性只有default=0，且ascendc_config中配置了算子，那么simplified_key.ini文件可以删除，因为默认值为0. 修改了ascendc_config.json文件，将算子host/config中配置了soc，但是未在ascendc_config.json中的算子补充上去。 ## 关联的Issue [#1985](https://gitcode.com/cann/ops-nn/issues/1985) ## 测试编译950、910bpass ## 文档更新更新了ascendc_config.json配置了算子的simplified_key的ini文件 ## 类型标签 <!-- [x] 表示选中 --> - [ ] Bug修复 - [ ] 新特性 - [ ] 性能优化 - [x] 文档更新 - [ ] 其他，请描述： See merge request: cann/ops-nn!4892	2 个月前
op_kernel	添加 sync_batch_norm_backward 算子UT以及confusion_softmax_grad 算子分类修正 Co-authored-by: cai-chengchao<caichengchao1@h-partners.com> # message auto-generated for no-merge-commit merge: !4485 merge sync_ut into master 添加 sync_batch_norm_backward 算子UT以及confusion_softmax_grad 算子分类修正 Created-by: cai-chengchao Commit-by: cai-chengchao Merged-by: cann-robot Description: ## 描述 1、 `sync_batch_norm_backward_elemt` 和 `sync_batch_norm_backward_reduce` 算子添加单元测试，并调整算子代码以适配测试框架。 2、 op_list.md中`confusion_softmax_grad` 算子分类修正。两类修改合并一个pr，减少代码上库工作量 ### 改动内容 1. 新增单元测试文件 - `norm/sync_batch_norm_backward_elemt/tests/ut/op_kernel/test_sync_batch_norm_backward_elemt_apt.cpp` - `norm/sync_batch_norm_backward_elemt/tests/ut/op_kernel/CMakeLists.txt` - `norm/sync_batch_norm_backward_reduce/tests/ut/op_kernel/test_sync_batch_norm_backward_reduce_apt.cpp` - `norm/sync_batch_norm_backward_reduce/tests/ut/op_kernel/CMakeLists.txt` 2. 算子代码调整 - 在 APT 文件中使用 `GET_TILING_DATA_WITH_STRUCT` 替换 `GET_TILING_DATA`，以支持结构化 tiling 数据获取 - 在 dag 和 tilingdata 头文件中添加 namespace 封装（`SyncBatchNormBackwardElemt` / `SyncBatchNormBackwardReduce`） - 添加必要的 using 声明以简化代码 3. 文档修正 - 将 `confusion_softmax_grad` 算子分类从 `norm` 改为 `activation` ### 改动原因为算子添加单元测试以提高代码质量和可维护性，同时调整算子代码以适配测试框架的要求。 ### 改动方法 - 定义测试用的 tiling 数据结构 `SyncBatchNormBackwardElemtTilingData` 和 `SyncBatchNormBackwardReduceTilingData` - 使用 gtest 测试框架编写单元测试用例 - 使用 `ICPU_RUN_KF` 宏在 CPU 模式下运行算子 kernel - 通过 namespace 封装避免命名冲突 ## 关联的Issue - #2652 ## 测试 - 新增单元测试 `test_case_fp32_1`，测试 FP32 数据类型下的算子计算 - 测试在 ascend950pr_9599 平台上执行 ## 文档更新 - 更新 `docs/zh/op_list.md`，修正 `confusion_softmax_grad` 算子的分类 ## 类型标签 - [ ] Bug修复 - [x] 新特性 - [ ] 性能优化 - [x] 文档更新 - [ ] 其他，请描述： See merge request: cann/ops-nn!4485	3 个月前
tests	添加 sync_batch_norm_backward 算子UT以及confusion_softmax_grad 算子分类修正 Co-authored-by: cai-chengchao<caichengchao1@h-partners.com> # message auto-generated for no-merge-commit merge: !4485 merge sync_ut into master 添加 sync_batch_norm_backward 算子UT以及confusion_softmax_grad 算子分类修正 Created-by: cai-chengchao Commit-by: cai-chengchao Merged-by: cann-robot Description: ## 描述 1、 `sync_batch_norm_backward_elemt` 和 `sync_batch_norm_backward_reduce` 算子添加单元测试，并调整算子代码以适配测试框架。 2、 op_list.md中`confusion_softmax_grad` 算子分类修正。两类修改合并一个pr，减少代码上库工作量 ### 改动内容 1. 新增单元测试文件 - `norm/sync_batch_norm_backward_elemt/tests/ut/op_kernel/test_sync_batch_norm_backward_elemt_apt.cpp` - `norm/sync_batch_norm_backward_elemt/tests/ut/op_kernel/CMakeLists.txt` - `norm/sync_batch_norm_backward_reduce/tests/ut/op_kernel/test_sync_batch_norm_backward_reduce_apt.cpp` - `norm/sync_batch_norm_backward_reduce/tests/ut/op_kernel/CMakeLists.txt` 2. 算子代码调整 - 在 APT 文件中使用 `GET_TILING_DATA_WITH_STRUCT` 替换 `GET_TILING_DATA`，以支持结构化 tiling 数据获取 - 在 dag 和 tilingdata 头文件中添加 namespace 封装（`SyncBatchNormBackwardElemt` / `SyncBatchNormBackwardReduce`） - 添加必要的 using 声明以简化代码 3. 文档修正 - 将 `confusion_softmax_grad` 算子分类从 `norm` 改为 `activation` ### 改动原因为算子添加单元测试以提高代码质量和可维护性，同时调整算子代码以适配测试框架的要求。 ### 改动方法 - 定义测试用的 tiling 数据结构 `SyncBatchNormBackwardElemtTilingData` 和 `SyncBatchNormBackwardReduceTilingData` - 使用 gtest 测试框架编写单元测试用例 - 使用 `ICPU_RUN_KF` 宏在 CPU 模式下运行算子 kernel - 通过 namespace 封装避免命名冲突 ## 关联的Issue - #2652 ## 测试 - 新增单元测试 `test_case_fp32_1`，测试 FP32 数据类型下的算子计算 - 测试在 ascend950pr_9599 平台上执行 ## 文档更新 - 更新 `docs/zh/op_list.md`，修正 `confusion_softmax_grad` 算子的分类 ## 类型标签 - [ ] Bug修复 - [x] 新特性 - [ ] 性能优化 - [x] 文档更新 - [ ] 其他，请描述： See merge request: cann/ops-nn!4485	3 个月前
CMakeLists.txt	SyncBatchNorm类算子支持Ascend950 Co-authored-by: wrzwrz123<wangrunze20@h-partners.com> # message auto-generated for no-merge-commit merge: !2230 merge master into master SyncBatchNorm类算子支持Ascend950 Created-by: hahaha22 Commit-by: wrzwrz123 Merged-by: cann-robot Description: ## 描述 <!--在这里详细描述你的改动，包括改动的原因和所采取的方法。--> SyncBatchNorm类算子支持Ascend950 ## 关联的Issue <!-- 如果这个PR是为了解决特定的Issue，请在这里提供Issue链接。例如：关联Issue #000--> [#1502](https://gitcode.com/cann/ops-nn/issues/1502) ## 测试 <!--描述进行了哪些测试来验证你的改动。--> ## 文档更新 <!--如果这个PR包含文档的更新，请在这里指出。例如：更新了README.md文件。--> 更新了SyncBatchNorm类算子的README.md文档 ## 类型标签 <!-- [x] 表示选中 --> - [ ] Bug修复 - [x] 新特性 - [ ] 性能优化 - [ ] 文档更新 - [ ] 其他，请描述： See merge request: cann/ops-nn!2230	4 个月前
README.md	modified md file(aclnn.md and README.md) Co-authored-by: duhuiping<duhuiping@h-partners.com> # message auto-generated for no-merge-commit merge: !7121 merge 9.1.0 into 9.1.0 modified md file(aclnn.md and README.md) Created-by: gitee-duhuiping Commit-by: duhuiping Merged-by: cann-robot Description: ## 描述 1. Updated the constraints on the C and group parameters in aclnnGroupNormBackward.md. 2. Updated the calculation formula and parameter types of the lp_norm_v2 operator, and updated the parameter description of aclnn. 3. Updated the case of parameter names in the README.md file of renorm. 4. Updated the calculation formula of sync_batch_norm_backward_elemt and added the constraints on the combination of data types in the README file. 5. Updated the attribute parameter types and default values in the README file of sync_batch_norm_backward_elemt. ## 关联的Issue [#3701](https://gitcode.com/cann/ops-nn/issues/3701) [#3702](https://gitcode.com/cann/ops-nn/issues/3702) [#3693](https://gitcode.com/cann/ops-nn/issues/3693) ## 测试 Only involves updating the MD document description, does not involve testing. ## 文档更新 docs/zh/op_list.md norm/group_norm_grad/docs/aclnnGroupNormBackward.md norm/lp_norm_v2/README.md norm/lp_norm_v2/docs/aclnnNorm.md norm/renorm/README.md norm/sync_batch_norm_backward_elemt/README.md norm/sync_batch_norm_backward_elemt/docs/aclnnBatchNormElemtBackward.md norm/sync_batch_norm_backward_elemt/docs/aclnnBatchNormElemtBackward.md ## 类型标签 <!-- [x] 表示选中 --> - [ ] Bug修复 - [ ] 新特性 - [ ] 性能优化 - [x] 文档更新 - [ ] 其他，请描述： ## AI/Agent生成声明 <!-- [x] 表示选中 --> - [ ] AI辅助编写 See merge request: cann/ops-nn!7121	1 个月前

SyncBatchNormBackwardElemt

产品支持情况

产品	是否支持
Ascend 950PR/Ascend 950DT	√
Atlas A3 训练系列产品/Atlas A3 推理系列产品	√
Atlas A2 训练系列产品/Atlas A2 推理系列产品	√
Atlas 200I/500 A2 推理产品	×
Atlas 推理系列产品	×
Atlas 训练系列产品	√

功能说明

算子功能：SyncBatchNormBackwardElemt算子用于计算输入张量的元素级梯度，以便在反向传播过程中更新模型参数。
计算公式：
$gradInput = ((gradOut - meanDy) - (input - mean) * (invstd^2 * meanDyXmu)) * invstd * weight$

参数说明

参数名	输入/输出	描述	数据类型	数据格式
grad_output	输入	表示正向输出的微分，对应公式中的`gradOut`。	FLOAT32、FLOAT16、BFLOAT16	ND
save_input	输入	表示进行BatchNorm计算的输入，对应公式中的`input`。	FLOAT32、FLOAT16、BFLOAT16	ND
mean	输入	表示输入数据均值，对应公式中的`mean`。	FLOAT32、FLOAT16、BFLOAT16	ND
invstd	输入	表示输入数据标准差倒数，对应公式中的`invstd`。	FLOAT32、FLOAT16、BFLOAT16	ND
weight	输入	表示权重Tensor，对应公式中的`weight`。	FLOAT32、FLOAT16、BFLOAT16	ND
mean_dy	输入	表示输出梯度的样本均值和的平均值，对应公式中的`meanDy`。	FLOAT32、FLOAT16、BFLOAT16	ND
mean_dy_xmu	输入	表示样本均值和与输入梯度乘积的平均值，对应公式中的`meanDyXmu`。	FLOAT32、FLOAT16、BFLOAT16	ND
grad_input	输出	表示输入Tensor的梯度，对应公式中的`gradInput`。	FLOAT32、FLOAT16、BFLOAT16	ND

约束说明

参数grad_output、save_input、mean、invstd、weight、mean_dy、mean_dy_xmu、grad_input支持的组合如下所示：

Ascend 950PR/Ascend 950DT、Atlas A3 训练系列产品/Atlas A3 推理系列产品、Atlas A2 训练系列产品/Atlas A2 推理系列产品：

grad_output	save_input	mean	invstd	weight	mean_dy	mean_dy_xmu	grad_input
FLOAT16	FLOAT16	FLOAT16	FLOAT16	FLOAT16	FLOAT16	FLOAT16	FLOAT16
BFLOAT16	BFLOAT16	BFLOAT16	BFLOAT16	BFLOAT16	BFLOAT16	BFLOAT16	BFLOAT16
FLOAT32	FLOAT32	FLOAT32	FLOAT32	FLOAT32	FLOAT32	FLOAT32	FLOAT32
FLOAT16	FLOAT16	FLOAT32	FLOAT32	FLOAT32	FLOAT32	FLOAT32	FLOAT16

Atlas 训练系列产品：

grad_output	save_input	mean	invstd	weight	mean_dy	mean_dy_xmu	grad_input
FLOAT16	FLOAT16	FLOAT16	FLOAT16	FLOAT16	FLOAT16	FLOAT16	FLOAT16
FLOAT32	FLOAT32	FLOAT32	FLOAT32	FLOAT32	FLOAT32	FLOAT32	FLOAT32

调用说明

调用方式	样例代码	说明
aclnn接口	test_aclnn_batch_norm_elemt_backward	通过aclnnBatchNormElemtBackward接口方式调用SyncBatchNormBackwardElemt算子。
图模式	test_geir_sync_batch_norm_backward_elemt	通过算子IR构图方式调用SyncBatchNormBackwardElemt算子。