Fill样例
概述
本样例基于Fill高阶API实现将Global Memory上的数据初始化为指定值,并配合Add接口完成向量加法计算。Fill接口支持在数据搬运前对输出空间进行初始化,常用于workspace地址或输出数据清零场景。
本样例支持的产品及CANN软件版本
| 产品 | CANN软件版本 |
|---|---|
| Ascend 950PR/Ascend 950DT | >= CANN 9.1.0 |
| Atlas A3 训练系列产品/Atlas A3 推理系列产品 | >= CANN 9.0.0 |
| Atlas A2 训练系列产品/Atlas A2 推理系列产品 | >= CANN 9.0.0 |
目录结构介绍
├── fill
│ ├── scripts
│ │ └── gen_data.py // 输入数据和真值数据生成脚本
│ ├── CMakeLists.txt // 编译工程文件
│ ├── data_utils.h // 数据读入写出函数
│ ├── fill.asc // Ascend C样例实现 & 调用样例
│ └── README.md // 样例说明文档
样例描述
-
样例功能:
本样例在需要预先初始化Global Memory数据的场景下,基于Fill高阶API实现将Global Memory上的数据初始化为指定值,并配合Add接口完成向量加法计算。 -
样例规格:
表1:样例输入输出规格 样例类型(OpType) fill 样例输入 name shape data type format input_x [1, 256] float ND input_y [1, 256] float ND 样例输出 output_z [1, 256] float ND 核函数名 fill_custom -
样例实现:
本样例中实现的是固定shape为输入input_x[1, 256],input_y[1, 256],输出output_z[1, 256]的fill样例,所用API详细介绍请参考Fill API文档。-
Kernel实现
计算逻辑包含以下步骤:- 使用Fill高阶API将输出Global Memory初始化为当前核的blockIdx值
- 使用Add接口进行向量加法计算
- 使用SetAtomicAdd模式将计算结果累加到输出Global Memory
-
Tiling实现
本样例中,无需tiling实现。 -
调用实现
使用内核调用符<<<>>>调用核函数。
-
编译运行
在本样例根目录下执行如下步骤,编译并执行样例。
-
配置环境变量
请根据当前环境上CANN开发套件包的安装方式,配置环境变量。source ${install_path}/cann/set_env.sh说明:
${install_path}为CANN包安装目录,未指定安装目录时默认安装至/usr/local/Ascend下。 -
样例执行
在本样例目录下执行如下命令。
mkdir -p build && cd build; # 创建并进入build目录 cmake -DCMAKE_ASC_ARCHITECTURES=dav-2201 ..;make -j; # 编译工程,默认npu模式 python3 ../scripts/gen_data.py # 生成测试输入数据 ./demo # 执行编译生成的可执行程序,执行样例使用 CPU调试 或 NPU仿真 模式时,添加
-DCMAKE_ASC_RUN_MODE=cpu或-DCMAKE_ASC_RUN_MODE=sim参数即可。示例如:
cmake -DCMAKE_ASC_RUN_MODE=cpu -DCMAKE_ASC_ARCHITECTURES=dav-2201 ..;make -j; # cpu调试模式 cmake -DCMAKE_ASC_RUN_MODE=sim -DCMAKE_ASC_ARCHITECTURES=dav-2201 ..;make -j; # NPU仿真模式注意: 切换编译模式前需清理 cmake 缓存,可在 build 目录下执行
rm CMakeCache.txt后重新 cmake。 -
编译选项说明
选项 可选值 说明 CMAKE_ASC_RUN_MODEnpu(默认)、cpu、sim运行模式:NPU 运行、CPU调试、NPU仿真 CMAKE_ASC_ARCHITECTURESdav-2201(默认)、dav-3510NPU 架构:dav-2201 对应 Atlas A2 训练系列产品/Atlas A2 推理系列产品和 Atlas A3 训练系列产品/Atlas A3 推理系列产品,dav-3510 对应 Ascend 950PR/Ascend 950DT -
执行结果
执行结果如下,说明精度对比成功。
test pass!