asc_atomic_or

产品支持情况

  • Ascend 950PR/Ascend 950DT:支持
  • Atlas A3 训练系列产品/Atlas A3 推理系列产品:不支持
  • Atlas A2 训练系列产品/Atlas A2 推理系列产品:不支持
  • Atlas 200I/500 A2 推理产品:不支持
  • Atlas 推理系列产品AI Core:不支持
  • Atlas 推理系列产品Vector Core:不支持
  • Atlas 训练系列产品:不支持

功能说明

对Unified Buffer或Global Memory上address的数值与指定数值val进行原子或(|)操作,即将address数值或(|)val的结果赋值到Unified Buffer或Global Memory上。

函数原型

inline int32_t asc_atomic_or(int32_t *address, int32_t val)
inline uint32_t asc_atomic_or(uint32_t *address, uint32_t val)
inline int64_t asc_atomic_or(int64_t *address, int64_t val)
inline uint64_t asc_atomic_or(uint64_t *address, uint64_t val)

参数说明

表1 参数说明

参数名 输入/输出 描述
address 输出 Unified Buffer或Global Memory的地址。
val 输入 源操作数。

不同数据类型支持的内存范围说明如下:

表2 不同数据类型支持的内存范围

参数数据类型 支持的内存空间
int32_t、uint32_t Unified Buffer、Global Memory
int64_t、uint64_t Global Memory

返回值说明

Unified Buffer或Global Memory上的初始数据。

约束说明

  • 原子操作保证对同一地址的读改写过程具有原子性,但不保证多个线程之间的执行顺序。对于依赖接口返回值判断线程先后顺序的场景,结果可能随线程调度变化而不同。
  • 本接口的性能受以下因素影响,相关原理请参见原子操作机制
    • 内存空间:Unified Buffer的访问路径比Global Memory短,通常具有更低的访问开销。当使用的数据类型支持Unified Buffer(即int32_t、uint32_t)时,建议优先在Unified Buffer中完成原子操作。
    • 返回值:该接口无对应的性能优化指令,对于所有数据类型,程序中是否使用该接口返回值,接口性能基本一致。
    • 地址分布:Global Memory原子操作经过L2 Cache处理,L2 Cache以512B Cache Line为缓存管理单位,每条Cache Line包含4个128B扇区(Sector),Global Memory原子操作以128B Sector为处理粒度。目标地址集中在同一个Sector内时,处理效率较低;目标地址分布在更多Sector内时,处理效率较高。因此,业务允许时,建议将原子操作的目标地址分散到更多Sector中。

需要包含的头文件

使用该接口需要包含"simt_api/device_atomic_functions.h"头文件。

#include "simt_api/device_atomic_functions.h"

调用示例

示例场景为:多个线程分别检测到不同特征,使用asc_atomic_or接口将这些特征合并到同一个共享bitmask中。输入参数说明如下:

名称 说明
observed_flags 每个元素表示一个线程观察到的特征位。
flags Global Memory中的汇总bitmask,kernel启动前清零。
n 特征来源数量。

核心代码实现如下:

  • SIMT编程场景:

    __global__ __launch_bounds__(256) void merge_observed_flags(uint32_t *flags,
                                                               uint32_t *observed_flags,
                                                               uint32_t n)
    {
        uint32_t idx = blockIdx.x * blockDim.x + threadIdx.x;
        if (idx >= n) {
            return;
        }
    
        asc_atomic_or(flags, observed_flags[idx]);
    }
    
  • SIMD与SIMT混合编程场景:

    SIMD与SIMT混合编程场景,需要显式使用地址空间限定符表示地址空间:__gm__表示Global Memory内存空间,__ubuf__表示Unified Buffer内存空间。

    __simt_vf__ __launch_bounds__(1024) inline void merge_observed_flags(__gm__ uint32_t *flags,
                                                                        __gm__ uint32_t *observed_flags,
                                                                        uint32_t n)
    {
        uint32_t idx = blockIdx.x * blockDim.x + threadIdx.x;
        if (idx >= n) {
            return;
        }
    
        asc_atomic_or(flags, observed_flags[idx]);
    }
    

输出结果示例如下:

observed_flags: 0x1, 0x4, 0x2
flags: 0x7 // 表明3个线程观察到的特征位被合并