1_device_multi_thread
描述
本用例展示了多线程的场景如何管理Device,主线程中设置Device,设置资源限制,另一个线程获取Device相关信息(例如昇腾AI处理器版本、Device运行模式、Device资源限制)后,再根据Device资源限制下发和执行和函数任务,线程结束时采用aclrtResetDeviceForce接口释放Device上的资源。
支持的产品型号
- Atlas A3 训练系列产品/Atlas A3 推理系列产品
- Atlas A2 训练系列产品/Atlas 800I A2 推理产品/A200I A2 Box 异构组件
- Atlas 200I/500 A2 推理产品
- Atlas 推理系列产品
- Atlas 训练系列产品
编译运行
环境安装详情以及运行详情请见example目录下的README。
CANN RUNTIME API
在该sample中,涉及的关键功能点及其关键接口,如下所示:
- 初始化
- 调用aclInit接口初始化AscendCL配置。
- 调用aclFinalize接口实现AscendCL去初始化。
- Device管理
- 调用aclrtSetDevice接口指定用于运算的Device。
- 调用aclrtGetSocName接口查询当前运行环境的昇腾AI处理器版本。
- 调用aclrtGetDeviceCount接口获取可用Device的数量。
- 调用aclrtQueryDeviceStatus接口查询Device的状态。
- 调用aclrtGetRunMode接口获取当前AI软件栈的运行模式。
- 调用aclrtGetDeviceUtilizationRate接口查询Device上Cube、Vector、AI CPU等的利用率。
- 调用aclrtDeviceGetStreamPriorityRange接口查询硬件支持的Stream最小、最大优先级。
- 调用aclrtGetDeviceInfo接口获取指定Device的信息。
- 调用aclrtResetDeviceForce接口强制复位当前运算的Device,回收Device上的资源。
- 调用aclrtSetDeviceResLimit接口设置当前进程的Device资源限制。
- 调用aclrtGetDeviceResLimit接口获取当前进程的Device资源限制。
- 调用aclrtResetDeviceResLimit接口重置当前进程的Device资源限制,恢复默认配置。
- 调用aclrtResetDeviceForce接口强制复位当前运算的Device,回收Device上的资源。
- Stream管理
- 调用aclrtCreateStream接口创建Stream。
- 调用aclrtSynchronizeStream接口阻塞等待Stream上任务的完成。
- 调用aclrtDestroyStream接口销毁Stream。
- 内存管理
- 调用aclrtMalloc接口申请Device上的内存。
- 调用aclrtMallocHost接口申请Host上的内存。
- 调用aclrtFree接口释放Device上的内存。
- 调用aclrtFreeHost接口释放Host上的内存。
- 数据传输
- 调用aclrtMemcpy接口通过内存复制的方式实现数据传输。
已知issue
暂无