asc_set_l0c2gm_channel_para
产品支持情况
- Ascend 950PR/Ascend 950DT:支持
- Atlas A3 训练系列产品/Atlas A3 推理系列产品:不支持
- Atlas A2 训练系列产品/Atlas A2 推理系列产品:不支持
- Atlas 200I/500 A2 推理产品:不支持
- Atlas 推理系列产品AI Core:不支持
- Atlas 推理系列产品Vector Core:不支持
- Atlas 训练系列产品:不支持
功能说明
头文件路径为:"c_api/cube_datamove/cube_datamove.h"。
本接口用于在L0C Buffer搬出并执行Nz2DN格式转换时,配置源Nz矩阵中相邻行的地址偏移。配置写入后,由后续开启Nz2DN功能的asc_copy_l0c2gm、asc_copy_l0c2l1或asc_copy_l0c2ub接口使用;未开启Nz2DN功能时,本配置不生效。
本接口为矩阵搬出相关配置接口,仅在AIC上生效。
函数原型
C
__aicore__ inline void asc_set_l0c2gm_channel_para(uint64_t config)
参数说明
表1 参数说明
| 参数名 | 输入/输出 | 描述 |
|---|---|---|
| config | 输入 | Nz2DN格式转换的源操作数相关配置。接口不检查或转换字段值,需按照表2完成拼装。 |
| bit范围 | 描述 |
|---|---|
| 47:0 | 无效bit位,用户无需关注,设置为0即可。 |
| 63:48 | 源矩阵Nz分形中相邻行的地址偏移,取值范围为[1, 65535],单位为64字节(16 × sizeof(dtype),dtype为L0C Buffer上数据的类型,支持int32_t和float)。 |
返回值说明
无
流水类型
PIPE_S
约束说明
- 本接口仅在AIC上生效,在AIV上调用将直接返回。
- 本接口需在对应的L0C Buffer搬出接口执行前调用,且搬出接口需开启Nz2DN功能。配置会持续生效,直至再次调用本接口覆盖。
config[63:48]不能为0,除config[63:48]外的其他bit位不生效,设置为0即可;接口会将config整体写入,不会检查字段值。- 开启Nz2DN功能时,如果
config[63:48]不等于1,则不能同时开启unitFlag。
调用示例
将代码保存为example.asc后,可通过bisheng命令编译运行,其中--npu-arch参数需根据实际产品型号指定对应的NPU架构,具体产品与NPU架构的映射关系请参考__NPU_ARCH__。
以Ascend 950PR/Ascend 950DT产品(对应NPU架构为dav-3510)为例,编译运行命令如下:
Bash
bisheng example.asc -o main --npu-arch=dav-3510 && ./main
以下调用示例代码仅Ascend 950PR/Ascend 950DT产品支持。
C++
#include <cstdint>
#include <iostream>
#include <vector>
#include "c_api/asc_simd.h"
#include "acl/acl.h"
namespace {
constexpr uint32_t M = 16;
constexpr uint32_t K = 16;
constexpr uint32_t N = 32;
constexpr uint32_t A_ELEMENTS = M * K;
constexpr uint32_t B_ELEMENTS = K * N;
constexpr uint32_t C_ELEMENTS = M * N;
constexpr uint16_t HALF_ONE = 0x3c00;
constexpr uint16_t HALF_NEG_ONE = 0xbc00;
__global__ __cube__ void asc_set_l0c2gm_channel_para_kernel(
__gm__ uint16_t* a, __gm__ uint16_t* b, __gm__ float* output)
{
asc_init();
__cbuf__ half a_l1[A_ELEMENTS];
__cbuf__ half b_l1[B_ELEMENTS];
__ca__ half a_l0[A_ELEMENTS];
__cb__ half b_l0[B_ELEMENTS];
__cc__ float c_l0[C_ELEMENTS];
asc_set_gm2l1_nz_para(1, 1, 16, 0);
asc_copy_gm2l1_nd2nz(a_l1, reinterpret_cast<__gm__ half*>(a), K * sizeof(half), 0, M, K, 0, false);
asc_set_gm2l1_nz_para(1, 1, 16, 0);
asc_copy_gm2l1_nd2nz(b_l1, reinterpret_cast<__gm__ half*>(b), N * sizeof(half), 0, K, N, 0, false);
asc_sync_notify(PIPE_MTE2, PIPE_MTE1, EVENT_ID0);
asc_sync_wait(PIPE_MTE2, PIPE_MTE1, EVENT_ID0);
asc_copy_l12l0a(a_l0, a_l1, 0, 0, 1, 1, 1, 1);
asc_copy_l12l0b_transpose(b_l0, b_l1, 0, 0, 1, 2, 1, 2);
asc_sync_notify(PIPE_MTE1, PIPE_M, EVENT_ID0);
asc_sync_wait(PIPE_MTE1, PIPE_M, EVENT_ID0);
asc_mmad(c_l0, a_l0, b_l0, M, K, N, 0, false, false, true);
asc_sync_notify(PIPE_M, PIPE_FIX, EVENT_ID0);
asc_sync_wait(PIPE_M, PIPE_FIX, EVENT_ID0);
asc_set_l0c2gm_channel_para(1ULL << 48);
asc_set_l0c_copy_nz_para(1, 0, 0);
asc_copy_l0c2gm(output, c_l0, N, M, M, M, 0, 0, 0,
static_cast<uint64_t>(QuantMode_t::NoQuant), 0, false, false,
static_cast<uint64_t>(QuantMode_post::NoConv), 0, false, 0, false, false, false, true);
asc_sync_pipe(PIPE_ALL);
}
void print_row(const char* label, const std::vector<float>& data, uint32_t offset)
{
std::cout << label << ':';
for (uint32_t i = 0; i < 8; ++i) std::cout << ' ' << data[offset + i];
std::cout << " ..." << std::endl;
}
} // namespace
int main()
{
std::vector<uint16_t> a(A_ELEMENTS, 0);
std::vector<uint16_t> b(B_ELEMENTS, 0);
std::vector<float> input_b(B_ELEMENTS, 0.0f);
std::vector<float> output(C_ELEMENTS, 0.0f);
std::vector<float> golden(C_ELEMENTS, 0.0f);
for (uint32_t i = 0; i < M; ++i) {
a[i * K + i] = HALF_ONE;
b[i * N + i] = HALF_ONE;
b[i * N + 16 + i] = HALF_NEG_ONE;
input_b[i * N + i] = 1.0f;
input_b[i * N + 16 + i] = -1.0f;
golden[i * M + i] = 1.0f;
golden[(16 + i) * M + i] = -1.0f;
}
aclInit(nullptr);
aclrtSetDevice(0);
uint16_t *a_device = nullptr, *b_device = nullptr;
float* output_device = nullptr;
aclrtMalloc(reinterpret_cast<void**>(&a_device), a.size() * sizeof(uint16_t), ACL_MEM_MALLOC_HUGE_FIRST);
aclrtMalloc(reinterpret_cast<void**>(&b_device), b.size() * sizeof(uint16_t), ACL_MEM_MALLOC_HUGE_FIRST);
aclrtMalloc(reinterpret_cast<void**>(&output_device), output.size() * sizeof(float), ACL_MEM_MALLOC_HUGE_FIRST);
aclrtMemcpy(a_device, a.size() * sizeof(uint16_t), a.data(), a.size() * sizeof(uint16_t), ACL_MEMCPY_HOST_TO_DEVICE);
aclrtMemcpy(b_device, b.size() * sizeof(uint16_t), b.data(), b.size() * sizeof(uint16_t), ACL_MEMCPY_HOST_TO_DEVICE);
asc_set_l0c2gm_channel_para_kernel<<<1, 0>>>(a_device, b_device, output_device);
aclrtSynchronizeDevice();
aclrtMemcpy(output.data(), output.size() * sizeof(float), output_device, output.size() * sizeof(float),
ACL_MEMCPY_DEVICE_TO_HOST);
print_row("Input B row 0", input_b, 0);
print_row("DN output row 0", output, 0);
print_row("DN output row 16", output, 16 * M);
const bool passed = output == golden;
std::cout << (passed ? "[Success] asc_set_l0c2gm_channel_para passed."
: "[Failed] asc_set_l0c2gm_channel_para failed.") << std::endl;
aclrtFree(a_device);
aclrtFree(b_device);
aclrtFree(output_device);
aclrtResetDevice(0);
aclFinalize();
return passed ? 0 : 1;
}