Skip to content
版 本

Axpy

产 品 支 持 情 况

产 品

是 否 支 持

Ascend 950PR/Ascend 950DT

Atlas A3 训 练 系 列 产 品/Atlas A3 推 理 系 列 产 品

Atlas A2 训 练 系 列 产 品/Atlas A2 推 理 系 列 产 品

Atlas 200I/500 A2 推 理 产 品

Atlas 推 理 系 列 产 品AI Core

Atlas 推 理 系 列 产 品Vector Core

x

Atlas 训 练 系 列 产 品

Kirin X90

Kirin 9030

功 能 说 明

头 文 件 路 径 为:"basic_api/kernel_operator_vec_ternary_scalar_intf.h"。

向 量 和 标 量 的 乘 积,并 将 乘 积 结 果 逐 元 素 加 到 的 输 出 向 量 上。计 算 公 式 如 下:

$$ dst_j = scalar × src_i + dst_i $$

函 数 原 型

  • tensor前n个 数 据 连 续 计 算

    C++
    template <typename T, typename U>
    __aicore__ inline void Axpy(const LocalTensor<T>& dst, const LocalTensor<U>& src, const U& scalar, const int32_t count)
    
  • tensor高 维 切 分 计 算

    • mask逐bit模 式

      C++
      template <typename T, typename U, bool isSetMask = true>
      __aicore__ inline void Axpy(const LocalTensor<T>& dst, const LocalTensor<U>& src, const U& scalarValue, uint64_t mask[], const uint8_t repeatTime, const UnaryRepeatParams& repeatParams)
      
    • mask连 续 模 式

      C++
      template <typename T, typename U, bool isSetMask = true>
      __aicore__ inline void Axpy(const LocalTensor<T>& dst, const LocalTensor<U>& src, const U& scalarValue, uint64_t mask, const uint8_t repeatTime, const UnaryRepeatParams& repeatParams)
      

参 数 说 明

模 板 参 数 说 明

参 数 名描 述
T目 的 操 作 数 数 据 类 型。
U源 操 作 数 数 据 类 型。
isSetMask是 否 在 接 口 内 部 设 置mask。
• true,表 示 在 接 口 内 部 设 置mask。
• false,表 示 在 接 口 外 部 设 置mask,开 发 者 需 要 使 用SetVectorMask接 口 设 置mask值。这 种 模 式 下,接 口 入 参 中 的mask值 设 置 为 占 位 符MASK_PLACEHOLDER,用 于 占 位,无 实 际 含 义。

参 数 说 明

参 数 名 称输 入/输 出说 明
dst输 出目 的 操 作 数。
类 型 为LocalTensor,支 持 的TPosition为VECIN/VECCALC/VECOUT。
src输 入源 操 作 数。
类 型 为LocalTensor,支 持 的TPosition为VECIN/VECCALC/VECOUT。
scalarValue输 入源 操 作 数,scalar标 量。scalarValue的 数 据 类 型 需 要 和src保 持 一 致。
count输 入参 与 计 算 的 元 素 个 数。关 于 该 参 数 的 具 体 说 明 请 参 考连 续 计 算
mask/mask[]输 入mask用 于 控 制 每 次 迭 代 内 参 与 计 算 的 元 素。
设 置 详 见掩 码 操 作
repeatTime输 入重 复 迭 代 次 数。
矢 量 计 算 单 元,每 次 读 取 连 续 的256字 节 数 据 进 行 计 算,为 完 成 对 输 入 数 据 的 处 理,必 须 通 过 多 次 迭 代(repeat)才 能 完 成 所 有 数 据 的 读 取 与 计 算。repeatTime表 示 迭 代 的 次 数。
关 于 该 参 数 的 具 体 描 述 请 参 考高 维 切 分API
repeatParams输 入控 制 操 作 数 地 址 步 长 的 参 数。UnaryRepeatParams类 型,包 含 操 作 数 相 邻 迭 代 间 相 同DataBlock的 地 址 步 长,操 作 数 同 一 迭 代 内 不 同DataBlock的 地 址 步 长 等 参 数。
相 邻 迭 代 间 的 地 址 步 长 参 数 说 明 请 参 考repeatStride;同 一 迭 代 内DataBlock的 地 址 步 长 参 数 说 明 请 参 考dataBlockStride

数 据 类 型

PAR列 表 示 矢 量 计 算 单 元 一 个 迭 代 能 够 处 理 的 元 素 个 数。

Ascend 950PR/Ascend 950DT支 持 的 数 据 类 型 组 合 情 况

src数 据 类 型scalar数 据 类 型dst数 据 类 型PAR
halfhalfhalf128
floatfloatfloat64
halfhalffloat64
int64_tint64_tint64_t64
uint64_tuint64_tuint64_t64
bfloat16_tbfloat16_tbfloat16_t128

Atlas A3 训 练 系 列 产 品/Atlas A3 推 理 系 列 产 品 支 持 的 数 据 类 型 组 合 情 况

src数 据 类 型scalar数 据 类 型dst数 据 类 型PAR
halfhalfhalf128
floatfloatfloat64
halfhalffloat64

Atlas A2 训 练 系 列 产 品/Atlas A2 推 理 系 列 产 品 支 持 的 数 据 类 型 组 合 情 况

src数 据 类 型scalar数 据 类 型dst数 据 类 型PAR
halfhalfhalf128
floatfloatfloat64
halfhalffloat64

Atlas 200I/500 A2 推 理 产 品 支 持 的 数 据 类 型 组 合 情 况

src数 据 类 型scalar数 据 类 型dst数 据 类 型PAR
halfhalfhalf128
floatfloatfloat64
halfhalffloat64

Atlas 推 理 系 列 产 品AI Core支 持 的 数 据 类 型 组 合 情 况

src数 据 类 型scalar数 据 类 型dst数 据 类 型PAR
halfhalfhalf128
floatfloatfloat64
halfhalffloat64

Atlas 训 练 系 列 产 品 支 持 的 数 据 类 型 组 合 情 况

src数 据 类 型scalar数 据 类 型dst数 据 类 型PAR
halfhalfhalf128
floatfloatfloat64
halfhalffloat64

Kirin X90支 持 的 数 据 类 型 组 合 情 况

src数 据 类 型scalar数 据 类 型dst数 据 类 型PAR
halfhalfhalf128
floatfloatfloat64
halfhalffloat64

Kirin 9030支 持 的 数 据 类 型 组 合 情 况

src数 据 类 型scalar数 据 类 型dst数 据 类 型PAR
halfhalfhalf128
floatfloatfloat64
halfhalffloat64

返 回 值 说 明

约 束 说 明

  • 地 址 对 齐 约 束 参 考地 址 对 齐 约 束
  • 操 作 数 地 址 重 叠 约 束 请 参 考地 址 重 叠 约 束
  • 源 操 作 数 的 数 据 类 型 为half、目 的 操 作 数 的 数 据 类 型 为float的 情 况 下,不 支 持 地 址 重 叠。
  • 使 用tensor高 维 切 分 计 算 接 口 时,src和scalar的 数 据 类 型 为half、dst的 数 据 类 型 为float的 情 况 下,一 个 迭 代 处 理 内 最 多 处 理64个 输 入 数 据。
  • 针 对Ascend 950PR/Ascend 950DT,int64_t、uint64_t数 据 类 型 仅 支 持tensor前n个 数 据 计 算 接 口。

调 用 示 例

本 样 例 中 只 展 示Compute流 程 中 的 部 分 代 码。如 果 您 需 要 运 行 样 例 代 码,请 参 考 完 整 样 例复 合 计 算 样 例

  • tensor高 维 切 分 计 算 样 例-mask连 续 模 式。

    C++
    // repeatTime = 4, mask = 128, 128 elements one repeat, 512 elements total
    // srcLocal数 据 类 型 为half,scalar数 据 类 型 为half,dstLocal数 据 类 型 为half
    // dstBlkStride, srcBlkStride = 1, no gap between blocks in one repeat
    // dstRepStride, srcRepStride = 8, no gap between repeats 
    AscendC::Axpy(dstLocal, srcLocal, (half)2.0, 128, 4,{ 1, 1, 8, 8 });
    
    // srcLocal数 据 类 型 为half,scalar数 据 类 型 为half,dstLocal数 据 类 型 为float
    // repeatTime = 8, mask = 64, 64 elements one repeat, 512 elements total
    // dstBlkStride, srcBlkStride = 1, no gap between blocks in one repeat
    // dstRepStride = 8, srcRepStride = 4, no gap between repeats 
    AscendC::Axpy(dstLocal, srcLocal, (half)2.0, 64, 8,{ 1, 1, 8, 4 }); // 每 次 迭 代 选 取 源 操 作 数 前4个datablock参 与 计 算
    
  • tensor高 维 切 分 计 算 样 例-mask逐bit模 式。

    C++
    uint64_t mask[2] = { 0xFFFFFFFFFFFFFFFF, 0xFFFFFFFFFFFFFFFF };
    // repeatTime = 4, 128 elements one repeat, 512 elements total, half精 度 组 合
    // dstBlkStride, srcBlkStride = 1, no gap between blocks in one repeat
    // dstRepStride, srcRepStride = 8, no gap between repeats
    AscendC::Axpy(dstLocal, srcLocal, (half)2.0, mask, 4,{ 1, 1, 8, 8 });
    
  • tensor前n个 数 据 计 算 样 例。

    C++
    AscendC::Axpy(dstLocal, src0Local, (half)2.0, 512);// half精 度 组 合
    

结 果 示 例 如 下:

输 入 数 据(src0Local):
[1. 2. 3. 4. 5. 6. ... 512.]
输 入 数 据(scalarValue):2.0
输 出 数 据(dstLocal)初 始 值:
[0. 0. 0. 0. 0. 0. ... 0.]
进 行Axpy计 算 后,输 出 数 据(dstLocal):
[2. 4. 6. 8. 10. 12. ... 1024.]

免 责 声 明:本 站 内 容 由 asc-devkit 仓 master 分 支 自 动 编 译 生 成,属 于 持 续 开 发 版 本,可 能 存 在 缺 陷,仅 供 预 览 与 参 考。如 需 稳 定 及 商 用 资 料,请 查 阅 官 方 昇 腾 社 区