pypto_pro.language.expand_mul#

产品支持情况#

  • Ascend 950PR&950DT系列产品:支持

  • Atlas A3系列产品:不支持

  • Atlas A2系列产品:不支持

功能说明#

将指定维度的单元素Tile广播到源Tile的shape后执行逐元素乘法,即源Tile中每个元素乘以广播后对应位置的标量。

函数原型#

pypto_pro.language.expand_mul(out: Tile, src: Tile, scalar: Tile, *, dim: int=0) -> None

参数说明#

参数

输入/输出

说明

out

输出

目的操作数,Tile类型,存放逐元素乘法结果。
数据类型支持:DT_INT8、DT_UINT8、DT_INT16、DT_UINT16、DT_INT32、DT_UINT32、DT_INT64、DT_UINT64、DT_FP16、DT_FP32、DT_BF16。
shape与src保持一致。
支持与src为同一Tile,实现in-place计算。

src

输入

源操作数,Tile类型。
数据类型支持:DT_INT8、DT_UINT8、DT_INT16、DT_UINT16、DT_INT32、DT_UINT32、DT_INT64、DT_UINT64、DT_FP16、DT_FP32、DT_BF16。

scalar

输入

广播的具体值,Tile类型,广播到每列或每行做逐元素乘法。
数据类型支持:DT_INT8、DT_UINT8、DT_INT16、DT_UINT16、DT_INT32、DT_UINT32、DT_INT64、DT_UINT64、DT_FP16、DT_FP32、DT_BF16。
数据类型须与out、src保持一致。
如果src的shape为[M, N],dim=0时shape为[M, 1];dim=1时shape为[1, N]。

dim

输入

广播方向,0表示沿列方向广播,1表示沿行方向广播。

返回值说明#

无。

约束说明#

  • dim只能为0或1。设src的有效Shape为[M, N]:dim=0时,scalar的有效Shape为[M, 1];dim=1时为[1, N]。

  • out、src和scalar须位于UB,数据类型一致;out与src的Shape和有效Shape一致。

调用示例#

dim = 0#

import pypto_pro.language as pl


@pl.jit(auto_mutex=True)
def row_expand_mul_kernel(
    x: pl.Tensor[[64, 128], pl.DT_FP32],
    y: pl.Tensor[[64, 1], pl.DT_FP32],
    out: pl.Tensor[[64, 128], pl.DT_FP32]):
    tt = pl.TileType(shape=[64, 128], dtype=pl.DT_FP32, target_memory=pl.MemorySpace.Vec)
    tt_v = pl.TileType(shape=[64, 1], dtype=pl.DT_FP32, target_memory=pl.MemorySpace.Vec,
                       layout=pl.DN)
    tile_a = pl.make_tile_group(type=tt, addrs=0x0000, mutex_ids=[0])
    tile_v = pl.make_tile_group(type=tt_v, addrs=0x8000, mutex_ids=[1])
    tile_out = pl.make_tile_group(type=tt, addrs=0x10000, mutex_ids=[2])
    with pl.section_vector():
        cur_a = tile_a.current()
        cur_v = tile_v.current()
        cur_out = tile_out.current()
        pl.load(cur_a, x, [0, 0])
        pl.load(cur_v, y, [0, 0])
        pl.expand_mul(cur_out, cur_a, cur_v)
        pl.store(out, cur_out, [0, 0])
输入数据x:[[-3 -2.875 -2.75 -2.625 -2.5 -2.375 -2.25 -2.125 ...], [13 13.125 13.25 13.375 13.5 13.625 13.75 13.875 ...], [29 29.125 29.25 29.375 29.5 29.625 29.75 29.875 ...], [45 45.125 45.25 45.375 45.5 45.625 45.75 45.875 ...], ...]
输入数据y:[[1.25], [1.5], [1.75], [2], ...]
输出数据out:[[-3.75 -3.59375 -3.4375 -3.28125 -3.125 -2.96875 -2.8125 -2.65625 ...], [19.5 19.6875 19.875 20.0625 20.25 20.4375 20.625 20.8125 ...], [50.75 50.96875 51.1875 51.40625 51.625 51.84375 52.0625 52.28125 ...], [90 90.25 90.5 90.75 91 91.25 91.5 91.75 ...], ...]

dim = 1#

import pypto_pro.language as pl


@pl.jit(auto_mutex=True)
def col_expand_mul_kernel(
    x: pl.Tensor[[64, 128], pl.DT_FP32],
    y: pl.Tensor[[1, 128], pl.DT_FP32],
    out: pl.Tensor[[64, 128], pl.DT_FP32]):
    tt = pl.TileType(shape=[64, 128], dtype=pl.DT_FP32, target_memory=pl.MemorySpace.Vec)
    tt_v = pl.TileType(shape=[1, 128], dtype=pl.DT_FP32, target_memory=pl.MemorySpace.Vec)
    tile_a = pl.make_tile_group(type=tt, addrs=0x0000, mutex_ids=[0])
    tile_v = pl.make_tile_group(type=tt_v, addrs=0x8000, mutex_ids=[1])
    tile_out = pl.make_tile_group(type=tt, addrs=0x10000, mutex_ids=[2])
    with pl.section_vector():
        cur_a = tile_a.current()
        cur_v = tile_v.current()
        cur_out = tile_out.current()
        pl.load(cur_a, x, [0, 0])
        pl.load(cur_v, y, [0, 0])
        pl.expand_mul(cur_out, cur_a, cur_v, dim=1)
        pl.store(out, cur_out, [0, 0])
输入数据x:[[-3 -2.875 -2.75 -2.625 -2.5 -2.375 -2.25 -2.125 ...], [13 13.125 13.25 13.375 13.5 13.625 13.75 13.875 ...], [29 29.125 29.25 29.375 29.5 29.625 29.75 29.875 ...], [45 45.125 45.25 45.375 45.5 45.625 45.75 45.875 ...], ...]
输入数据y:[[1.25 1.5 1.75 2 2.25 2.5 2.75 3 ...]]
输出数据out:[[-3.75 -4.3125 -4.8125 -5.25 -5.625 -5.9375 -6.1875 -6.375 ...], [16.25 19.6875 23.1875 26.75 30.375 34.0625 37.8125 41.625 ...], [36.25 43.6875 51.1875 58.75 66.375 74.0625 81.8125 89.625 ...], [56.25 67.6875 79.1875 90.75 102.375 114.0625 125.8125 137.625 ...], ...]