TSTORE_FP¶

指令示意图¶

简介¶

使用缩放 (fp) Tile 作为向量量化参数，将累加器 Tile 存储到全局内存。

数学语义¶

设 R = src.GetValidRow()，C = src.GetValidCol()。概念上（二维视图，带基础偏移），对 0 <= i < R 且 0 <= j < C：

汇编语法¶

PTO-AS 形式：参见 PTO-AS 规范。

同步形式：

tstore.fp %src, %fp, %sv_out[%c0, %c0]

AS Level 1（SSA）¶

pto.tstore.fp %src, %fp, %mem : (!pto.tile<...>, !pto.tile<...>, !pto.partition_tensor_view<MxNxdtype>) -> ()

AS Level 2（DPS）¶

pto.tstore.fp ins(%src, %fp : !pto.tile_buf<...>, !pto.tile_buf<...>) outs(%mem : !pto.partition_tensor_view<MxNxdtype>)

C++ 内建接口¶

声明于 include/pto/common/pto_instr.hpp 和 include/pto/common/constants.hpp：

template <typename TileData, typename GlobalData, typename FpTileData, AtomicType atomicType = AtomicType::AtomicNone,
          ReluPreMode reluPreMode = ReluPreMode::NoRelu, typename... WaitEvents>
PTO_INST RecordEvent TSTORE_FP(GlobalData &dst, TileData &src, FpTileData &fp, WaitEvents &... events);

约束¶

• 实现检查 (A2A3):
  • fp 存储路径通过 TSTORE_IMPL(dst, src, fp) 实现，并使用与量化累加器存储相同的累加器到 GM 合法性检查：
  • 目标布局必须是 ND 或 NZ。
  • 源数据类型必须是 int32_t 或 float。
  • 静态形状约束：1 <= TileData::Cols <= 4095；若为 ND 则 1 <= TileData::Rows <= 8192；若为 NZ 则 1 <= TileData::Rows <= 65535 且 TileData::Cols % 16 == 0。
  • 运行时：1 <= src.GetValidCol() <= 4095。
  • 对 FpTileData 不执行显式 static_assert（实现使用 fp 设置 FPC 状态）。
• 实现检查 (A5):
  • 通过 TSTORE_IMPL(dst, src, fp) 实现，并由 CheckStaticAcc<..., true>() 验证累加器路径（仅支持 ND/NZ，源数据类型为 int32_t/float，行/列范围有限制）。
  • 对 FpTileData 不执行显式 static_assert（实现使用 fp 设置 FPC 状态）。

示例¶

自动（Auto）¶

#include <pto/pto-inst.hpp>

using namespace pto;

void example_auto(__gm__ int8_t* out) {
  using AccT = TileAcc<float, 16, 16>;
  using FpT = Tile<TileType::Scaling, uint64_t, 1, 16, BLayout::RowMajor, 1, DYNAMIC, SLayout::NoneBox>;
  using GShape = Shape<1, 1, 1, 16, 16>;
  using GStride = BaseShape2D<int8_t, 16, 16, Layout::ND>;
  using GT = GlobalTensor<int8_t, GShape, GStride, Layout::ND>;

  GT gout(out);
  AccT acc;
  FpT fp(16);
  TSTORE_FP(gout, acc, fp);
}

手动（Manual）¶

#include <pto/pto-inst.hpp>

using namespace pto;

void example_manual(__gm__ int8_t* out) {
  using AccT = TileAcc<float, 16, 16>;
  using FpT = Tile<TileType::Scaling, uint64_t, 1, 16, BLayout::RowMajor, 1, DYNAMIC, SLayout::NoneBox>;
  using GShape = Shape<1, 1, 1, 16, 16>;
  using GStride = BaseShape2D<int8_t, 16, 16, Layout::ND>;
  using GT = GlobalTensor<int8_t, GShape, GStride, Layout::ND>;

  GT gout(out);
  AccT acc;
  FpT fp(16);
  TASSIGN(acc, 0x1000);
  TASSIGN(fp,  0x2000);
  TSTORE_FP(gout, acc, fp);
}

汇编示例（ASM）¶

自动模式¶

# 自动模式：由编译器/运行时负责资源放置与调度。
pto.tstore.fp %src, %fp, %mem : (!pto.tile<...>, !pto.tile<...>, !pto.partition_tensor_view<MxNxdtype>) -> ()

手动模式¶

# 手动模式：先显式绑定资源，再发射指令。
# 可选（当该指令包含 tile 操作数时）：
# pto.tassign %arg0, @tile(0x1000)
# pto.tassign %arg1, @tile(0x2000)
pto.tstore.fp %src, %fp, %mem : (!pto.tile<...>, !pto.tile<...>, !pto.partition_tensor_view<MxNxdtype>) -> ()

PTO 汇编形式¶

tstore.fp %src, %fp, %sv_out[%c0, %c0]
# AS Level 2 (DPS)
pto.tstore.fp ins(%src, %fp : !pto.tile_buf<...>, !pto.tile_buf<...>) outs(%mem : !pto.partition_tensor_view<MxNxdtype>)