GPU
更新規則 (第 t+1 塊)
HBM
大但慢
Q
Kᵀ
V
O
只示範第 1 個 query,n = 4、d = 2
SRAM
小但快
CU
已讀進 SRAM
寫回 HBM
粗體 = 這一步剛更新
← 上一步
播放
下一步 →
重設