llama.cpp b12469 怎样组织 Metal 二维卷积的数据?
作者:橙子时间:2026-11-17 18:53:41浏览:253
llama.cpp b12469 将 Metal 的二维卷积组织成矩阵乘法。线程组直接收集所需的窗口输入,并用矩阵指令计算一小块输出。

卷积窗口如何映射成矩阵
llama.cpp b12469 为 Metal CONV_2D 增加隐式 GEMM 内核。每个输出通道对应权重矩阵的一行,每个输出像素对应由卷积窗口内的输入值组成的一列。

隐式处理节省了哪一步
线程组按需把窗口所需输入收集到共享内存,再通过 simdgroup 矩阵指令完成输出块的乘加。合并说明指出,输入以 f16 暂存,乘加结果在 f32 中累计。
设备不支持矩阵指令时怎样处理
旧内核仍保留作为无 simdgroup 矩阵支持设备的回退路径。b12469 是预发布构建,实际表现取决于设备、形状及分派结果,改动范围限于 Metal 的二维卷积。
作者最新文章
JS加法运算结果为NaN的原因及排查方法
2026-11-17 19:11:28
Google Maps 扩大 Ask Maps 覆盖后能问什么?
2026-11-17 13:36:19
MiniMax-H3-Image的低显存文档怎样区分推理配方与两阶段训练
2026-11-16 19:42:17
eMudhra证书信任调整的生效范围:Windows、Edge组件与.NET镜像怎样区分
2026-11-16 13:38:36
Tug 0.9.3的/share、/add-dir和/remove-dir分别解决什么问题?
2026-11-16 11:37:49
