预发布构建 b12469 为二维卷积增加隐式矩阵乘法实现。线程组按需读取卷积窗口中的输入,硬件需要具备相应的矩阵指令支持。
☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 多模态理解力帮你轻松跨越从0到1的创作门槛☜☜☜

卷积窗口如何映射成矩阵
llama.cpp b12469 为 Metal CONV_2D 增加隐式 GEMM 内核。每个输出通道对应权重矩阵的一行,每个输出像素对应由卷积窗口内的输入值组成的一列。

隐式处理节省了哪一步
线程组按需把窗口所需输入收集到共享内存,再通过 simdgroup 矩阵指令完成输出块的乘加。合并说明指出,输入以 f16 暂存,乘加结果在 f32 中累计。
设备不支持矩阵指令时怎样处理
旧内核仍保留作为无 simdgroup 矩阵支持设备的回退路径。b12469 是预发布构建,实际表现取决于设备、形状及分派结果,改动范围限于 Metal 的二维卷积。

















