llama.cpp b12468 补齐了哪个 WebGPU 算子?

苏见山
苏见山
发布时间:2026-11-17 | 5人浏览过
原创

llama.cpp b12468 在 WebGPU 后端实现时间步嵌入算子。依赖该算子的模型计算因此可以在这一后端使用对应内核。

llama.cpp 软件封面

时间步嵌入在计算图里做什么

llama.cpp b12468 的 WebGPU 后端新增时间步嵌入内核。时间步可以用一个数值表示,嵌入则将它编码为向量,供模型后续参与计算。

llama.cpp b12468 官方预发布及改动

为什么下游项目会需要该算子

项目合并记录以 stable-diffusion.cpp 为例。需要将去噪进度作为模型输入的计算图会使用时间步表示,新增内核补齐的是对应的一项运算。具体项目还取决于它的其他算子与运行环境。

如何理解这一构建的适用范围

b12468 是预发布构建。该项变化对应 WebGPU 上实际调用时间步嵌入的计算,其他后端和没有调用该算子的模型路径不在本次变更范围。

本站声明

本文内容仅供参考,不代表本站观点。转载或引用请注明出处。如发现内容问题,请通过联系我们页面反馈。

Python 相关产品和应用

全部下载

专题列表