llama.cpp v0.6.0:本地推理加入新模型、MTP 同多模態 embedding
以下保留原日報內容及原有核實標記;不代表本站已獨立確認全部敘述。待觀察/未完全核實消息並非已確認事實。
主題分析(原日報全文)
llama.cpp 於 10 月 6 日 00:56 HKT 發布 v0.6.0,新增 mixed token/embedding batch API、GLM-5.3-Flash 同 Clef 支援、Qwen4Exp MTP speculative decoding,以及多模態 embedding 輸入同一批新 GPU kernels。對企業邊緣/私有部署而言,重點係本地推理引擎由『跑到模型』進一步處理 agent decision endpoint、多模態同吞吐優化;但部分 session 格式同 API 有改動,升級前要做相容性測試。
原文與來源(原日報完整清單)
llama.cpp v0.6.0 release
官方原始來源:GitHub · ggml-org/@github-actions · 原日報所列日期:2026-10-06
ggml-org/llama.cpp v0.6.0
獨立發布索引:NewReleases · NewReleases · 原日報所列日期:2026-10-06
llama.cpp v0.6.0 released with MTP speculative decoding
公開社群:Reddit r/LocalLLaMA · 社群帖文 · 原日報所列日期:2026-10-06
