揀選後會直接顯示該品牌所有公開優惠
電訊傳說 / 全球 AI 快訊GLOBAL AI BRIEFING

全球 AI 快訊

每日資訊整理・六大專題・原文可追溯

閱讀最新日報 最新已發布日報 2026-10-10
← 返回AI 技術更新AI 技術更新

llama.cpp v0.6.0:本地推理加入新模型、MTP 同多模態 embedding

資訊日期 · 原日報全文 · 本站補充核對待核實

以下保留原日報內容及原有核實標記;不代表本站已獨立確認全部敘述。待觀察/未完全核實消息並非已確認事實。

主題分析(原日報全文)

llama.cpp 於 10 月 6 日 00:56 HKT 發布 v0.6.0,新增 mixed token/embedding batch API、GLM-5.3-Flash 同 Clef 支援、Qwen4Exp MTP speculative decoding,以及多模態 embedding 輸入同一批新 GPU kernels。對企業邊緣/私有部署而言,重點係本地推理引擎由『跑到模型』進一步處理 agent decision endpoint、多模態同吞吐優化;但部分 session 格式同 API 有改動,升級前要做相容性測試。

原文與來源(原日報完整清單)

llama.cpp v0.6.0 release

官方原始來源:GitHub · ggml-org/@github-actions · 原日報所列日期:2026-10-06

ggml-org/llama.cpp v0.6.0

獨立發布索引:NewReleases · NewReleases · 原日報所列日期:2026-10-06

llama.cpp v0.6.0 released with MTP speculative decoding

公開社群:Reddit r/LocalLLaMA · 社群帖文 · 原日報所列日期:2026-10-06

本站上架:7/10/2026 下午12:37:13(香港時間)