llama.cpp 与 ggml 同步推出 v1.0.0 版本,本地推理底层库启用稳定语义化版本
ggml-org 团队正式同步发布 llama.cpp v1.0.0 和底层张量库 ggml v1.0.0,这是两个项目上线 3 年半之后,第一次同步进入 1.0 稳定主线,定下了公开 C API 和 ABI 二进制接口的兼容契约,对所有把 llama.cpp、ggml 嵌入本地 AI 程序、桌面客户端、推理服务的开发者来说是很关键的里程碑。过去很长一段时间 llama.cpp 和 ggml 都停留在 0.x 开发版,接口随时改动,开发者每次升级版本都要大面积改代码、重新调试,很多工具不敢直接绑定这个库做商用开发,这次同步发 v1.0.0,就是因为现在生态体量很大,大量本地 LLM 软件、多模态工具都依赖这套底层栈,团队需要固定版本规则,减少下游适配成本,同时清理老旧废弃接口、补上缓存优化、新增模型支持、加固 llama-server 安全能力。升级的时候,首先要保证 llama.cpp 和 ggml 两个库版本严格对齐,官方标签要求内部 ggml 副本和独立发布包版本保持一致,版本不匹配会直接出现兼容异常;接着检查项目代码,本次一共移除 35 个废弃公开函数,用到这些接口的代码必须替换成新版稳定接口,NextN 推测解码接口已经移入 llama.h 标准头文件;然后根据硬件情况开启 FP8 KV 缓存、MoE 专家主机缓存,跑 MoE 大模型可以手动调整 CPU 分担比例;如果使用 llama-server,还可以接入新增 OpenAI 兼容 TTS 接口,同步检查 SSRF、CORS 相关安全配置;最后在测试环境走完文本生成、多模态、语音生成、MCP 工具调用全链路验证,确认没问题再上线生产环境。整体来看,llama.cpp 搭配 ggml 这套本地推理底层,从迭代快速的实验工具,转变成可以长期锁定依赖、稳定集成的基础设施,后续版本变动风险清晰可控,本地私有化大模型落地门槛进一步降低。
llama.cpp 与 ggml v1.0.0 核心更新清单
- 统一语义化版本规则(同时适用于 llama.cpp、ggml)
- MAJOR 大版本号变更:公开 C API、ABI 二进制接口出现不兼容改动
- MINOR 小版本变更:向后兼容,新增功能、后端适配、新增模型架构
- PATCH 补丁版本变更:仅修复 bug,不改动任何对外接口
- API 清理调整
- 移除 35 个已经废弃的公开接口
- NextN 推测解码接口从扩展头文件移入标准 llama.h,纳入稳定 API 保障范围
- 推理性能优化项
- 支持 FP8 (E4M3) KV 缓存,压缩显存占用,支持更长上下文
- MoE 模型新增主机内存专家缓存,可配置 CPU 分担比例
- 支持从独立 GGUF 分片加载 PLE、engram 权重数据
- 新增模型覆盖
- 文本模型:Kimi-K3.1-Pro、Ripple、xing4_0
- TTS 语音模型:drama-3
- 多模态视觉模型:MageVL-Cowork、Kimi-K3.1
- 整体支持 150 种以上模型架构,兼容主流推测解码方案
- llama-server 服务更新
- 新增 /v1/audio/speech TTS 接口,兼容 OpenAI 调用格式
- 修复 SSRF、CORS、DNS 重绑定安全漏洞
- HF_TOKEN 限制仅向 Hugging Face 域名发起请求
- 客户端断开连接时自动终止 MCP 工具调用任务
- 多渠道分发支持
- 预编译包:Linux、macOS、Windows、安卓、iOS
- 其他包:Docker 镜像、Debian 包、Homebrew、winget、XCFramework
llama.cpp、ggml v1.0.0 升级适配步骤
- 获取对应版本包,必须保证 llama.cpp 和 ggml 版本同为 v1.0.0,版本不一致会出现底层张量运算异常
- 全局检索项目代码,排查并替换已经被移除的 35 个废弃接口
- 按需开启 FP8 KV 缓存、MoE 专家缓存,调整显存和内存分配参数
- 更新 llama-server 配置,按需启用 TTS 接口,核对安全访问策略
- 全链路测试:文本推理、多模态识别、语音合成、工具调用
- 确认业务稳定后,再部署到正式环境
【相关 FAQ】
问题 1:llama.cpp 与 ggml 同步发布 v1.0.0 版本意味着什么?
回答 1:llama.cpp 与 ggml 同步发布 v1.0.0 版本,代表两个底层库一起启用语义化版本规范,对外承诺稳定 API,后续只有大版本升级才会带来破坏性接口改动,不再像旧 0.x 版本那样无预警改动接口。
问题 2:升级 llama.cpp v1.0.0 的时候,ggml 可以继续用旧版本吗?
回答 2:不可以,llama.cpp 与 ggml 同步发布 v1.0.0 版本,官方要求两个库版本必须严格匹配,混用不同版本的 llama.cpp 和 ggml 会引发编译或者运行时异常。
问题 3:llama.cpp 与 ggml v1.0.0 新增的 FP8 KV 缓存适合什么场景?
回答 3:llama.cpp 与 ggml v1.0.0 新增的 FP8 KV 缓存适合电脑、移动端这类显存有限的本地推理场景,压缩 KV 缓存占用,能承载更长的对话上下文。
问题 4:llama.cpp 与 ggml v1.0.0 的 llama-server 新增 TTS 接口,有什么优势?
回答 4:llama.cpp 与 ggml v1.0.0 的 llama-server 新增 /v1/audio/speech 接口兼容 OpenAI 格式,原本对接 OpenAI 语音接口的程序,不用大幅度改代码就能切换成本地 llama.cpp 语音生成。
【参考资料】
[2026-11-13](llama.cpp V1.0.0 Sets API Stability Rules for Local AI Tools)Unite.AI
[2026-11-13](llama.cpp and ggml ship v1.0.0 — semantic versioning comes to the local AI stack)DEV Community
[2026-11-13](llama.cpp and ggml hit 1.0.0 with a stable-API promise)Grafy News
[2026-11-13](llama.cpp and ggml reach 1.0.0 with 150+ model architectures)Extrapolator AI
【免责声明】
本文仅为 llama.cpp 与 ggml v1.0.0 版本资讯整理,不构成生产环境开发、升级建议;llama.cpp 与 ggml v1.0.0 存在接口清理变更,升级前务必做好测试;不同硬件、GGUF 模型的推理速度、显存占用表现存在差异,性能结果以本地实际环境为准。
相关阅读
- 刷新纪录 TCL 华星 360Hz 笔记本 OLED 屏幕亮相 搭载联想拯救者原型机
- 执掌英伟达 33 年的黄仁勋,从承认风波到辞职离场仅 96 小时
- 实验食蟹猴报价 26 万每只、现货紧缺,订单排期已延续到明年
- 9・11 之后第二次全美地面停飞,美国突发全国航班暂停起飞指令
- 数百万用户受影响微软为全球服务中断道歉
- Google 本周推出第八代 TPU 全系列新品,同步更新 Gemini 4 系列多项能力
- Soumith Chintala 发布 NVFP4 训练详解文章,完整讲解原生 4bit 全链路训练方案
- Thinking Machines 详解 Inkling 2 Small 原生 4-bit 训练路径,采用 NVFP4 端到端训练方案
- DeepSeek 开放 App 全套底层能力全家桶 API开发者自由搭建 AI 应用
- DeepSeek 开放 App 全套能力给开发者 同步开源聊天前端 Harness
- Inkling 2 Small 采用原生 4-bit 前向传播训练,主预训练耗时压缩至 68 小时
- Y Combinator 转发 Anywhere(YC F26)为 Agent 提供地图
- Mnemonic Labs 发布量化交易基础模型,训练数据集规模突破 25TB
- Thinking Machines 详解 Inkling 2 Small 原生 4-bit 前向训练完整流程
- Garry Tan 推出免费技能 Idea Miner 支持递归自我改进挖掘可落地项目想法
- 斯坦福 HAI 大会完整录像上线 YouTube,整套播放列表一共包含 13 个视频
-
泡沫双面胶印胶可以清除干净,核心思路就是先软化胶层,再剥离残胶,最后清洁表面,常用办法包含热风加热 溶...浏览全文>>
-
TCL 华星在 DTC 2026 全球生态大会上展出刷新行业纪录的 360Hz 笔记本喷墨印刷 OLED 面板,这块 16 英寸 2 5K 屏幕装配在联想 浏览全文>>
-
黄仁勋掌舵英伟达长达 33 年,这次事件从 11 月 8 日他发全员信公开承认婚外情、向全员道歉,到 11 月...浏览全文>>
-
近期医药行业的 SPF 级实验食蟹猴市场报价来到 26 万元一只,国内多数合规繁育场已经没有现货,药企、CRO...浏览全文>>
-
当地时间 11 月 13 日,美国联邦航空管理局 FAA 发布全国范围地面停飞令,这是自 9・11 事件之后第二...浏览全文>>
-
标题:数百万用户受影响,微软为全球大范围服务中断公开致歉 微软官方针对这次全球性服务中断事件对外道歉,本...浏览全文>>
-
Google 本周正式扩充第八代 TPU 产品线,新增 TPU 8i Max、TPU 8tx 两款机型,加上早前发布的 8t、8i...浏览全文>>
-
PyTorch 联合创始人 Soumith Chintala 在 Connectionism 平台发布 NVFP4 训练详解文章,这篇文章重点拆解了从预训练首轮到 RL ro 浏览全文>>
-
Thinking Machines Lab 放出技术博客,完整拆解 Inkling 2 Small 原生 4-bit 训练的实现路径,这套方案不是训练完成后再做量化压 浏览全文>>
-
DeepSeek 正式开放全家桶应用 API,直接把 DeepSeek App 网页端背后整套能力打包对外开放,开发者不用自...浏览全文>>
- 泡沫双面胶印胶怎么清除 残胶清理实操指南
- 数百万用户受影响微软为全球服务中断道歉
- DeepSeek 开放 App 全套能力给开发者 同步开源聊天前端 Harness
- Thinking Machines 详解 Inkling 2 Small 原生 4-bit 前向训练完整流程
- Google 发布 Gemini 4 Hydrogen,开发者现已接入使用
- Google Cloud 上线 GEAR 免费认证培训,课程聚焦 PAA 方向
- Sequoia 提醒No Limit Charity Cup 报名本周日截止
- Constor(YC F26)推出建筑 AI 原生操作系统以算量为切入点
- U 盘被写保护怎么办 写保护解除修复教程
- Intel 480GB 显存 Crescent Island 订单超 20 亿美元,PC 玩家不用期待这款卡
- Soumith Chintala 发布 NVFP4 训练详解文章,完整讲解原生 4bit 全链路训练方案
- DeepSeek 开放 App 全套底层能力全家桶 API开发者自由搭建 AI 应用
- Google Research 联合 DeepMind 在剑桥大学举办 AI 研究启发日活动 促进学界 AI 科研协作
- LangChain 完成 3 亿美元融资,估值达 30 亿美元
- Bland 发布语音到语音模型 Tofu-1 主打高风险通话实时对话场景
- Lightspeed 联合领投 Fractile AI 7.2 亿美元 C 轮融资,这家英国推理芯片公司估值冲到 70 亿美元
- NVIDIA Omniverse 推出 SimReady 资产机器人仿真实操教程
- NYU Courant 宣布成立数学与人工智能中心 MAIC
- 英伟达等美股大跌苹果逆势上涨市值刷新最高记录
- 大衣哥朱之文表态不直播带货没法把控产品质量
- 执掌英伟达 33 年的黄仁勋,从承认风波到辞职离场仅 96 小时
- 9・11 之后第二次全美地面停飞,美国突发全国航班暂停起飞指令
- Thinking Machines 详解 Inkling 2 Small 原生 4-bit 训练路径,采用 NVFP4 端到端训练方案
- Inkling 2 Small 采用原生 4-bit 前向传播训练,主预训练耗时压缩至 68 小时
- 斯坦福 HAI 大会完整录像上线 YouTube,整套播放列表一共包含 13 个视频
- Y Combinator 转发 mireye agent可检索美国房地产与政府数据
- ArtificialAnlys 首届图像与视频主题活动正式官宣,公布全部演讲嘉宾名单
- 斯坦福开设CS329Z课程从零构建AI智能体,内容免费在线
- Perplexity 开启前沿产品人才招募,同步预告全新产品
- Google 一周新品汇总 第八代 TPU 新增两款芯片搭配 Gemini 4 系列同步亮相
- 斯坦福 CS329Z《AI 智能体工程》课程视频逐步对外公开,目前已经上线 4 讲
- 候鸟列车迎来南下客流高峰,南北温差大上演上车穿棉袄下车穿短袖
- 杭州 Ulike 脱毛仪出海热销海外 连续四年全球销量第一海外年收入超 7 亿
- llama.cpp 与 ggml 同步推出 v1.0.0 版本,本地推理底层库启用稳定语义化版本
- OpenClaw 将于12月在深圳举办 Claw 节,含黑客松与 ClawCon
- Hugging Face 官宣 llama.cpp v1 正式发布,本地大模型推理迎来稳定 API 版本
- Edge Sound Research 完成 200 万美元融资 打造音频感知方案赋能物理 AI 识别声音
- Navi 在 12 万页金融文档推理任务上超越前沿 AI 模型
- 国内首款大连理工 20 公斤级氢能无人直升机亮相 最长续航 3 小时
- 一张地图引发酒店压力,店方担心出现误伤风险
