Meta 发布 Muse Glimmer 技术报告,推出 30B 开放权重多模态模型
Meta 正式对外发布 Muse Glimmer 完整技术报告,同步开放这款 30B 参数模型全部权重,在 Apache 2.0 许可协议下免费向开发者开放使用,模型采用稠密 Transformer 架构,搭配独立视觉感知编码器,主打本地离线智能体任务,在 24GB 显存的消费级显卡上就能流畅运行多轮工具调用、长文本推理与图文混合任务,在保持高推理性能的同时,大幅降低本地部署的硬件门槛,不用依赖云端接口就能搭建全天候运行的本地 AI 智能体
IT之家
。这款模型之所以能够兼顾大参数规模与本地硬件适配能力,核心来自三方面优化设计,一是从更大规模的 Muse Spark 主模型做知识蒸馏,把高阶推理能力完整迁移到 30B 小体量模型里;二是采用滑动窗口注意力加全局层交替的结构,把 KV 缓存体积压缩到最低,大幅减少长上下文场景下的显存占用;三是专门增加独立视觉编码器,原生支持图文交错输入,把文本推理与图像理解整合到同一个模型里,不用额外外接视觉模型。整套模型从预训练到落地部署,严格遵循多阶段训练、量化压缩、硬件适配三步走的完整流程,每一个环节都围绕本地智能体场景做定制优化,最终实现 30B 稠密模型单卡离线运行,多步骤任务成功率比肩更大参数的开源模型。
一、模型整体架构与核心参数
1. 整体网络结构
Muse Glimmer 30B 属于稠密因果大模型,整体分为两大模块:52 层文本主干网络,外加一个 1.8B 参数的 ViT-G/14 视觉感知编码器,两个模块通过多模态投影层完成信息融合,能够同时接收文字与图片交错输入,直接输出文本内容,全程不需要拆分图文任务
Together A...
2. 核心参数清单
表格
| 参数项目 | 具体配置 |
|---|---|
| 总参数量 | 约 29.6B(30B),视觉编码器占 1.8B |
| 上下文窗口 | 最高 131072 tokens(128K+) |
| 注意力机制 | 分组查询注意力,32 个查询头、2 个 KV 头;滑动窗口 + 全局层交替,每 4 层插入一层全局注意力 |
| 前馈网络 | SwiGLU 激活函数 |
| 词表大小 | 202048 |
| 单图视觉 token 上限 | 4096 个 |
| 模型类型 | 稠密多模态因果语言模型 |
二、三阶段模型训练流程
第一阶段:预训练蒸馏。以 Muse Spark 大模型为教师模型,使用同配比训练数据集做 logit 知识蒸馏,把基础语言能力、逻辑推理能力迁移到 Muse Glimmer,打好模型基础能力,保证小模型保留大模型的推理上限。
第二阶段:中期长上下文训练。扩充训练数据,加入超长推理轨迹、图文交错样本、多轮工具调用记录,让模型学会在十万级 token 上下文里维持逻辑连贯,熟练执行连续多步骤任务。
第三阶段:后对齐优化。结合监督微调、在线蒸馏与强化学习三种方式,针对代码编写、函数调用、任务规划、失败重试四大能力做专项优化,让模型能够自主完成智能体全流程任务,遇到工具调用出错时可以自动调整方案完成任务闭环。
三、量化与本地硬件部署方案
1. 量化压缩方案
官方提供 FP8、4bit 两种量化版本,4bit 量化之后模型整体性能衰减幅度极小,几乎不会影响智能体任务成功率,同时把显存占用压缩到适配消费级硬件的水平
IT之家
2. 主流硬件运行表现
表格
| 硬件设备 | 量化版本 | 运行速度 | 显存占用 |
|---|---|---|---|
| RTX 5090 显卡 | 4bit 量化 | 最高 233 token/s | 低于 22GB |
| Mac M4 Max | 4bit 量化 | 160 token/s 左右 | 20GB 以内 |
| 单卡工作站 FP8 版本 | FP8 精度 | 20000+ token/s | 30GB 上下 |
整套部署不需要对模型做分片处理,也不用把部分参数卸载到 CPU 内存,单张显卡就能完整加载全部权重,真正做到纯本地离线运行,全程不产生网络流量。
四、实测任务效果与基准表现
本次评测一共覆盖四类智能体核心任务,包含端到端任务完成、工具调用、多步长推理、故障自动恢复,选用 DeepSearch QA、MCP-Atlas、τ3-Bench、SWE-Bench 主流评测基准。在同等硬件条件下,Muse Glimmer 30B 的多轮智能体任务成功率显著高于同参数规模的稀疏专家模型;和更大参数的开源模型对比,整体差距很小,在本地离线场景下综合表现具备明显优势。同时在图文混合任务里,依托独立视觉编码器,模型可以直接读取截图、图表信息,把图像内容融入任务规划,进一步拓宽本地智能体的使用场景。
五、开放权重落地配套能力
第一,权重分发渠道,模型权重同步上传至 Hugging Face 平台,开发者可以直接下载完整权重文件,支持 LoRA 微调、全参数微调两种二次开发模式;第二,推理优化支持,兼容 NVIDIA NeMo 框架、Ollama 本地推理工具,支持 DFlash 推测解码,进一步降低推理延迟;第三,商用授权,Apache 2.0 协议允许个人开发者与企业直接商用,不需要提交额外申请,大幅降低二次开发门槛
museglimme...
【相关 FAQ】
问题 1:Muse Glimmer 作为 30B 开放权重模型,采用什么架构来实现本地单卡部署?
回答 1:Muse Glimmer 这款 30B 开放权重模型,采用 52 层稠密 Transformer 主干 + 独立 1.8B 视觉编码器的架构,搭配滑动窗口交替全局注意力机制,大幅压缩 KV 缓存占用,再配合 4bit 量化压缩,最终可以在 24GB 显存的单张消费级显卡完成全权重加载,顺利实现本地离线部署。
问题 2:Muse Glimmer 30B 开放权重模型,是通过什么方式获得高阶推理能力?
回答 2:Muse Glimmer 这款 30B 开放权重模型,采用三阶段训练方案,核心环节就是从更大规模的 Muse Spark 主模型做 logit 知识蒸馏,把大模型的高阶逻辑推理、长文本规划能力迁移过来,再通过长上下文训练与强化学习对齐,保证小参数模型依然拥有很强的智能体任务执行能力。
问题 3:Muse Glimmer 30B 开放权重模型,原生支持图文交错输入吗?
回答 3:Muse Glimmer 这款 30B 开放权重模型自带独立 ViT-G/14 感知编码器,原生支持文本与图片交错输入,单张图片最高可以输出 4096 个视觉 token,能够直接识别截图、图表、图纸内容,完成图文混合的本地智能体任务,不需要额外对接第三方视觉模型。
【数据来源】
[2026-10-08](Meta Muse Glimmer 30B 模型架构详解)Fireworks AI 技术博客
[2026-08-14](Meta 开源 Muse Glimmer:30B 本地智能模型支持端侧运行)InfoQ
[2026-08-10](Meta 发布 Muse Glimmer 30B 开源模型,单卡本地运行)IT 之家
[2026-08-10](Run Local Agentic AI Workflows with Meta’s Muse Glimmer)NVIDIA 技术博客
[2026-08-10](Muse Glimmer 30B Model Card)Hugging Face 模型主页
免责声明:本文全部内容均来源于 Meta 公开技术报告、开源模型文档以及第三方技术评测资料,仅作技术内容解读,不构成产品采购、项目落地与商业投资建议;模型实际运行效果会受硬件配置、量化精度、提示词设计影响;Muse Glimmer 模型权重知识产权归属 Meta 研究团队,模型使用需要严格遵守 Apache 2.0 开源许可协议。
- 信任为核心Dify 插件生态的安全建设与全流程治理方案
- MiniMax M3.1 Flash 登陆 Command Code 开启限时免费体验
- 消息称 OpenAI Terra 模型综合使用成本低于 GPT-6.1 Sol
- 不必着急抢购 iPhone Duo,这 5 款旗舰机型更值得入手
- 苹果推出 iOS 27.2 RC 版本,国行 AI 暂未上线,Apple Music 图标更新为黑白样式
- 今晚 8 点 iPhone 18 Pro 系列迎来历史最低售价
- 孕妇取消寄件订单后被上门沟通受惊就医 圆通公开致歉并落实人员处罚
- Muse 账号极速注册,快速完成账号开通
- MiniMax 正式推出 M3.1 Flash,同步公布 API 调用定价与多项基准测试成绩
- NVIDIA GTC 柏林站主题演讲预热节目正式对外公布
- MiniMax M3.1 Flash 制作落地页,成本仅为 Opus 5.5 的约 1/88
- OpenAI 模型提升 COBOL 低资源语言开发与系统迁移综合能力
- MiniMax M3.1 Flash 登陆 GMI 平台,主打编码与智能体应用场景
- Google Cloud 深度解读 Gemini at Work 2026 云智能体整体架构
- 微软联合英特尔打造从边缘到云端的数字主权技术底座
- Exa 正式发布 Exa 3.0 新版本,搜索质量迎来有史以来最大幅度升级
- 亚马逊开源 TorchNeuron 工具,PyTorch 仅修改一处配置就能在 Trainium 芯片运行
- HeyGen iPhone 端一键按钮制作数字人视频完整实操方案
- MiniMax M3.1 Flash 在 Command Code 平台开启限时免费上线活动
- ArtificialAnlys 宣布 Mercury 3 上线,称速度超 1000 tokens/秒
- Meta 发布 Muse Glimmer 技术报告,推出 30B 开放权重多模态模型
- LangChain 高管解读模型迭代,智能体开发模式与价值分配格局迎来全面革新
- 制造商部署物理 AI 项目,应先完成成熟度评估再落地业务用例
- LangChain 技术分享搭建 Agent 工程的技术门槛容易被低估
- Greptile 完成 5000 万美元 B 轮融资,投后估值达到 7.5 亿美元
- PyTorchCon 今日会议议程重点围绕企业级 AI 规模化扩展展开
- Pika 携手 OpenAI 上线 ChatGPT 专属插件扩展,打通图文视频全链路创作能力
- PyTorch 开启认证助理专项培训,课程内容全面对齐 PTCA 考试大纲
- 伯克利推出 EyeRobot 2.0,依靠凝视完成无腕部摄像头高精度操作
- MiniMax M3.1 Flash 实现 Ollama Day0 原生适配,全面适配各类 Agent 自动化工作流
- MiniMax M3.1 Flash 正式版正式上线,OpenCode 开放三天免费试用权益
- MiniMax M3.1 Flash 免费接入 Cline 平台,主打低成本长时 Agentic 代码开发
-
Dify 插件生态的长期稳定运行,核心根基就是信任体系,整套安全与治理机制围绕可信发布、可信安装、可信运行...浏览全文>>
-
MiniMax M3 1 Flash 模型已经正式登陆 Command Code 平台,并且开启限时免费福利,所有开发者都可以在...浏览全文>>
-
从最新的 API 定价数据可以明确得出结论,OpenAI Terra 模型的整体使用成本要低于 GPT-6 1 Sol,不管是...浏览全文>>
-
现阶段不用盲目抢购 iPhone Duo,下面 5 款机型在价格、机身重量、续航、影像、系统生态上都有均衡表现,...浏览全文>>
-
苹果面向注册开发者推送了 iOS 27 2 RC 发布候选版本,这一版本属于正式版上线前的最后测试阶段,本次更...浏览全文>>
-
今晚 8 点天猫平台开启优惠活动,iPhone 18 Pro 系列将迎来上市之后的历史最低价,256GB 标准版到手价可...浏览全文>>
-
本次事件核心结论是圆通涉事网点错误传递信息,引发快递员上门沟通,造成孕妇受到惊吓前往医院就诊,圆通总部...浏览全文>>
-
用户可以通过多渠道快速完成 Muse 账号注册,全程最短可以压缩到 2 分钟以内完成全部开通流程,优先选用第...浏览全文>>
-
MiniMax 全新发布的 M3 1 Flash 模型,在推理速度、Agent 智能体、代码开发、电脑操作与网络安全五大场...浏览全文>>
-
本次 NVIDIA GTC 柏林大会已经完整放出主题演讲配套的预热节目,整套预热内容将在正式 keynote 开始前两...浏览全文>>
- 今晚 8 点 iPhone 18 Pro 系列迎来历史最低售价
- NVIDIA GTC 柏林站主题演讲预热节目正式对外公布
- 微软联合英特尔打造从边缘到云端的数字主权技术底座
- MiniMax M3.1 Flash 在 Command Code 平台开启限时免费上线活动
- ArtificialAnlys 宣布 Mercury 3 上线,称速度超 1000 tokens/秒
- LangChain 技术分享搭建 Agent 工程的技术门槛容易被低估
- 伯克利推出 EyeRobot 2.0,依靠凝视完成无腕部摄像头高精度操作
- MiniMax M3.1 Flash 正式对外发布,前身 Space Bunny 曾登顶 OpenRouter 榜单
- 苹果官宣下周开启特别活动,首款触屏 MacBook Pro 预计正式亮相
- 加速电动化转型 日本车企携手富士康开启整车代工深度合作
- 苹果推出 iOS 27.2 RC 版本,国行 AI 暂未上线,Apple Music 图标更新为黑白样式
- Exa 正式发布 Exa 3.0 新版本,搜索质量迎来有史以来最大幅度升级
- HeyGen iPhone 端一键按钮制作数字人视频完整实操方案
- PyTorchCon 今日会议议程重点围绕企业级 AI 规模化扩展展开
- MiniMax M3.1 Flash 实现 Ollama Day0 原生适配,全面适配各类 Agent 自动化工作流
- MiniMax M3.1 Flash 正式版正式上线,OpenCode 开放三天免费试用权益
- 宇树机器人进入工厂落地,工业场景规模化推进面临多重现实考验
- 《巫师 3狂猎》重制版 Switch 2 版 5.01 补丁开放下载,多项画面优化实现画质全面升级
- 车主在 4S 店花费 2730 元车辆保养,收到的发票开票方为殡仪馆
- 华为畅享 100 系列配置曝光,顶配搭载麒麟 8020 芯片与 8800mAh 超大电池
- 信任为核心Dify 插件生态的安全建设与全流程治理方案
- 不必着急抢购 iPhone Duo,这 5 款旗舰机型更值得入手
- MiniMax 正式推出 M3.1 Flash,同步公布 API 调用定价与多项基准测试成绩
- MiniMax M3.1 Flash 制作落地页,成本仅为 Opus 5.5 的约 1/88
- 亚马逊开源 TorchNeuron 工具,PyTorch 仅修改一处配置就能在 Trainium 芯片运行
- Meta 发布 Muse Glimmer 技术报告,推出 30B 开放权重多模态模型
- Pika 携手 OpenAI 上线 ChatGPT 专属插件扩展,打通图文视频全链路创作能力
- Pika Labs 携手 OpenAI 正式上线 Pika X ChatGPT 插件
- StanfordAILab 公开转发研讨,聚焦 Autoformalization 忠实性核心议题
- 硅谷热议 Anthropic 成立公益基金,业内人士提出股权直接发放的优化思路
- 哪吒汽车重整方案进入表决阶段,各方权益协调出现新分歧
- 伦敦黑色出租车向 Uber 索要 2.5 亿英镑赔偿的诉讼最终被法院驳回
- 存储板块仍处于调整阶段,现阶段还没有迎来板块抄底时机
- 安卓首款阔直板新机开启预约,999 元起步可实现微信 8 开
- 定价 38999 元《影之刃零》联名整机新品正式公布,推出全套奢华硬件全家桶
- AI 无法给出标准答案的议题,需要开展线下深度研讨
- 微软扩充 Project Perception 项目,实现 AI 智能体风险常态化持续评估
- NVIDIA 官宣 GTC 柏林大会,欧洲本土 AI 建设者成为全场核心焦点
- Runway Labs 亮相,展示生成式视频与世界模型概念项目
- 稻城亚丁驴友遇高反错失救援时机,户外出行安全意识值得重视
