MiniMax 联合 Inferact 优化模型生产推理,技术优化成果同步回馈 vLLM 开源社区
MiniMax 正式和 Inferact 达成深度战略合作,双方共同完成 MiniMax 全系大模型线上生产推理的全链路优化,所有针对模型架构、推理内核的工程改进代码,全部向上游 vLLM 开源项目提交合并,实现商业落地技术反哺开源社区的正向循环,合作落地后 MiniMax M3.1 Flash 模型上线首日就在 Inferact 平台完成大规模生产部署,轻松承载高并发、百万级上下文的智能体业务请求,整体推理吞吐能力得到大幅提升。之所以选择 Inferact 作为核心推理合作伙伴,核心原因在于 Inferact 团队正是 vLLM 项目的创始开发团队,掌握 PagedAttention 分页显存管理、投机解码等底层核心技术,能够直接针对 MiniMax 自研稀疏注意力(MSA)架构做内核定制优化,不用改动模型基础代码就能完成推理提速;同时 Inferact 具备成熟的云端生产调度能力,可以快速承接大模型上线后的流量峰值,保障线上业务稳定运行;双方把整个合作项目拆分为三大执行阶段,第一阶段完成 MiniMax M3 系列模型在 vLLM 框架下的首日适配,第二阶段针对生产场景做显存优化、量化压缩与投机解码调优,第三阶段把全部优化补丁提交到 vLLM 主仓库,完成开源回馈,整套流程稳步落地之后,不仅让 MiniMax 模型在线上服务的运行成本明显下降,也进一步完善了 vLLM 对稀疏 MoE 长上下文模型的原生支持能力,给整个开源 AI 开发者群体带来更完善的推理工具。
一、合作项目核心基础信息清单
- 合作主体与项目目标 表格 79
- 业务落地成果 Inferact 平台在 MiniMax M3.1 Flash 模型发布当天就完成上线部署,实现 Day-0 首日支持;依托优化后的 vLLM 版本,模型在多 GPU 分布式部署场景下,单卡 Token 吞吐提升七成以上,长上下文场景下显存碎片问题得到彻底解决,大幅降低智能体应用的云端算力开销。
二、分阶段落地实施步骤
阶段 1:模型原生适配,实现开箱即用
针对 MiniMax 自研 MSA 稀疏注意力、MoE 混合专家架构,在 vLLM 中新增专属模型实现,补齐张量并行、专家并行的调度逻辑,完成 BF16、MXFP8 两种精度的基础适配,保证模型不用修改权重文件就能直接启动推理服务。
阶段 2:面向生产场景做深度性能调优
- 内核融合优化:新增 QK-Norm 算子融合代码,减少 GPU 显存读写次数,降低推理延迟;
- 投机解码部署:联合训练 EAGLE3 草稿模型,在 vLLM 中开启 Speculative Decoding,大幅提升生成速度;
- 显存管控优化:基于 PagedAttention 优化 KV 缓存分块策略,妥善处理百万 token 超长上下文带来的内存占用问题;
- 量化适配:完成 MXFP4、NVFP4 低精度量化支持,在几乎不损失精度的前提下降低显存占用。
阶段 3:代码整理与开源回馈
把所有新增算子、模型适配代码、性能优化补丁整理成标准化 PR,提交到 vLLM 官方代码仓库,经过社区评审后合并进主干版本,让所有开发者都能免费使用这套针对 MiniMax 模型的推理优化方案,持续完善 vLLM 对前沿稀疏大模型的支持能力。
三、关键技术优化内容拆解
- 稀疏注意力(MSA)专项优化 MiniMax 自研的稀疏注意力机制会筛选关键 token 参与计算,原有通用推理框架无法高效匹配这套逻辑。双方共同在 vLLM 中开发定制化内核,优化 K-V 分块缓存策略,减少无效计算,让长文本推理速度实现跨越式提升。
- EAGLE3 投机解码工程落地 Inferact 团队基于 vLLM 搭建在线训练链路,训练出适配 MiniMax M3 系列的 EAGLE3 草稿模型,把草稿模型和主模型推理链路打通,在生产环境下把 token 生成速度提升 2 倍到 3 倍,同时保持输出内容质量不变。
- 分布式并行能力增强 完善 vLLM 张量并行 + 专家并行混合调度方案,支持多卡横向扩展,满足大模型高并发 API 服务的集群部署需求,支撑上万条请求同时在线运行。
四、本次合作带来的双向价值
- 对 MiniMax:依托 vLLM 底层技术 + Inferact 工程能力,实现新模型发布即上线,快速完成大规模商业化部署,大幅降低云端推理成本,保障智能体业务稳定运行。
- 对 vLLM 开源社区:收获稀疏 MoE、长上下文、投机解码的全套工程代码,补齐前沿模型适配短板,进一步巩固 vLLM 在生产推理领域的技术领先地位。
- 对整个 AI 产业:形成 “模型厂商 + 推理技术团队 + 开源框架” 的协作范本,商业项目产生的技术优化持续回流开源社区,推动整个大模型推理生态良性迭代。
【相关 FAQ】
问题 1:MiniMax 与 Inferact 开展合作,核心工作是推进什么业务,同时把优化成果回馈给哪个项目?
回答 1:MiniMax 与 Inferact 合作推进 MiniMax 大模型的生产推理业务,针对模型架构做出的全部推理优化工程代码,全部回馈给 vLLM 开源推理项目,完善 vLLM 对稀疏大模型的支持能力。
问题 2:MiniMax 联合 Inferact 优化 vLLM 推理能力,针对 MiniMax 模型做了哪些核心技术改造?
回答 2:双方在 vLLM 中完成三大核心改造:一是开发 MSA 稀疏注意力专属 GPU 内核;二是落地 EAGLE3 投机解码方案,提升生成速度;三是优化 KV 缓存与量化部署,解决百万级上下文场景下的显存碎片化问题,同时完善多卡分布式并行调度能力。
问题 3:MiniMax 与 Inferact 合作后,在模型上线部署上取得了怎样的成果?
回答 3:MiniMax 与 Inferact 合作之后,Inferact 平台实现对 MiniMax M3.1 Flash 模型的 Day-0 首日部署,依托优化后的 vLLM 引擎,模型线上吞吐大幅提升,顺利承接高并发智能体业务,同时所有优化代码全部开源回馈 vLLM 社区。
【数据来源】
[2026-10-23](MiniMax 与 Inferact 合作推进模型生产推理并回馈 vLLM)InfoQ 中文站
[2026-10-23](MiniMax M3.1 Flash 开源,Inferact
[2026-10-22](MiniMax M3 在 vLLM 实现 Day-0 全链路支持)vLLM 官方技术博客
[2026-10-10](vLLM+Inferact 将 MiniMax M3 推理速度提升 7.84 倍)Cherry AI 技术资讯
[2026-09-26](Inferact 团队背景:vLLM 创始团队打造前沿推理服务)
免责声明:本文仅客观整理 MiniMax、Inferact 与 vLLM 合作公开披露的技术方案、项目进度与落地成果;实际推理性能、吞吐指标会受 GPU 硬件、并发流量、上下文长度等现场条件影响;所有开源代码合并进度以 vLLM 官方仓库 PR 审核结果为准,本文内容不构成线上业务部署与技术选型的硬性依据。
- 小鹏 MONA L05 超级增程实现全球不挑油,兼容多国油品标准
- 骁龙 X2 正式适配微软 ASD 新技术,游戏加载速度提升超 95%
- X 平台首条视频播放量突破千万,影视飓风开启百台 iPhone 福利回馈活动
- iPhone Duo 开售首日溢价大幅回落 一周溢价缩水超五成
- iPhone Duo 正式开售,全国苹果直营店可现场办理 eSIM 业务
- 理想 i6 实测续航达成率 104%,自研三电系统实现续航反向虚标
- 纯电续航 560kmfirefly 萤火虫新车型上市 租电 7.98 万起售
- 直降 6070 元锐龙 7 9800X3D+RX 9070 XT 整机到手价降至 1.36 万元
- PHP 高危漏洞集中爆发 全球多数网站迎来安全加固窗口期
- 胖东来门店 iPhone Duo 到货仅 10 台,大量顾客提前一晚开启排队
- SSD 与 HDD 无法替代 磁带存储持续迭代 单盘容量冲刺至 365TB
- 实测理想 i6 长续航版本,96 度电池跑出 800 多公里续航表现
- 海外受众追捧豪门复仇题材 字节短剧平台 PineDrama 实现高速增长
- 更名后估值达 2 亿 原死了么 App 正式对外公布服务收费标准
- 信创首款机型落地 联想开天 P7h G1t 正式发布 搭载海光 C86-4G 配备热插拔双电
- 全员 AI 全面落地之后,技术与产业的边界该如何划定
- AI 普及之后,UI 界面设计还需要提前绘制原型吗
- 不要盲目为企业开发 AI Agent,多数业务场景并无刚需
- iPhone Duo 首发市场热度稳步回归理性,折叠屏行业仍处在品类定义阶段,距离全面普及还有成长空间
- MiniMax M3.1 Flash 权重正式开源 Together Compute 首日上线托管服务
- NVIDIA 祝贺 MiniMax M3.1 Flash 428B 正式发布,Vera Rubin 硬件实现 Day 0 原生支持
- Astra 智能体 Harness 架构,实现智能体从历史运行轨迹自主持续学习
- METR 评估显示 5 月至 7 月约 10% 可监控 Codex 内部流量未纳入检查流程
- MiniMax M3.1 Flash 权重正式开源,Together AI 同步完成模型上线部署
- RunAnywhereAI 上线 Wally 模型目录,同步新增 7 款开源大模型
- MiniMax TokenSpeed 完成对 M3.1 Flash 的上线首日全适配支持
- 德媒曝出合作消息,奥迪与华为洽谈联合研发新一代中国专属版 A8
- 330 万货值 RTX 5090 流入二手市场,商品实拍连序列号都没有遮挡
- 舒蕾控油蓬松洗发水开启官方促销,单瓶到手价低至 9.97 元
- iPhone Duo 采用纳米纹理表层弱化折痕,官方内屏更换定价 7998 元
- AMD 为 Zen6 APU 做好软件铺垫,光追库新增三款核显,采用 RDNA4m 混搭 RDNA3.5 架构
- 名流超薄玻尿酸避孕套手感顺滑亲肤,活动到手价仅 12.5 元
-
带山岭的成语主要有崇山峻岭、翻山越岭、爬山越岭、重山复岭、峻岭崇山、越岭翻山。这类表达把“山”和“岭”...浏览全文>>
-
壶口瀑布在陕西省延安市宜川县和山西省临汾市吉县交界的黄河河段上,一侧属于陕西,一侧属于山西。简单理解,...浏览全文>>
-
DNF装备跨界需要准备的常规材料是“对应品级的装备跨界石”和“金币”,同时还要有“可接收装备的同账号角色”...浏览全文>>
-
临时牌照的交通管理记录,可通过官方线上平台或就近交管窗口查询确认,并按提示完成身份验证、材料提交与信息...浏览全文>>
-
易拉宝是一种常用于展会、门店、会议和活动现场的立式展示物料,核心形式是把宣传画面固定在可伸缩的支撑杆上...浏览全文>>
-
天然气和液化气最核心的区别在主要成分、来源、供应方式、设备适配和使用场景。天然气通常以甲烷为主,常见通...浏览全文>>
-
胡椒和花椒不是同一种香料,胡椒来自胡椒科胡椒属果实,花椒来自芸香科花椒属果皮,胡椒主要提供辛香,花椒主...浏览全文>>
-
小鹏 MONA L05 超级增程车型完成多地区油品标定,能够兼容国内与海外多国不同标号、不同乙醇含量的燃油,真...浏览全文>>
-
搭载高通骁龙 X2 系列处理器的 Windows 设备,现已全面支持微软 DirectX12 ASD 高级着色器交付技术,实...浏览全文>>
-
影视飓风入驻 X 平台发布的第一条视频,短时间内浏览量轻松突破千万级别,整体热度一路走高,账号入驻一天就...浏览全文>>
- iPhone Duo 开售首日溢价大幅回落 一周溢价缩水超五成
- iPhone Duo 正式开售,全国苹果直营店可现场办理 eSIM 业务
- 直降 6070 元锐龙 7 9800X3D+RX 9070 XT 整机到手价降至 1.36 万元
- 实测理想 i6 长续航版本,96 度电池跑出 800 多公里续航表现
- AI 普及之后,UI 界面设计还需要提前绘制原型吗
- 不要盲目为企业开发 AI Agent,多数业务场景并无刚需
- MiniMax M3.1 Flash 权重正式开源 Together Compute 首日上线托管服务
- MiniMax M3.1 Flash 权重正式开源,Together AI 同步完成模型上线部署
- 德媒曝出合作消息,奥迪与华为洽谈联合研发新一代中国专属版 A8
- iPhone Duo 采用纳米纹理表层弱化折痕,官方内屏更换定价 7998 元
- 易拉宝啥意思 展会物料说明
- 天然气和液化气的区别是什么 一文读懂
- 胡椒和花椒的区别 烹饪用法与香气特点
- 骁龙 X2 正式适配微软 ASD 新技术,游戏加载速度提升超 95%
- 纯电续航 560kmfirefly 萤火虫新车型上市 租电 7.98 万起售
- 海外受众追捧豪门复仇题材 字节短剧平台 PineDrama 实现高速增长
- RunAnywhereAI 上线 Wally 模型目录,同步新增 7 款开源大模型
- MiniMax TokenSpeed 完成对 M3.1 Flash 的上线首日全适配支持
- 天涯明月刀新手玩什么职业好 新手职业选择指南
- Canva 发布 Canva Craft 图像生成模型
- 理想 i6 实测续航达成率 104%,自研三电系统实现续航反向虚标
- SSD 与 HDD 无法替代 磁带存储持续迭代 单盘容量冲刺至 365TB
- 全员 AI 全面落地之后,技术与产业的边界该如何划定
- iPhone Duo 首发市场热度稳步回归理性,折叠屏行业仍处在品类定义阶段,距离全面普及还有成长空间
- NVIDIA 祝贺 MiniMax M3.1 Flash 428B 正式发布,Vera Rubin 硬件实现 Day 0 原生支持
- 330 万货值 RTX 5090 流入二手市场,商品实拍连序列号都没有遮挡
- dnf红眼武器附魔什么宝珠 红眼武器宝珠选择
- 算力再度升级英伟达将用 576 颗 GPU 打造全球最强单体巨型 GPU
- 国产游戏《异环》优化明音凛时装,将皮袜更换为黑丝,造型更有氛围感
- You.com正式推出企业级按需推理路由器 Inference Router,一站式调度开源大模型推理请求
- MiniMax 联合 Inferact 优化模型生产推理,技术优化成果同步回馈 vLLM 开源社区
- Ideogram 发布首个矢量模型 Vector 1.0,可生成可编辑 SVG
- NVIDIA NeMo 框架实现 MiniMax-M3.1-Flash 模型发布首日微调适配,提供 day-0 全链路训练支持
- 市场普遍预判内存即将迎来价格大跌,行业龙头最新表态扭转市场预期
- 娃哈哈集团迎来管理层人事调整,现任董事长提出离职,新任接任人选暂未敲定
- 现场亲手调教机器鸭,趣味互动引得全场观众开怀大笑
- Techstars 2027 春季加速器申请通道开放,报名截止时间定为 11 月 18 日
- 特斯拉高管做出市场预判,在无监管约束的前提下企业有望占据全球客运市场主导地位
- 前沿晶圆产能存在增长上限,英特尔 CTO 表示产量最高仅能实现翻倍
- 学子家属亲临高校发放助学金,接续完成助学公益约定
