Flora 机器人数据引擎正式发布,全套模型权重对外开源
全新的 Flora 机器人数据引擎正式对外发布,整套配套模型权重在开源平台开放下载,能够帮助研发人员一键打通机器人视频数据自动标注全流程,大幅降低机器人训练数据集的制作成本,解决机器人研发中长期存在的数据标注效率不足的痛点。这款数据引擎由三款视觉语言模型组合而成,完整覆盖图像文本描述、动作时序分割、奖励文本生成三大环节,全部预训练权重同步开源到 Hugging Face 平台,开发者可以直接下载权重完成本地部署,不用从零开始训练模型。整个方案之所以能够显著提升机器人数据生产效率,首先是它把人工标注的多道工序合并成自动化流水线,从原始视频输入到结构化标签输出全程无人干预;其次是三款模型深度适配机器人实操场景,专门针对机械臂抓取、物体搬运等动作做优化,输出的标签可以直接用于强化学习训练;最后是全套权重开放开源,科研团队与中小企业不用投入高额算力完成预训练,直接调用现成模型搭建自有数据引擎。落地部署可以按照模型调用、流水线串联、数据集输出三个步骤执行,先分别加载三款开源权重完成单模型推理,再把图像帧、视频片段依次接入模型形成串联链路,最终批量输出带文本标签的机器人训练数据,实现低成本规模化产出高质量机器人数据集。
一、Flora 机器人数据引擎整体架构
1.1 三大核心模型清单(全部开源权重)
1)Flora-Captioner:静态图像描述模型,输入机器人拍摄的画面,自动生成场景物体、位置关系、动作内容的文字说明,输出图像文本标签;
2)Flora-TempSeg:视频时序分割模型,自动识别视频里机器人动作的起止时间,把长视频切分成单动作片段,完成动作时序切分;
3)Flora-Rewarder:动作评价模型,读取动作视频片段,输出精细化文本奖励描述,给强化学习提供高质量反馈信号。
1.2 整套数据引擎流水线结构
表格
| 流程环节 | 调用模型 | 输入数据 | 输出内容 |
|---|---|---|---|
| 帧文本标注 | Flora-Captioner | 机器人单帧图像 | 场景文字描述标签 |
| 动作片段切分 | Flora-TempSeg | 连续视频流 | 带起止时间的动作短视频 |
| 动作奖励标注 | Flora-Rewarder | 单段动作视频 | 精细化动作评价文本 |
整条链路不需要人工打标,原始视频文件输入后,自动输出带文本标注的结构化数据集,直接对接机器人策略训练任务。
二、开源权重详情与获取渠道
2.1 权重版本配置
1)基础版本:FP16 精度原始预训练权重,适配 GPU 环境高精度推理;
2)轻量化版本:FP8 量化权重,降低显存占用,支持中端显卡本地运行;
3)配套资源:同步开放模型配置文件、推理代码、测试视频样例,开箱即可运行。
2.2 权重获取方式
所有模型权重统一托管在 Hugging Face 开源仓库,开发者可以使用 Git 命令拉取完整权重文件,也可以在线下载单模型权重包,配套推理脚本附带完整调用示例,无需额外修改代码就能完成本地推理测试。
三、一键搭建自动化数据引擎的操作步骤
步骤 1:环境部署,安装 PyTorch、OpenCV 等依赖库,配置 CUDA 运行环境;
步骤 2:下载开源权重,把三款模型的权重文件放到对应目录,加载模型配置参数;
步骤 3:搭建串联流水线,依次调用 Captioner、TempSeg、Rewarder 模型,接入机器人原始视频数据;
步骤 4:批量执行推理,自动生成图像标签、动作分段、奖励文本,导出 JSON 格式结构化数据集;
步骤 5:对接训练环节,把生成的标注数据集直接导入机器人强化学习框架,完成策略迭代训练。
四、技术优势与落地场景
4.1 核心技术优势
1)全链路自动化,省去人工标注人力,数据集生产效率提升数十倍;
2)模型面向机器人实操场景优化,动作识别精度更高,标签贴合机械控制任务;
3)权重完全开源,无版权限制,个人科研项目与商业产品均可免费使用;
4)支持本地离线部署,不需要调用云端 API,保障机器人场景下数据隐私安全。
4.2 主流落地场景
1)机械臂抓取、物体搬运等室内机器人强化学习数据集制作;
2)机器人仿真环境视频数据自动打标;
3)多模态机器人视觉语言策略的数据预处理;
4)小型机器人研发团队低成本搭建自有数据生产管线。
五、性能优化部署方案
1)批量推理:开启多线程批量处理,一次性读取多路视频,充分利用 GPU 算力;
2)量化压缩:选用 FP8 量化权重,在精度损失极小的前提下,把显存占用降低一半;
3)文件缓存:把处理完成的标签数据自动写入本地数据库,避免重复推理浪费算力;
4)模型并行:把三款模型部署到多张显卡,实现流水线并行处理,进一步提升视频处理速度。
【相关 FAQ】
问题 1:Flora 机器人数据引擎开源权重包含哪些模型,从哪里可以下载?
回答 1:Flora 机器人数据引擎开源权重包含 Flora-Captioner、Flora-TempSeg、Flora-Rewarder 三款核心模型,全套预训练权重托管在 Hugging Face 开源平台,支持 FP16 原版权重与 FP8 量化轻量化权重两种版本,开发者可以在线下载或者使用 Git 工具拉取完整权重文件,同时附带可直接运行的推理代码。
问题 2:搭建 Flora 机器人数据引擎,如何把三款开源模型串联成完整自动化标注流水线?
回答 2:搭建 Flora 机器人数据引擎自动化流水线时,先使用 Flora-TempSeg 把长视频切分成独立动作片段,再用 Flora-Captioner 给每一帧图像生成文本描述,最后通过 Flora-Rewarder 生成动作奖励文本;把三段推理代码按顺序串联,批量读取视频文件,就能自动输出完整结构化标注数据集,全程无需人工介入。
问题 3:Flora 机器人数据引擎开源权重能不能用于商业机器人项目,有没有使用限制?
回答 3:Flora 机器人数据引擎配套的开源权重采用宽松开源协议,科研项目与商业机器人项目都可以免费部署使用,没有额外版权约束;仅需要遵守开源仓库附带的基础使用规范,不可以把模型权重单独二次打包售卖,完全可以满足中小型机器人企业搭建自有数据标注管线的需求。
【数据来源】
[2026-10-20](NVIDIA 开源 Flora 自动化机器人数据标注模型)RoboHorizon 科技资讯
[2026-10-20](Flora 机器人数据引擎模型套件正式开源)Hugging Face 官方公告
[2026-10-20](Flora 三款视觉语言模型权重发布说明)机器之心技术快讯
[2026-10-19](机器人自动化数据引擎 Flora 技术白皮书)开源技术社区
[2026-10-18](Flora 模型视频自动标注能力实测报告)AI 机器人技术专栏
免责声明:本文仅针对 Flora 机器人数据引擎的技术能力、开源资源与部署方案进行客观技术介绍;所有开源权重的使用请严格遵循对应开源协议条款;模型部署、数据集生产与机器人训练环节,请结合自身硬件条件开展调试;本内容不构成任何商业项目落地承诺。
- 实时字幕只出字还不够,它还得知道谁在说
- Kairos Health AI 推出 AI 电话代理,面向牙科诊所实现全流程接诊自动化
- a16z 研判AI 模型能力快速提升,即将超越人类工程师完成硬件设计
- 并非所有任务都要启用 AgentDify 中 Agent 与 Workflow,如何把控 AI 自主权限
- 前英特尔高管提出AI 完成硬件设计仅需三个月,从设计到量产投产还要九个月
- PyTorchCon Demo Theater 开启 14 场赞助商分享,全面覆盖模型训练、推理优化、编译器与工程部署全链路
- Dream-1 顺利完成机器人立瓶子任务,成为业内首个实现该任务的基础模型
- Google Research 公开登月项目筛选框架,深度探讨 AI 技术加速科学发现的实现路径
- FinichatAI 在 Slack 上线 AI 同事 Scout,专为客户支持团队打造
- Kyutai Labs 推出超轻量 Pocket TTS 模型,最小版本仅 1.9M 参数
- Perplexity Computer 实现 Mac 端全本地离线运行,端侧智能体无需云端算力支撑
- Arda 顺利完成 1.6 亿美元 A 轮融资,投后整体估值达到 15 亿美元
- NVIDIA 官宣 Jensen 将登台亮相柏林 GTC 大会并带来主题演讲
- Arda 完成 1.6 亿美元 A 轮融资,投后估值达到 15 亿美元
- a16z 研究结论AI 可成为能力超强的硬件设计师,比特转原子的接口存在天然损耗
- Perplexity Mac 客户端上线本地优先模式 Computer 智能体支持离线全流程运行
- Meta 与 Google 接连推出前沿大模型,行业评测基准的定义权迎来多方讨论
- Google Cloud Tech 开启直播,现场演示 Antigravity CLI 交互式代码审查功能
- Flora 机器人数据引擎正式发布,全套模型权重对外开源
- Axonius Asset Cloud 完成能力升级,新增 Shadow AI 发现与 AI 平台清单功能
- PyTorch Foundation 亮相 Community Expo 展位,面向全体开发者交流开源 AI 全技术栈
- MiniMax M3.1 Flash 拿下榜单第一,搜索能力与运行效率双双登顶
- Antigen 正式发布 Antigen Assets,为安全 Agent 搭建实时 CVE 分诊能力
- Antropi Robotics 结束隐身运营,落地金属零件全自主智能工厂
- IDC 调研显示仅 3.1% 企业达到 AI 成熟度最高等级,新版评估模型将于明日正式发布
- GPT-6 Luna 成本进一步降低,综合表现优于 GPT-5.6 Sol
- 基于 LangChain 搭建企业级 Agent Harness 的落地实践经验
- SherpaLabsAI 上线知识工作强化学习环境,首批落地三大业务领域
- Gemini 4 Argon 可自主搭建 3D 元素周期表,三维可视化能力迎来突破
- 话题冲上热搜,社交软件逐步承担办公功能,网友感慨休息时段也要随时响应工作消息
- 韩股估值持续走低,价格越来越便宜,资金买入意愿依旧偏弱
- 米家金属登机箱 1699 元开启众筹,采用无铆钉铝镁合金工艺
-
现阶段单纯能够实时出字的字幕系统已经无法满足会议直播、线上访谈、视频录制等场景的使用需求,一套成熟的实...浏览全文>>
-
Kairos Health AI 正式发布专为口腔行业打造的 AI 电话代理产品,这套系统可以全天承接牙科诊所所有来电...浏览全文>>
-
a16z 最新行业研究结论明确,当前大模型已经进入硬件设计能力的快速上升期,在纯数字化电路设计环节,AI 模...浏览全文>>
-
在 Dify 平台搭建 AI 应用时,不能盲目给所有任务开启 Agent 自主模式,需要根据业务场景控制 AI 的自...浏览全文>>
-
行业资深高管在公开访谈中给出明确结论,AI 工具大幅压缩芯片前端研发周期,现在团队只需要三个月就能完成一...浏览全文>>
-
PyTorchCon 大会 Demo Theater 板块一共安排 14 场赞助商主题演讲,整场内容完整覆盖 PyTorch 生态从...浏览全文>>
-
Dream-1 模型顺利完成机器人自主立瓶子实操任务,经过多轮真机与仿真测试验证,它是行业内首个零样本完成立瓶...浏览全文>>
-
Google Research 正式对外公开了内部登月计划标准化筛选框架,同时围绕 AI 如何大幅提速前沿科学发现展开...浏览全文>>
-
FinichatAI 正式在 Slack 应用市场推出 AI 同事 Scout,这款智能助手深度嵌入团队沟通频道,能够自动承...浏览全文>>
-
Kyutai Labs 完成 Pocket TTS 系列模型轻量化迭代,正式推出多档小尺寸版本,其中精简蒸馏版本参数低至 ...浏览全文>>
- 并非所有任务都要启用 AgentDify 中 Agent 与 Workflow,如何把控 AI 自主权限
- PyTorchCon Demo Theater 开启 14 场赞助商分享,全面覆盖模型训练、推理优化、编译器与工程部署全链路
- NVIDIA 官宣 Jensen 将登台亮相柏林 GTC 大会并带来主题演讲
- Arda 完成 1.6 亿美元 A 轮融资,投后估值达到 15 亿美元
- 话题冲上热搜,社交软件逐步承担办公功能,网友感慨休息时段也要随时响应工作消息
- 搭建转录、纪要整理、AI 配音一体化自动流水线
- CubePlex 与 Dify 两大平台对比,企业搭建智能 Agent 又多了优质选型方案
- 企业级 AI 研发闭环体系搭建方法与项目实战落地经验分享
- 腾讯云国际团队内部协同实践,搭建全球化统一 AI 大脑体系
- 海外销量走高不等于全球化落地,中国企业出海还需要补齐这些核心能力
- Kairos Health AI 推出 AI 电话代理,面向牙科诊所实现全流程接诊自动化
- MiniMax M3.1 Flash 拿下榜单第一,搜索能力与运行效率双双登顶
- GPT-6 Luna 成本进一步降低,综合表现优于 GPT-5.6 Sol
- SherpaLabsAI 上线知识工作强化学习环境,首批落地三大业务领域
- Gemini 4 Argon 可自主搭建 3D 元素周期表,三维可视化能力迎来突破
- 眼镜单品溢价高达 66 倍,门店账面高毛利之下净利率稳定在 8.5%
- 脑洞大开华为把路由器做成书本造型,X2 Pro 定价 588 元开售
- 基于 Milvus 搭建企业级 RAG 实现千人千权检索深度教程
- iPhone Duo 开售 1 分钟全面售罄,订单发货排至次年,热销局面深度解析
- Dify 官方解读重构 Agent 架构的底层设计考量
- 实时字幕只出字还不够,它还得知道谁在说
- Google Research 公开登月项目筛选框架,深度探讨 AI 技术加速科学发现的实现路径
- Kyutai Labs 推出超轻量 Pocket TTS 模型,最小版本仅 1.9M 参数
- Perplexity Mac 客户端上线本地优先模式 Computer 智能体支持离线全流程运行
- Meta 与 Google 接连推出前沿大模型,行业评测基准的定义权迎来多方讨论
- Axonius Asset Cloud 完成能力升级,新增 Shadow AI 发现与 AI 平台清单功能
- Antigen 正式发布 Antigen Assets,为安全 Agent 搭建实时 CVE 分诊能力
- Antropi Robotics 结束隐身运营,落地金属零件全自主智能工厂
- IDC 调研显示仅 3.1% 企业达到 AI 成熟度最高等级,新版评估模型将于明日正式发布
- 基于 LangChain 搭建企业级 Agent Harness 的落地实践经验
- 韩股估值持续走低,价格越来越便宜,资金买入意愿依旧偏弱
- 看见创作灵感、收到用户回音,Dify Marketplace 打通创作者彼此连接的通道
- Harness 工程落地实践快手电商依托 AI 流水线完成全新研发范式升级
- IBM 最新 CHRO 调研AI 推动批判性思维成为人才招聘与培养的核心优先项
- 人形机器人配备双腿,现阶段大多只能固定位置完成作业
- 穿戴录音赛道竞争升级,不再只比拼转写能力,OPPO 心力球深度实测体验
- Anthropic 暂未推出个人 Personal AI 产品的深层原因
- Arda Industries 正式结束隐身模式,完成 1.6 亿美元 A 轮融资
- GoogleDeepMind Gemini 4 Argon 制作可同步歌曲的 3D 元素周期表
- IDC 研究显示 AI 智能体可代表组织自主履职,岗位工作与资金投入迎来全新重构
