跳到主要内容

具身智能数据管理平台

Embodiflow 是面向具身智能研发的企业级数据管理平台,覆盖数据采集、上传、标注、质检、导出、模型训练与推理部署的完整链路,用于把多机器人、多传感器采集的异构数据治理为可直接训练的标准数据集。

要解决的问题​

具身智能团队的研发瓶颈多数出现在数据环节,而非模型环节。三类问题最常见:

  1. 数据链路断裂:采集、标注、审核、格式转换由不同工具承担,数据在系统之间反复搬运,质量口径无法统一,出现问题时无法回溯到具体环节。
  2. 格式与机型碎片化:不同厂商的机器人、不同的采集方式各自产出私有格式,每次接入新机型都要重写一次数据处理代码。
  3. 多人协作缺过程管理:标注与审核由多人并行完成,缺少任务状态、进度与质量的可观测口径,交付质量依赖个人经验。

Embodiflow 把上述环节收敛到一个平台内,以 ROS 数据模型为基准统一格式,以角色与模块权限约束操作范围,以任务状态机承载标注与审核过程。

适用场景​

用户类型典型角色核心需求平台对应能力
机器人本体企业算法工程师、嵌入式工程师设备接入、操作数据采集、模型训练与真机部署设备管理、采集任务、模型训练、模型推理
数据服务企业标注项目经理、标注员、审核员标注任务管理、多角色协作、质量控制与交付标注任务、字典管理、数据质检、数据导出
高校与研究机构研究生、科研人员数据集构建、多模型训练、实验复现数据上传、格式转换、LeRobot 可视化、模型训练
制造与集成商IT 工程师、运维工程师私有化部署、数据不出网、权限与审计私有化部署、模块权限、访问审计、运维监控

核心能力​

能力说明
数据标准化以 ROS 为基准,把智元、松灵、睿尔曼等采集系统的数据转换为 MCAP 标准格式后统一管理
机型适配内置 23 款机器人机型的可视化模型,覆盖双臂、人形、协作臂与移动平台
数据质检按帧率、Topic 连续性、时间同步、丢帧等规则自动检测,输出可视化诊断报告
标注与审核自然语言语义标注与相机视角物品标注,配套任务状态机、人工二次审核与打回返工
格式导出支持导出为 LeRobot、HDF5、RLDS、MCAP、JSON、CSV 等 12 种目标格式
模型训练内置 11 个策略模型,支持 PyTorch 与 JAX 两类框架、单机与多卡训练
模型推理训练完成的检查点可部署为推理服务,支持模拟推理、MCAP 数据测试与边缘离线部署
权限与审计6 类角色叠加 50 个模块权限键,支持 IP 白名单与操作审计
私有化部署数据落在客户自有对象存储或本地存储,平台可完全离线运行,不回传数据

功能概览​

侧栏按四个分组组织功能,本文档收录 25 个入口。

分组入口主要功能
概览概览数据量、标注量、质量分布、项目进度与近期活动
数据数据数据集检索、筛选、预览、批量操作
数据上传本地上传、视频与音频转 MCAP、LeRobot 数据集导入
数据采集采集任务创建、分配、进度跟踪
数据标注标注任务、任务状态流转、批量标注、问题标注
数据质检ROS 录制质检规则、执行与报告
数据字典技能、对象、目标、状语、标注标签、数据标签的统一口径维护
数据图表动作规划、动作关系、时长分布、依赖关系、标注日历
数据技能机器人技能库与版本管理
数据导出12 种目标格式导出、导出历史与额度管理
数据LeRobotLeRobot 数据集的浏览器内预览与回放
模型训练训练任务创建、参数配置、指标监控、检查点管理
模型推理推理服务部署、模拟测试、MCAP 测试、离线边缘部署
模型动作动作重定向与运动数据管理
管理项目项目创建、可见范围、成员与生命周期
管理用户账号管理、角色分配、模块权限、CSV 批量导入
管理机器人机型登记、参数与维护记录
管理设备设备注册、Agent 安装、资源监控、视频流接入、远程接管
管理云存储8 种对象存储的接入与凭据管理
管理流程匹配规则、动作规则与工作流编排
管理插件插件安装、启用、停用与开发
管理回收站各模块逻辑删除数据的统一查看与恢复
管理额度导出、训练、推理资源的配额与用量
管理系统系统参数、任务队列、主题与布局、许可证
管理运维系统日志、任务队列、WebRTC 状态、权限审计

首页概览(管理员视角)

使用前提​

项要求
浏览器最新版 Chrome 或 Edge。视频与音频转 MCAP 依赖 MediaStreamTrackProcessor,仅这两个浏览器支持
账号由管理员创建并分配角色。平台不开放自助注册
权限角色决定可见菜单,模块权限决定具体操作能力。未配置的模块为禁止
网络使用云端实例时需可访问平台地址;私有化部署时按现场网络策略开通端口
对象存储上传与导出需要至少一个可用的云存储连接,由管理员配置

平台架构​

平台由 Web 应用与后台服务组成,职责边界如下。

层级组成职责
客户端浏览器、机器人端 AgentWeb 端完成管理、标注与预览;Agent 完成本地打包、压缩与质量检查后批量入库
应用层Web 应用、RESTful API账号与权限、数据与任务编排、页面交互;全部服务端能力通过 RESTful API 暴露
任务层任务队列与后台 Worker数据导入解析、视频转码、格式转换、质检、导出等长时任务异步执行并回报进度
计算层训练服务、推理服务训练任务的调度、执行与检查点管理;推理服务的部署与调用
存储层数据库、对象存储或本地存储元数据入库;原始数据与产物存放于客户自有对象存储或本地磁盘
实时层WebRTC 网关设备视频流接入与远程接管

平台以存储与程序分离的方式部署:数据可落在客户自有对象存储中,访问权限由客户侧掌控。

角色​

角色职责范围默认可见菜单
管理员项目、账号与权限、云存储、系统配置、审计全部
项目经理建项目、选数建任务、指派与跟进、导出数据、模型、管理(除云存储、回收站、额度、系统、运维)
采集员领取并执行采集任务、上传数据、查看设备概览、数据、上传、采集、质检、设备
审核员审核标注结果、判定合格或打回概览、采集、标注、字典、图表
标注员执行标注、提交审核概览、采集、标注、字典、图表
访客只读访问概览

角色决定菜单可见范围,模块权限在此基础上按功能粒度收窄。两者的关系与配置方式见 权限说明 与 模块权限。

平台支持对机器人设备进行集中监控与远程接管:

部署形态​

平台支持两种部署形态,操作方式完全一致,差异在数据存放位置与升级方式。

部署形态数据位置升级方式
云端实例平台提供的独立云环境平台侧统一升级
私有化部署客户私有云或本地机房,可对接客户自有对象存储由交付工程师协助升级

私有化部署分为工作站版本与集群版本。两个版本功能一致,差异在算力与容量:工作站版本为单台塔式服务器,集群版本基于 Kubernetes,任一节点整机故障时业务与数据不中断。选型按常态同时采集的机器人数量确定,不按使用人数。硬件与环境条件见随合同交付的《部署需求清单》。

阅读路径​

按岗位的阅读顺序​

按岗位顺序阅读,可减少跨页跳转。

岗位阅读顺序
管理员权限说明 → 模块权限 → 项目与用户 → 云存储 → 运维监控 → 备份与升级
项目经理数据管理 → 新建标注任务 → 标注任务 → 数据导出 → 分析图表
标注员快速上手 → 标注任务状态 → 标注员操作指南 → 字典管理
审核员审核员操作指南 → 权限说明 → 数据质检
采集员采集员操作指南 → 设备管理 → 数据上传
算法工程师数据格式 → 数据导出 → 模型训练 → 模型推理 → LeRobot 数据集与训练

各角色入口​

各角色的入口页:

岗位入口
全部角色快速上手
管理员权限说明、模块权限
项目经理新建标注任务、数据管理
标注员标注员操作指南
审核员审核员操作指南
采集员采集员操作指南
算法工程师数据格式、模型训练

下一步​

了解平台整体结构与使用前提后,从快速上手开始第一个操作流程。

页面用途
快速上手登录、界面构成与最小闭环操作