YULING / RESEARCH NOTESTECHNICAL REPORT 001 · 2026

SERA / SELF-DEPLOYING EMBODIED ROBOTIC AGENTS

让机器人学会自主部署。

从主动观测、部署位置搜索,到策略执行与任务验收:让已有机器人策略在变化的环境中更可靠地工作。

机器人策略有效,不等于能直接部署。

现有 VLA 策略往往在理想视角和适合的操作位姿下表现较好,但真实部署时,初始位置、遮挡、距离与任务状态会偏离训练条件。SERA 把这类“部署不匹配”作为独立问题,研究如何由智能体主动找到让现有策略能够工作的条件。

SERA 不以重新训练 VLA 作为前提。它研究的是策略调用之前的部署决策,以及执行之后的独立验收。

SERA:在策略执行前建立部署闭环。

SERA 将机器人初始部署条件视为需要主动推理的变量。智能体通过观察环境、评估候选位置与执行就绪度,让冻结的 VLA 在更合适的位置完成任务;失败后再观察、再部署。

OBSERVE→REASON→REPOSITION→VLA→VERIFY↺
01 / OBSERVE

感知当前状态

识别环境变化、遮挡与关键任务信息缺口,决定是否需要新的视角或观测。

02 / REASON

判断执行条件

围绕可见性、可达性、交互距离和执行就绪度,评估当前部署位置能否支持后续动作。

03 / REPOSITION

主动调整位置

搜索和选择更合适的观测与操作位姿,将机器人调整到现有策略更可能成功的位置。

04 / ACT

调用冻结的 VLA

在部署条件满足要求后,调用冻结的 VLA 策略执行操作;核心研究不依赖重新训练这一策略。

05 / VERIFY & RETRY

独立验收与再部署

由独立验证器判断任务是否完成;若失败,则带着新的观测与反馈重新进入自部署流程。

部署层的智能,与策略参数优化互补。

SERA 的目标不是证明训练不重要,而是探索如何降低机器人对初始视角、位置和人工调试的依赖。

Fixed Deployment
固定位置执行

直接在初始位置调用策略,环境与策略条件不匹配时缺少主动修正机制。

Policy Retraining
策略重训练

通过追加数据和训练改变策略能力,但不一定解决每次任务的现场部署条件搜索。

SERA
自部署智能体

先搜索可行的观察与交互条件,再调用现有策略,最后独立验证并决定是否重试。

研究评估与适用边界。

研究设计在 RoboCasa 仿真环境中,围绕多类室内操作任务,逐步增大机器人初始位姿偏移,对比固定位置直接执行和主动搜索部署条件两种设置。

R
RoboCasa / SIMULATION

阶段性研究记录涉及 24 类室内任务,并报告过在较大初始位姿偏移条件下,相对固定部署基线最高提高约 39 个百分点。此处仅作为研究阶段信息,正式指标、基线与统计方法请以最终审核论文为准。

SERA 当前聚焦“部署层自适应”,不等同于在线更新 VLA 权重,也不代表机器人已经具备任意环境中的完全自主部署能力。世界模型与 SERA 的进一步集成,以及更长期的 Agent 自我改进,是持续研究的方向。

NEXT / RESEARCH DIRECTION

从自主部署,走向智能体自我改进。

将世界状态建模、SERA 的观察与行动闭环,以及数据、验证和策略更新衔接起来,是面向 Agent RSI 的下一步探索,而不是现阶段已完成的统一系统。

加入研究团队