Physical RSI第一站!便利店打工“人”自己进化,物理AI飞轮启动了

首页 AI资讯 AI技术研报 AI监管政策 AI产品测评 AI商业项目 arena全球大模型排行榜 AI产品热榜 AI 源力市场 AI新闻日报

Physical RSI第一站!便利店打工“人”自己进化,物理AI飞轮启动了
AI资讯 2026-10-28 08:40
+5614 阅读

因为货架上的小尺寸挂钩被价格标签牌挡住了一部分,进便利店打工的机器人君第一次尝试挂货……扑了个空。


换作以往,这时候就必须由人工工程师出马,先排查问题,再调整程序、补充数据,让机器人重新练习一遍。


但机器人君有点不一样。它自己琢磨出了新办法。


它回看此前的执行记录,发现头部相机的视角分辨率不足,加上标签牌遮挡,很难看清小挂钩的位置。


于是,Agent调整了策略,让左手先靠近目标,用腕部相机补上一个近距离视角,确认位置后,再由右手完成挂货。


Physical RSI第一站!便利店打工“人”自己进化,物理AI飞轮启动了


更值得一提的是,刚才机器人君不仅自己发现了问题所在、寻得了解法,还把这套有效经验默默积累了下来,以备不时之需。


这套让机器人在工作中发现问题、调整策略、积累经验的机制,背后是智元最新发布的具身Agent框架Genie Master。


这也是智元近期掀起的“AI WAVE”系列技术发布的第四弹——这一次,智元在业界把Physical RSI(具身递归自进化)搬进了真实便利店业务流。


在Genie Master的加持下,智元精灵G2机器人在真实便利店环境执行任务的过程中,已经可以不依赖人工示范与调试,自主分析失败原因、调整策略、沉淀经验,实现“无人在环”的持续自我改进。


这是行业首次跳出仿真环境与实验室设定(toy setting),在真实业务场景中跑通并验证了Physical RSI。


Genie Master这套自主进化的闭环到底是怎么玩起来的?它又能为机器人的批量上岗,带来哪些颠覆性的改变?


Genie Master是什么?


要搞清楚这台机器人为什么能“自己悟道”,首先得看看它背后的Genie Master到底是个啥。


简单来说,Genie Master是一套具身Agent框架,其核心任务是连接上层Agent的推理能力与底层机器人的动作执行能力。


它不仅让Agent能够顺畅地调用机器人的各项能力、理解真实的物理执行反馈,还能根据任务进展持续组织行动和针对性练习。


一旦机器人在实际工作中暴露出了能力短板,这个问题就会直接进入自主改进流程。


Physical RSI第一站!便利店打工“人”自己进化,物理AI飞轮启动了


不难看出,Genie Master想要重点构建机器人部署之后的持续改进机制——这其中既涉及任务执行当下的判断与动态调整,也涵盖了事后的经验沉淀和底层动作策略更新。


智元之所以提出这个框架,是因为它看到了行业长期以来的落地痛点。


行内人都知道,机器人进入真实商业场景后,难免遇到训练阶段没有覆盖的长尾情况。


执行失败、动作不稳定,或者某项任务耗时过长,都可能需要工程师介入排查,再通过调整程序、补充示范数据或训练模型来改善表现。


场景越多,任务越复杂,研发和维护的工作量也会随之增加。


如果每一种新需求都等着人工从头排查和调试,迭代速度就会受限,更难以跨场景大规模铺开落地。


一言以蔽之,具身智能要想真正大规模用起来,就必须从依赖人工示范的“被动微调”,转向机器人自主发现问题、解决问题的“自进化模式”。


Genie Master希望将其中一部分工作交给Agent。


通过把问题诊断、组织练习和结果评估都交由Agent来操盘,Genie Master支持机器人自主习得新能力,从而大幅缩短从“客户提出一项新需求”到“机器人掌握这项新本领”之间的研发周期。


除了开头提到的挂钩补货,在真实便利店的实测中,搭载Genie Master的机器人还展现出了更多应对复杂局面的能力。


据智元介绍,Genie Master团队已将取货、补货、清洁、异常恢复和多机协作纳入统一工作流,探索机器人在真实业务中的持续改进闭环。


闲时自己“加练”,具身Agent框架打通大脑与小脑


让机器人在工作中自我进化,思路并不难。


但在此之前,为什么这件事只停留在实验室的讨论里,几乎没人真正在现实业务中做起来、做出来?


究其原因,无论是上层的经验沉淀,还是底层的策略内化,都必须建立在一个极其硬核的基础之上——


上层推理“大脑”的引导,必须能精准落实为动作;底层执行“小脑”的结果,也必须能实时反馈给大脑。


为了打通这条任督二脉,Genie Master拿出了它的关键设计之一:


具身执行协议EEP(Embodied Execution Protocol)。


Physical RSI第一站!便利店打工“人”自己进化,物理AI飞轮启动了


EEP为Agent与物理世界建立了一套统一接口,主要涵盖了四类核心接口:


  1. 能力接口:让Agent清楚知道机器人当前有哪些能力可以调用;
  2. 引导接口:让Agent能够向底层动作执行端传递具体的空间提示、物体参考和细粒度语言要求;
  3. 反馈接口:让Agent实时了解机器人执行动作后的真实物理情况;
  4. 连续性接口:让系统能够持续追踪机器人集群的任务进度、分工依赖,支持动态调度以及中断后的任务接续。


通过EEP协议,并配合时序对齐(Temporal Alignment)等协同设计,上层Agent可以根据执行结果随时动态调整引导;而底层的基座动作策略(Action Policy)则能结合当前观测和Agent的要求去精准执行动作,并实时返回观测与子任务状态。


在具身智能系统中,只有把推理、执行和反馈真正拧成一股绳,自我进化才不是空中楼阁。


EEP承担的正是这条交互链路中的关键接口作用,为后续的经验积累和策略更新打下了地基。


地基打牢之后,机器人在部署态下的“自卷”日常就开始了。


在便利店的正常工作流中,当机器人发现某些任务反复失败、执行不稳或者耗时过长,也就是暴露出了“能力缺口”时,Agent并不会坐视不管。


它会主动利用便利店的空闲时间,组织机器人针对这些薄弱环节进行“自主加练”。


练什么、怎么练、练完之后结果合不合格、遇到异常怎么恢复并重试,全由Agent一手张罗。真实的部署环境,就这样源源不断地为机器人提供着“接下来该练什么、该改什么”的实战依据。


一条路线积累经验,一条路线更新动作策略


既然已经在真实场景里把“发现问题”和“自主加练”张罗起来了,那么机器人又是如何把练出来的成果,真正长成自己身上的本事呢?


在这里,Genie Master采取了“双管齐下”的策略。


一条路线叫Harness RSI,负责积累经验;另一条路线叫Policy RSI,负责更新动作策略。


先来看Harness RSI。


它的核心逻辑是在保持模型权重和已有工具接口不变的前提下,主要通过优化提示词(Prompt)、记忆(Memory)和执行规则来改善后续的任务表现。


在日常推理执行的过程中,机器人会把成功和失败的例子“随做随记”;随后再通过每日的异步反思与记忆整合,把这些执行记录转化为更有效的引导、完成判定、异常恢复和协作规则,像写“错题本”一样纳入长期记忆中,并在后续按任务和场景需要逐步加载。


Physical RSI第一站!便利店打工“人”自己进化,物理AI飞轮启动了


回看文章开头那个“便利店挂货”的案例,其实就是Harness RSI在发力。


最开始,那个小挂钩任务的成功率很低。但Agent在回溯了失败记录后诊断出了病根,即“头部相机视角分辨率不足,加上标签牌遮挡,导致机器人无法准确识别小尺寸挂钩的位置”。


于是,Agent把“先用左手腕部相机凑近补视角、确认后再用右手挂货”的新解法写进了可执行的经验里,后续再遇到类似情况,就能直接调取经验、从容应对。


“错题本”外,为了满足真机部署对低延迟、高稳定性的严苛要求,有些能力必须变成机器人的“肌肉记忆”。


这就轮到Policy RSI登场了。


Policy RSI会将机器人在自主执行、人工接管示范以及异常恢复过程中产生的数据,统统收集整理起来,通过筛选、加权和目标重标等方式提高数据质量,再使用监督学习、模仿学习或强化学习去直接更新底层的动作策略模型(Action Policy),让改进真正保留在模型参数里。


假设机器人在店里做“外卖打包防缠绕”这一任务,处理提带缠绕、执行回撤和异常恢复时产生的数据,经过筛选和处理后,可以用于后续动作策略训练,帮助模型改善类似任务的执行表现。


Physical RSI第一站!便利店打工“人”自己进化,物理AI飞轮启动了


通过Policy RSI,机器人得以从一次次真实的执行经历中吸收养分,获得更稳定的执行力与更准确的指令跟随能力。


需要说明的是,不是说从此完全不需要人工参与了,Policy RSI仍会使用人工接管示范等数据,动作策略的更新也需要经过数据处理和模型训练。


更妙的是,这两条路线并不是各自为战,而是相互咬合、形成了一个越转越快的飞轮——


Harness RSI负责积累和组织经验,帮助系统分析失败原因、选择练习方式,并改善后续执行;


Policy RSI则将经过处理的执行数据用于动作策略训练,让有效经验有机会沉淀为更稳定的动作能力。


两条路线相互促进,形成从真实业务执行、发现能力缺口、自主练习,到经验沉淀和策略更新的闭环。智元希望借此让每一轮积累的经验,都能帮助系统更有效地诊断问题、选择练习和利用数据。


让提升能力的能力也持续进化,在相同投入下获得更大的能力增量,这正是“递归自进化(RSI)”的真正威力所在。


从“出厂即定型”到“越干越能干”


跳出便利店,站在整个具身智能产业的视角来看,智元Genie Master所探索的方向,正在推开一扇新的大门。


首先,在研发效率上,它彻底打破了以往机器人能力“出厂即定型”的枷锁,将其转向了“部署中持续生长”的新范式。


当AI的新解法能够自己在现场长成机器人的新本领,从客户提出新需求到机器人掌握新技能的交付周期将被大幅压缩。


其次,在商业化落地上,这也算清楚了一笔经济账。


当机器人在真实作业中“越干越能干”,同一套能力便会在部署中不断增厚。


未来向更多门店、更多跨行业场景复制时,后续部署与研发的边际成本将持续下探。


而这条不断降低的成本曲线,正是具身智能走向大规模商业化落地的核心前提。


Physical RSI第一站!便利店打工“人”自己进化,物理AI飞轮启动了


回看智元自10月22日起启动的“AI WAVE”系列发布,作为其中的第四项内容,Genie Master在智元全栈具身AI的整体布局中起着关键的承上启下作用——它将底层基座模型与全栈AI能力延伸并扎根到了真实的商业部署态中。


当然,技术架构讲得再精彩,最终还是要靠实战表现来说话。


俗话说得好,是骡子是马,拉出来遛遛。


11月2日,智元计划开启一场全网围观的“24小时便利店直播”。


届时,将有6台精灵G2机器人连续上岗,在没有剧本的真实便利店营业中,接受严苛的转正考核。


Physical RSI第一站!便利店打工“人”自己进化,物理AI飞轮启动了


文章来自于"量子位",作者 "衡宇"。

1
AI工作流

【开源免费】字节工作流产品扣子两大核心业务:Coze Studio(扣子开发平台)和 Coze Loop(扣子罗盘)全面开源,而且采用的是 Apache 2.0 许可证,支持商用!

项目地址:https://github.com/coze-dev/coze-studio


【开源免费】n8n是一个可以自定义工作流的AI项目,它提供了200个工作节点来帮助用户实现工作流的编排。

项目地址:https://github.com/n8n-io/n8n

在线使用:https://n8n.io/(付费)


【开源免费】DB-GPT是一个AI原生数据应用开发框架,它提供开发多模型管理(SMMF)、Text2SQL效果优化、RAG框架以及优化、Multi-Agents框架协作、AWEL(智能体工作流编排)等多种技术能力,让围绕数据库构建大模型应用更简单、更方便。

项目地址:https://github.com/eosphoros-ai/DB-GPT?tab=readme-ov-file



【开源免费】VectorVein是一个不需要任何编程基础,任何人都能用的AI工作流编辑工具。你可以将复杂的工作分解成多个步骤,并通过VectorVein固定并让AI依次完成。VectorVein是字节coze的平替产品。

项目地址:https://github.com/AndersonBY/vector-vein?tab=readme-ov-file

在线使用:https://vectorvein.ai/(付费)

2
智能体

【开源免费】AutoGPT是一个允许用户创建和运行智能体的(AI Agents)项目。用户创建的智能体能够自动执行各种任务,从而让AI有步骤的去解决实际问题。

项目地址:https://github.com/Significant-Gravitas/AutoGPT


【开源免费】MetaGPT是一个“软件开发公司”的智能体项目,只需要输入一句话的老板需求,MetaGPT即可输出用户故事 / 竞品分析 / 需求 / 数据结构 / APIs / 文件等软件开发的相关内容。MetaGPT内置了各种AI角色,包括产品经理 / 架构师 / 项目经理 / 工程师,MetaGPT提供了一个精心调配的软件公司研发全过程的SOP。

项目地址:https://github.com/geekan/MetaGPT/blob/main/docs/README_CN.md

3
微调

【开源免费】XTuner 是一个高效、灵活、全能的轻量化大模型微调工具库。它帮助开发者提供一个简单易用的平台,可以对大语言模型(LLM)和多模态图文模型(VLM)进行预训练和轻量级微调。XTuner 支持多种微调算法,如 QLoRA、LoRA 和全量参数微调。

项目地址:https://github.com/InternLM/xtuner

4
prompt

【开源免费】LangGPT 是一个通过结构化和模板化的方法,编写高质量的AI提示词的开源项目。它可以让任何非专业的用户轻松创建高水平的提示词,进而高质量的帮助用户通过AI解决问题。

项目地址:https://github.com/langgptai/LangGPT/blob/main/README_zh.md

在线使用:https://kimi.moonshot.cn/kimiplus/conpg00t7lagbbsfqkq0

5
无人直播

【开源免费】VideoChat是一个开源数字人实时对话,该项目支持支持语音输入和实时对话,数字人形象可自定义等功能,首次对话延迟低至3s。

项目地址:https://github.com/Henry-23/VideoChat

在线体验:https://www.modelscope.cn/studios/AI-ModelScope/video_chat


【开源免费】Streamer-Sales 销冠是一个AI直播卖货大模型。该模型具备AI生成直播文案,生成数字人形象进行直播,并通过RAG技术对现有数据进行寻找后实时回答用户问题等AI直播卖货的所有功能。

项目地址:https://github.com/PeterH0323/Streamer-Sales

添加客服微信AITNT178,进AITNT官方交流群