Simate创始人张颖,此前在行业某一线自动驾驶公司,如今,他将这些技术与工程经验带入物理智能领域,探索以Physical RSI推动机器人智能的持续迭代。自动驾驶与物理智能有着相似的技术需求:智能系统都需要感知真实环境、作出决策,并根据外界变化持续调整行动。但机器人面对的任务更加多样。以抓取为例,物体的形状、材质、摆放位置发生变化,都可能影响机器人的执行效果,对物理世界理解、精细运动控制等能力提出了新的要求。要将Physical RSI进一步推进至真实机器人能力的持续迭代,Simate还需要补充世界模型、机器人控制等领域的技术能力。为此,Simate集结了来自学术界和产业界的研究人员。其中,占方能是香港科技大学助理教授、World Mind Lab负责人,研究涉及世界模型、三维感知及物理AI,曾在SIGGRAPH、CVPR、ICCV、TPAMI等学术会议和期刊发表超过50篇论文。团队另一位核心成员是00后青年科学家季马泽宇,毕业于加州大学圣地亚哥分校,研究方向覆盖三维感知、灵巧操作及人形机器人全身控制,曾参与通用人形控制器的真机验证工作。季马泽宇还曾任硅谷物理AI公司Assured Robot Intelligence(ARI)创始成员,该公司后被Meta收购。总的来看,这个团队就形成从基础模型认知、工程化到物理真机落地的完整闭环,支撑Simate的Physical RSI技术路线。 02.让AI研究机器人,成立数月拿下RoboDojo评测榜一
最近,Simate披露,其通过AutoResearch自动研究系统,以人机共驾的弱RSI范式开展物理智能模型研发,旗下通用物理快系统模型在RoboDojo评测榜单取得第一名。RoboDojo是一个面向通用机器人操作能力的评测基准,涵盖泛化、记忆、精细操作、长程任务执行及开放任务等不同维度,能够从多个角度观察模型的综合操作能力。Simate通过真机演示,展示了模型利用历史信息连续执行、保留历史观测,执行“泡茶”这一连续多步骤任务的能力。在长程任务中,机器人需要记住已经完成的步骤、当前任务进展,并根据环境变化决定下一步动作。如果只依靠当前画面,模型可能无法获得完成后续操作所需的全部信息;如果持续累积历史观测,又会增加实时计算负担。为此,Simate在通用物理快系统中引入了4D物理感知与记忆机制。模型通过处理深度、几何、运动及接触关系等信息理解物理环境,同时围绕任务进展、连续状态追踪和即时变化反馈组织历史信息,探索长程任务一致性与实时反应之间的平衡。为了让更大规模的模型服务于端侧实时操作,该公司还探索了高效视觉编码、时空建模和特征压缩等技术。按照规划,这套物理快系统未来还将与通用推理慢系统协同,向零样本、少样本的通用操作推进。具体模型规模及架构仍有待后续技术报告公布。这些模型成果背后,还有一个值得关注的变化:Simate尝试让AI Agent承担更多机器人模型研发工作。过去,研究人员需要反复修改模型、调整数据、训练评测,再根据结果寻找新的优化方向。Simate开发的AutoResearch,尝试将这些环节连接起来,让Agent承担更多科研执行工作。从AutoResearch的界面来看,这套系统已经不只是简单的实验脚本集合。画面中既出现了“From Experiments to One Policy”的流程看板,也展示了跨场景评测结果页面,用来管理不同实验分支、追踪评测表现,并将多轮实验逐步汇聚成更稳定的策略。根据研究目标与约束,Agent可以读取模型代码、训练配置及历史实验记录,通过SiPAI修改组件与配置,调用基础设施完成训练和评测,再根据结果决定继续、调整或停止实验,并将新发现纳入下一轮研究。通过这种方式,Simate尝试提高科研执行的自动化程度,让研究人员将更多精力投入假设判断和关键技术决策。其阶段性成果也为AI Agent在人类指导下参与物理智能研究,提供了初步的工程验证。据该公司介绍,AutoResearch目前已对外开放试用,并已有清华、MIT、香港科技大学等高校研究人员使用。 03.押注Physical RSI,让机器人智能持续自我进化