【机器人】波士顿动力新作!首创「坐标系转移接口」,提升机器人泛化分层智能

人工智能产业链union 2025-08-03 14:55

资讯配图
资讯配图

【导读】美国东北大学和波士顿动力RAI团队提出HEP框架,首创「坐标系转移接口」,将高层策略的泛化能力与低层策略的灵活性无缝耦合,实现「少数据」下的高效学习与强泛化。该框架通过分层结构、空间对称性自然泛化和创新型体素编码器,显著提升机器人在复杂任务中的表现。

在机器人智能操作领域,数据稀缺和泛化难题长期困扰着AI的落地应用。

大多数方法或依赖大量数据,或在环境稍有变化时表现失灵。

如何让AI像人一样,仅凭少量演示,就能稳健适应复杂多变的真实场景?

美国东北大学和波士顿动力RAI团队的研究人员提出HEP(Hierarchical Equivariant Policy via Frame Transfer)框架,首创「坐标系转移接口」,将高层策略的泛化能力与低层策略的灵活性无缝耦合,实现「少数据」下的高效学习与强泛化。

资讯配图

论文地址:https://openreview.net/pdf?id=nAv5ketrHq

项目代码:https://codemasterzhao.github.io/HierEquiPo.github.io/

坐标系转移接口实现了高层泛化能力与低层灵活性的无缝融合,为机器人少样本、高鲁棒、多场景泛化部署开辟了全新路径。

资讯配图

主要贡献

1. 极简高效的分层结构——高层模块负责全局子目标(keypose)预测,低层模块基于局部坐标自主优化轨迹;

2. 空间对称性自然泛化——在T(3)(平移)与SO(2)(平面旋转)群下均保持等变性,显著降低对示例数量的依赖;

3. 创新型体素编码器——采用堆叠体素(Stacked Voxel)+SO(2)等变网络,高效编码三维视觉信息,兼顾细节与计算速度。


资讯配图
方法概述


资讯配图

HEP框架由三部分组成:

1. 高层策略:它首先读取机器人感知到的三维点云信息,然后预测出一个粗略的目标位置,也就是「关键姿态」。

2. 坐标系转移接口:接着,它会把全局点云和上述关键姿态一起,转换到一个以关键姿态为中心的局部坐标系里,让后续处理都基于这个「局部视角」进行。

3. 低层策略:最后,低层策略在这个局部坐标系中,通过对体素化后的三维视觉特征进行等变扩散运算,生成连续、精细的机器人动作轨迹

开放/闭环兼容:同一接口支持一次性输出(Open‑loop)与逐步反馈(Closed‑loop)两种控制模式;

轻量高效:高层仅需预测平移向量,降低计算与学习难度,增强泛化性;低层专注细节,通过坐标系转移接口从高层强化泛化性。


资讯配图
核心创新点


资讯配图

坐标系转移接口(Frame Transfer)


资讯配图

设计思路:高层策略给出任务的「参考坐标」,低层策略在此基础上自主优化执行细节。

这样的设计不仅释放了低层的灵活性,也将高层的泛化能力、抗干扰性自洽地传递到底层,实现了「泛化性与鲁棒性」的一体式提升。

优势包括:

灵活性,低层可在局部坐标系内自主调整执行细节;

泛化性,高层对全局变换的适应能力,通过坐标系转移接口无损传递到低层;

简化高层,只需预测平移,避免在高维SE(3)空间中做精确规划。

资讯配图

T(3)与SO(2)等变性的实现


资讯配图

T(3)等变示意图

资讯配图

SO(2)等变示意图

当旋转和沿xyz轴的平移发生时,模型预测的轨迹也能确保发生相应的平移和旋转

高层:使用SO(2)‑等变3D U-Net对离散化平移概率图进行预测,因此拥有SO(2)‑等变性和T(3)等变性

低层:基于堆叠体素编码器提取局部特征,结合SO(2)‑等变扩散策略,因此拥有SO(2)等变性

系统:在论文附录中给出完整的等变性证明(Proposition 4.2&4.3)通过坐标系转换,SO(2)等变性被保存,T(3)等变性可以从高层传递到低层,使得整个系统拥有SO(2)XT(3)的等变性

资讯配图

创新型体素编码器(Stacked Voxel Representation)


原理:将点云按体素网格分组,以等变PointNet聚合每个体素内点的特征,组成c×D×H×W的等变体素图。

优势包括:

细节保留,相比传统下采样,更好保留局部几何信息;

计算友好,点云‑卷积混合结构,平衡速度与精度;

等变性,理论保证在T(3)×SO(2)变换下保持一致性。


资讯配图
仿真实验


资讯配图

数据集:30个RLBench任务,每个任务用100条演示训练。

对比基线:3D Diffuser Actor、Chained Diffuser、Equivariant Diffusion Policy。

开环结果:HEP在30任务中有28项胜出,平均提升+10%。

闭环结果:在10个长程任务上,HEP平均提升+23%,显著优于单级方法。

资讯配图

消融分析

去除等变结构:性能降24%;

去除坐标系转移:性能降16%;

去除堆叠体素:性能降10%;

充分验证各模块贡献。

资讯配图

资讯配图
真实机器人实验

资讯配图

分层策略在复杂长程任务上优势显著


在真实机器人上,HEP分层框架仅用30条演示数据,就学会了包括移锅盖、加清洁剂、擦洗等多步协作的鲁棒「洗锅」任务,明显优于非分层方法。

资讯配图

资讯配图

坐标系转移接口:泛化性与鲁棒性的传递桥梁


理论保障:证明了坐标系转移接口能将高层对空间变化的适应能力无损传递至低层,策略整体更易扩展至新场景。

在Pick&Place任务上,HEP仅凭一次演示,低层扩散模型即可实现1-shot泛化学习,显著提升了数据效率。

在环境变化和引入无关物体的扰动测试下,HEP成功率较传统方法提升高达60%。

资讯配图

资讯配图

接口设计带来未来扩展可能


坐标系转移接口对低层策略仅施加软约束,这不仅保证了灵活性,也为未来引入VLM或Cross-embodiment等多模态、跨平台高层策略作为决策规划器提供了天然接口。

参考资料:
https://openreview.net/pdf?id=nAv5ketrHq

☟☟☟

☞人工智能产业链联盟筹备组征集公告☜


精选报告推荐:

11份清华大学的DeepSeek教程,全都给你打包好了,直接领取:


【清华第一版】DeepSeek从入门到精通

【清华第二版】DeepSeek如何赋能职场应用?


【清华第三版】普通人如何抓住DeepSeek红利?

【清华第四版】DeepSeek+DeepResearch让科研像聊天一样简单?

【清华第五版】DeepSeek与AI幻觉

【清华第六版】DeepSeek赋能家庭教育

【清华第七版】文科生零基础AI编程:快速提升想象力和实操能力

【清华第八版】DeepSeek政务场景应用与解决方案

【清华第九版】迈向未来的AI教学实验

【清华第十版】DeepSeek赋能品牌传播与营销

【清华第十一版】2025AI赋能教育:高考志愿填报工具使用指南

 10份北京大学的DeepSeek教程

【北京大学第一版】DeepSeek与AIGC应用

【北京大学第二版】DeepSeek提示词工程和落地场景

【北京大学第三版】Deepseek 私有化部署和一体机

【北京大学第四版】DeepSeek原理与落地应用

【北京大学第五版】Deepseek应用场景中需要关注的十个安全问题和防范措施

【北京大学第六版】DeepSeek与新媒体运营

【北京大学第七版】DeepSeek原理与教育场景应用报告

【北京大学第八版】AI工具深度测评与选型指南

【北京大学第九版】AI+Agent与Agentic+AI的原理和应用洞察与未来展望

【北京大学第十版】DeepSeek在教育和学术领域的应用场景与案例(上中下合集)

8份浙江大学的DeepSeek专题系列教程

浙江大学DeepSeek专题系列一--吴飞:DeepSeek-回望AI三大主义与加强通识教育

浙江大学DeepSeek专题系列二--陈文智:Chatting or Acting-DeepSeek的突破边界与浙大先生的未来图景

浙江大学DeepSeek专题系列三--孙凌云:DeepSeek:智能时代的全面到来和人机协作的新常态

浙江大学DeepSeek专题系列四--王则可:DeepSeek模型优势:算力、成本角度解读

浙江大学DeepSeek专题系列五--陈静远:语言解码双生花:人类经验与AI算法的镜像之旅

浙江大学DeepSeek专题系列六--吴超:走向数字社会:从Deepseek到群体智慧

浙江大学DeepSeek专题系列七--朱朝阳:DeepSeek之火,可以燎原

浙江大学DeepSeek专题系列八--陈建海:DeepSeek的本地化部署与AI通识教育之未来

4份51CTO的《DeepSeek入门宝典》

51CTO:《DeepSeek入门宝典》:第1册-技术解析篇

51CTO:《DeepSeek入门宝典》:第2册-开发实战篇

51CTO:《DeepSeek入门宝典》:第3册-行业应用篇

51CTO:《DeepSeek入门宝典》:第4册-个人使用篇

5份厦门大学的DeepSeek教程

【厦门大学第一版】DeepSeek大模型概念、技术与应用实践

【厦门大学第二版】DeepSeek大模型赋能高校教学和科研

【厦门大学第三版】DeepSeek大模型及其企业应用实践

【厦门大学第四版】DeepSeek大模型赋能政府数字化转型

【厦门大学第五版】DeepSeek等大模型工具使用手册-实战篇

10份浙江大学的DeepSeek公开课第二季专题系列教程

【精选报告】浙江大学公开课第二季:《DeepSeek技术溯源及前沿探索》(附PDF下载)

【精选报告】浙江大学公开课第二季:2025从大模型、智能体到复杂AI应用系统的构建——以产业大脑为例(附PDF下载)

【精选报告】浙江大学公开课第二季:智能金融——AI驱动的金融变革(附PDF下载)

【精选报告】浙江大学公开课第二季:人工智能重塑科学与工程研究(附PDF下载)

【精选报告】浙江大学公开课第二季:生成式人工智能赋能智慧司法及相关思考(附PDF下载)

【精选报告】浙江大学公开课第二季:AI大模型如何破局传统医疗(附PDF下载)

【精选报告】浙江大学公开课第二季:2025年大模型:从单词接龙到行业落地报告(附PDF下载)

【精选报告】浙江大学公开课第二季:2025大小模型端云协同赋能人机交互报告(附PDF下载)

【精选报告】浙江大学公开课第二季:DeepSeek时代:让AI更懂中国文化的美与善(附PDF下载)

【精选报告】浙江大学公开课第二季:智能音乐生成:理解·反馈·融合(附PDF下载)

6份浙江大学的DeepSeek公开课第三季专题系列教程

【精选报告】浙江大学公开课第三季:走进海洋人工智能的未来(附PDF下载)

【精选报告】浙江大学公开课第三季:当艺术遇见AI:科艺融合的新探索(附PDF下载)

【精选报告】浙江大学公开课第三季:AI+BME,迈向智慧医疗健康——浙大的探索与实践(附PDF下载)

【精选报告】浙江大学公开课第三季:心理学与人工智能(附PDF下载)

【精选报告】浙江大学公开课第三季:人工智能赋能交通运输系统——关键技术与应用(附PDF下载)

【精选报告】浙江大学公开课第三季:人工智能与道德进步(附PDF下载)


相关阅读

干货推荐:
AI加油站】第一部:《大型语言模型应用检索增强生成:改变搜索、推荐和 AI 助手》附下载
【AI加油站】第二部:《程序员的自我修炼手册》(附下载)
【AI加油站】第三部:《大规模语言模型:从理论到实践》(附下载)
【AI加油站】第四部:《使用生成式人工智能和Python开始数据分析》(附下载)
【AI加油站】第五部:《使用生成式人工智能和Python开始数据分析》(附下载)
【AI加油站】第六部:《时间序列:建模、计算与推断》(附下载)
【AI加油站】第七部:《因果关系的逻辑理论的好书-A Logical Theory of Causality》(附下载)

【AI加油站】第八部:《模式识别(第四版)-模式识别与机器学习》(附下载)

【AI加油站】第九部:《Python深度学习(中文版)》(附下载)
【AI加油站】第十部:《机器学习方法》(附下载)
【AI加油站】第十一部:《深度学习》(附下载)
【AI加油站】第十二部:《从零开始的机器学习》(附下载)
【AI加油站】第十三部:《Transformer入门到精通》(附下载)
【AI加油站】第十四部:《LLM 应用开发实践笔记》(附下载)
【AI加油站】第十五部:《大模型基础 完整版》(附下载)
【AI加油站】第十六部:《从头训练大模型最佳实践》(附下载)
【AI加油站】第十七部:《大语言模型》(附下载)
【AI加油站】第十八部:《深度强化学习》(附下载)
【AI加油站】第十九部:清华大学《大模型技术》(附下载)
【AI加油站】第二十部:Prompt入门神书-《Prompt 学习指南》(附下载)
【AI加油站】第二十一部:吴恩达&open AI联合推出《大模型通关指南》(附下载)
【AI加油站】第二十二部:《李宏毅深度学习教程》值得反复阅读的神书!(附下载)
【AI加油站】第二十三部:Prompt经典中文教程-《提示工程指南》(附下载)
【AI加油站】第二十四部:爆火下载28万次!MIT最新神书《理解深度学习》(附下载)
【AI加油站】第二十五部:LLM4大名著,OpenAI专家强推《深度解析:大语言模型理论与实践》(附下载)
【AI加油站】第二十六部:NLP大牛Thomas Wolf等新书《Transformer自然语言处理》(附下载)
【AI加油站】第二十七部:哈工大博士耗时一年整理《PyTorch常用函数手册》,轻松掌握PyTorch的各种操作(附PDF下载)
【AI加油站】第二十八部:大模型炼丹大师必备《深度学习调优指南中文版-系统性优化模型》(附下载)
【AI加油站】第二十九部:炸裂发布!《大语言模型:导论》重磅发布!(附下载)
【AI加油站】第三十部:最值得读的LLM书!下载量10w+!《基于Transformer和扩散模型的生成式AI》(附下载)
【AI加油站】第三十一部:RL稀缺宝典!《强化学习的艺术》(附下载)
【AI加油站】第三十二部:一本醍醐灌顶的教科书!《大语言模型提示工程:构建LLM应用的艺术与科学》(附下载)
【AI加油站】第三十三部:机器学习好评榜第一《机器学习基础》(附下载)
【AI加油站】第三十四部:所有大模型领域学习者必读,没有之一!由深度学习三巨头联合撰写!(附下载)
【AI加油站】第三十五部:{AI炼丹神书}——从0到1榨干深度学习模型每一滴性能的终极战术手册《深度学习调优指南》(附下载)
【AI加油站】第三十六部:面向生产环境的大型语言模型实战手册《LLM 大语言模型构建指南》(附下载)
【AI加油站】第三十七部:《深度学习的数学导论:方法、实现与理论》从神经网络架构到物理信息模型的全景综述(附下载)
面试推荐:
【AI加油站】AI面试专题一:BIO,NIO,AIO,Netty面试题(附下载)
【AI加油站】AI面试专题二:Git常用命令面试题(附下载)
【AI加油站】AI面试专题三:Java常用面试题(附下载)
【AI加油站】AI面试专题四:Linux系统的面试题集(附下载)
【AI加油站】AI面试专题五:Memcached 面试题集(附下载)
【AI加油站】AI面试专题六:MyBatis框架的面试题(附下载)
【AI加油站】AI面试专题七:MySQL相关的面试题资料(附下载)
【AI加油站】AI面试专题八:Netty面试题资料(附下载)
【AI加油站】AI面试专题九:Nginx的面试题资料(附下载)
【AI加油站】AI面试专题十:RabbitMQ的面试题资料(附下载)
【AI加油站】AI面试专题十一:Redis的面试题资料(附PDF下载)
【AI加油站】AI面试专题十二:Spring的面试题资料(附PDF下载)
【AI加油站】AI面试专题十三:Apache Tomcat的面试题资料(附PDF下载)
【AI加油站】AI面试专题十四:Zookeeper的面试题资料(附PDF下载)
【AI加油站】AI面试专题十五:《阿里巴巴Java开发手册》终极版的面试题资料(附PDF下载)
【AI加油站】AI面试专题十六:大数据技术面试题资料(附PDF下载)
【AI加油站】AI面试专题十七:Java并发多线程面试题资料(附PDF下载)
【AI加油站】AI面试专题十八:设计模式的面试题资料(附PDF下载)
【AI加油站】AI面试专题十九:Java虚拟机(JVM)的面试题资料(附PDF下载)
【AI加油站】AI面试专题二十:Elasticsearch的面试题资料(附PDF下载)
【AI加油站】AI面试专题二十一:TCP UDP Socket Http网络编程的面试题资料(附PDF下载)
【AI加油站】AI面试专题二十二:消息队列Kafka的面试题资料(附PDF下载)
【AI加油站】AI面试专题二十三:Spring Boot的面试题资料(附PDF下载)
【AI加油站】AI面试专题二十四:Spring Cloud的面试题资料(附PDF下载)
【AI加油站】AI面试专题二十五:Dubbo的面试题资料(附PDF下载)

人工智能产业链联盟高端社区




资讯配图
精选主题推荐:
Manus学习手册
从零开始了解Manus

DeepSeek 高级使用指南,建议收藏

一次性说清楚DeepSeek,史上最全(建议收藏)

DeepSeek一分钟做一份PPT

用DeepSeek写爆款文章?自媒体人必看指南

【5分钟解锁DeepSeek王炸攻略】顶级AI玩法,解锁办公+创作新境界!

DeepSeek接入个人微信!24小时智能助理,随时召唤!
PS×Deepseek:一句话编写PS脚本,搞定PS批量导出图层
如何让AI给自己打工,10分钟创作一条爆款视频?
荐:
【中国风动漫】《姜子牙》刷屏背后,藏着中国动画100年内幕!
【中国风动漫】除了《哪吒》,这些良心国产动画也应该被更多人知道!

【中国风动漫】《雾山五行》大火,却很少人知道它的前身《岁城璃心》一个拿着十米大刀的男主夭折!

资讯配图
声明

免责声明:部分文章和信息来源于互联网,不代表本订阅号赞同其观点和对其真实性负责。如转载内容涉及版权等问题,请立即与小编联系(微信号:913572853),我们将迅速采取适当的措施。本订阅号原创内容,转载需授权,并注明作者和出处。如需投稿请与小助理联系(微信号:AI480908961)

编辑:Zero

资讯配图


资讯配图
资讯配图

资讯配图

声明:内容取材于网络,仅代表作者观点,如有内容违规问题,请联系处理。 
动力 接口 机器人
more
放轻松,这种脑机接口不用脑袋“开口”了
前沿 | 帕金森病康复中的脑机接口
国家医保局支持脑机接口等新技术进入临床并收费
前沿 | 广州团队通过无创神经调控显著提升运动想象脑机接口性能
资讯速递 | 光声非侵入脑机接口2.0版:全脑皮层大视野高速神经血管耦合成像
神经脉冲与资本心跳:谁在操控脑机接口的"双螺旋"?
资讯 | 山东首个脑机接口临床与转化中心成立、江苏发布脑机接口医疗服务价格、神芯科技/CorTec/INBRAIN新进展
Nature子刊:脑机接口助力减肥新突破!
脑机接口的"技术暴政":当资本定义神经标准
科技快讯 | 国家互联网信息办公室约谈英伟达;国家医保局:支持脑机接口等新技术进入临床并收费...
Copyright © 2025 成都科技区角科技有限公司
蜀ICP备2025143415号-1
  
川公网安备51015602001305号