TenStep

Physical/Embodied Intelligence

研究范围

物理/具身智能总入口,覆盖感知、规划、控制、世界模型与 sim2real。

关注点

world modelsrobot manipulationsim2realplanning

范围说明

Physical/Embodied Intelligence 关注智能体如何在真实世界中感知、规划并执行动作,核心问题是把数据、模型、控制器与物理约束连接成稳定闭环。

关键问题

  • 数据、模型、控制器三者怎样形成稳定闭环?
  • sim2real 的主要瓶颈是数据覆盖还是策略表达?
  • 世界模型怎样才能真正为行动和规划服务?

综述

机器人策略中的力觉与触觉:从信号语义到闭环控制

综合十八篇材料,按力/触觉信号的角色、坐标语义和时间尺度重整机器人策略路线:传感与采集、表示与适配、执行期反馈、事件记忆与后果预测,以及由低层控制器落实的力位与柔顺接口。

打开综述

机器人 RSI:数据、想象、程序、技能与系统策略

综合 EmbodiRSI、RISE、HarnessPAI、RoboRSI、RoboFoundry 五篇材料,把机器人递归自我改进拆成经验生成、失败归因、候选更新、验证发布和部署复用五个环节,并比较数据、想象环境、可执行程序、技能库和系统策略五类更新对象。

打开综述

当前 VLA 路线图:基座、可控性、在线精修、记忆与人类数据

如果只看单篇论文,很容易觉得大家都在“继续做更强的 VLA”。但把 OpenVLA、π0.7、RLT、MEM、Human-to-Robot Transfer、DexImit 放在一起,会看到这条路线其实已经分化成六个相互关联的问题: 1. VLA 基座如何开放、可训、可部署 2. heterogeneous data 如何变成可控能力 3. 通才策略如何继续被打磨到 specialist 级精度 4. 分钟级任务如何通过 memory 真正支撑起来 5. 人类数据何时开始能真正被机器人利用 6. 人类视频如何被显式编译成机器人可训练数据 这说明当前 VLA 研究已经不再只是单点模型设计,而是在演化成一套完整系统栈。

打开综述

Long-Horizon Memory for Robot Policies

这条主题关注机器人策略如何处理分钟级任务。关键不是更多帧,而是多尺度记忆:哪些信息应该保留为短期视觉痕迹,哪些应该抽象成长期语义状态。

2026-10-25

打开主题

Vision-Language-Action

VLA/WAM 从开放基座、多源数据、在线精修和长时程记忆,继续扩展到新感官模态、隐式空间表征对齐、几何世界建模、模块化世界—动作预训练、训练期物理模态蒸馏、动作接触后果预测与执行期闭环。

2026-10-25

打开主题

Tactile Representation

触觉与力觉如何从传感设计、跨硬件共享表示,进入预训练策略的持续适配、快慢控制与执行期流式闭环。

2026-10-25

打开主题

Online RL for VLA

这条主题关注 VLA 预训练之后的在线适配。核心问题不是“VLA 能不能泛化”,而是“当真实机器人需要更高精度、更高速度时,怎么以较低样本成本继续优化它”。

2026-10-22

打开主题

Robot Self-Improvement

关注机器人如何根据自身 rollout 失败改进数据采集、技能代码和长期能力库,并检验这种递归改进能否跨场景、跨轮次、跨调用者稳定延续。

2026-10-22

打开主题

Contact-Rich Manipulation and Adaptive Compliance

接触密集操作中的运动—力联合学习路线:如何从示范、实时反馈、关节力矩、训练期力蒸馏、力域动作或动作后果预测获得任务相关接触表示,并在安全接触、轨迹精度、硬件成本、快速响应与控制带宽之间动态权衡。

2026-10-17

打开主题

论文 2026-10-22

Humanoid Mobility via Attention-based Contacts

值得记住的是“保留示范中的接触结构,释放连接接触的全身运动”这一接口设计。它让单个 G1 策略在部署时摆脱参考轨迹,同时支持手、肘、膝等多部位协同。八个复合课程的仿真平均成功率达到 92.5%,但本文还没有证明开放三维场景中的通用移动或可认证的实机可靠性。

论文 2026-10-21

Agentic World Action Models

AW-0 值得记住的贡献,是让可复用技能程序成为世界动作模型内部的规划表示:语义计划既影响未来画面,也影响运动控制。八项真机任务平均评分从最强基线 DreamZero 的 46.0% 提高到 71.1%,但视觉随机化仍明显破坏默认模型表现。它提供了连接程序技能与连续控制的可行接口,尚未实现交互中自主扩展技能或持续学习。

论文 2026-10-21

Phoenix(MWA™-Phoenix): Scaling Robotic Manipulation through Visual and Interaction Representations

无界动力开源的 MWA™-Phoenix 是目前综合榜单表现最强的开源机器人世界动作模型(WAM)基座:约 6B 联合视频—动作骨干,仅 RGB 输入、不用深度真值,在 LIBERO-Plus、LIBERO-Pro、RoboCasa-GR1、RoboTwin 2.0 C2R、Bench2Dex、RoboDojo 真机六项各有侧重的评测上同时登顶或最优。真正值得记住的不是单点分数,而是它把“几何+时序双教师蒸馏的视觉表征”“运动与触觉共同编码的交互潜变量(ILA)”“视触觉世界模型里的 GRPO 强化学习(PhysCanvas)”连成了一条从大规模预训练到真机精细操作的完整链路,且预训练数据全部来自开源数据集、代码与权重开放。对关注 WAM 预训练配方、接触操作和“世界模型内 RL”的读者,这是当前最完整的开源参照系。

论文 2026-10-20

Learning the 4D World through Point Trajectory Forecasting

值得保留的是一条受控证据:预测同一物理点的未来三维位置,能同时改善多视角视频的一致性与动作模型的操作表现。贡献包括联合监督机制、数据集与评测,但尚不能据此认定模型掌握完整物理规律或具备可靠的零样本轨迹控制。

论文 2026-10-20

T-WLA: Bridging Slow Vision and Fast Touch

T-WLA将视觉规划与触觉修正拆成两个时钟:39.7 Hz视觉分支输出基础动作块与历史视觉记忆,119.1 Hz轻量触觉编辑器读取缓存,修正未执行动作。未来图像和压力预测只在训练时监督表示,部署时移除预测头。EgoTouch手指MPJPE由0.50降至0.35 cm,真机四任务平均成功率50%。但自身无触觉版本已达47.25%,不能把相对SmolVLA+Tactile的33个百分点全部归因于快触觉。

论文 2026-10-19

Physical Words: A Vocabulary for Structuring Latent Reasoning in Robot Manipulation

值得记住的是用离散动作语义组织连续未来动力学的接口。PhysWord 在 UniVTAC 达到 90.3%,LIBERO-Long 达到 99.6%,四项真机任务平均 71.7%;长任务消融为语义锚点的价值提供了比可视化聚类更直接的证据。它尚未证明开放词汇技能组合或任意无触觉部署。