logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

具身智能之NavFoM详解:一个模型同时认路、寻物、跟踪和开车——统一导航路线

通用导航基础模型NavFoM,通过统一输入语法与轨迹输出接口,整合了不同任务和机器人本体的导航需求。NavFoM采用7B参数模型,处理多视角视觉输入,输出8个未来轨迹点,覆盖VLN、目标搜索、视觉跟踪和自动驾驶等多个任务。关键技术包括TVI token标记时空信息,BATS算法优化历史帧采样,联合训练802万导航样本和476万QA数据。实验显示NavFoM在7个基准上表现良好,但性能仍低于专用模型

文章图片
#AI
具身智能之WorldDiT详解:训练时预测世界,部署时只输出动作——如何用 399M 参数做统一扩散控制

WorldDiT 以统一扩散 Transformer 联合训练动作生成与未来 RGB patch 预测,在部署时只保留动作分支。本文拆解其 399M 参数架构、flow matching、LIBERO 结果及证据边界。

文章图片
具身智能之CoTinyVLA详解:0.9B VLA 为什么能超过 7B 基线?

CoTinyVLA 用双视角时序输入、Plan–Think 分层推理蒸馏与指令释义扩增,让 0.9B VLA 在 LIBERO-Plus 的四个鲁棒性套件上超过最强 7B 基线。本文拆解方法、实验证据与部署边界。

文章图片
#机器人
具身智能之UniJEPA详解:让机器人同时“听懂、预见、动起来”的统一表征学习

UniJEPA 以离散理解、连续未来视觉特征预测与 Flow Matching 动作生成的三流结构,提升机器人在新物体和复杂操作中的泛化能力。

文章图片
具身智能动作生成之Diffusion Policy详解:如何改变机器人模仿学习

Diffusion Policy 将机器人视觉运动策略建模为条件动作扩散过程,并通过动作序列预测、滚动时域控制和视觉条件实现多模态、稳定且可实时执行的机器人模仿学习。

文章图片
具身智能语言规划之SayCan详解:让大模型“会说”,也让机器人“能做”

本文介绍了SayCan方法,它通过结合大语言模型(LLM)和机器人技能的价值函数,实现语言指令到物理动作的有效规划。LLM负责评估技能与指令的相关性(Say),而价值函数判断技能在当前状态下的可执行性(Can)。两者分数相乘后选择最优动作,逐步完成复杂任务。实验表明,该方法在101条指令测试中达到84%的规划成功率,但受限于低层技能覆盖率,执行成功率为74%。该方法的关键创新在于明确了语言模型与物

文章图片
#机器人
具身智能跨本体学习之Open X-Embodiment详解:让22种机器人共享同一套操作经验

Open X-Embodiment 将 60 个机器人数据集统一为跨本体学习底座,并用 RT-1-X 与 RT-2-X 验证多机器人数据的正迁移。

文章图片
具身智能低成本操作之ALOHA详解:低成本双臂硬件如何学会精细操作

ALOHA 通过低成本 leader-follower 双臂、四路 50Hz RGB 视觉和可维修结构,把高质量双臂示范采集变成普通实验室可承担的工程;ACT 则用 action chunking、temporal ensemble 和 CVAE,把长、高频、带噪的人类轨迹转化为平滑闭环控制。六个真实任务的结果表明,约十分钟示范足以让廉价硬件获得有用的精细操作能力。猫先生认为,ALOHA 最值得留

文章图片
#机器人
具身智能之通用机器人RoboCat详解:一个能用少量示范快速学会新任务和新机器人的自我改进智能体

RoboCat是一种自我改进的通用机器人智能体,能够通过少量示范快速学习新任务并适应新机器人。它采用视觉目标条件的Transformer架构,将异构机器人数据统一为可变长度token序列,支持不同自由度与规格的机械臂。核心创新在于构建“预训练-微调-自主采集-再训练”的闭环:通用模型通过少量人工示范微调后,可自主生成数据并回流至训练集,持续提升性能。实验显示,RoboCat在未见任务(如KUKA

文章图片
#机器人
具身智能之DreamTrue详解:动作忠实的机器人世界模型,如何少“幻觉”地预测失败

给定初始多视角观测x01Vx_0^{1:V}x01V​、任务指令ℓ\ellℓ和动作序列a1Ta_{1:T}a1T​x1T1V∼pθx1T1V∣x01Vℓa1Tx1T1V​∼pθ​x1T1V​∣x01V​ℓa1T​其中VVV是视角数,TTT是预测时域。框架分为校准、Stage I 和 Stage II 三部分。图 1:DreamTrue 的总体流程。

文章图片
#机器人
    共 70 条
  • 1
  • 2
  • 3
  • 7
  • 请选择