
简介
该用户还未填写简介
擅长的技术栈
可提供的服务
暂无可提供的服务
MPC可能告诉机器人:CoM 应该往这里走,左脚应该产生多少地面反作用力,右脚下一步踩这里。但机器人真正有:几十个关节。
你之后会经常看到三类输出方式:连续动作、离散化动作 token,以及 trajectory/chunk,也就是一次预测未来好几步动作。VLA 的输入可能包括相机图像和你的语言指令,然后模型直接输出一串动作,例如机械臂末端位姿、关节角、夹爪开合等。这也是目前学习 VLA 时非常重要的工程视角:不要因为端到端模型很酷,就把机器人运动学、控制和规划都扔掉。当然,现实工程里通常不会真的把所有传统模块全部扔
局部控制算法(又称局部路径规划与轨迹跟踪算法)处于自主导航架构的底层,负责根据传感器(激光雷达、深度相机等)实时感知的局部环境信息,在满足机器人动力学与物理约束的前提下,实时生成避障轨迹或直接控制命令(如线速度 $v$ 与角速度 $\omega$)。
全局路径规划(Global Path Planning)是在(如栅格地图、矢量图或点云地图)与已知静态障碍物的条件下,寻找一条从起始点到目标点的无碰撞、满足特定约束(如最短距离、最低代价)的几何路径。在机器人和自动驾驶系统(如 ROS / Nav2 架构)中,全局规划器负责生成宏观拓扑轨迹,而局部规划器(Local Planner,如 DWA、TEB)则在此轨迹指导下实时避开动态障碍物并满足加速度
强化学习理论↓Gymnasium↓↓PPO / SAC↓MuJoCo↓Isaac Lab↓机械臂 Reach↓机械臂 Pick↓Grasp↓视觉 + RL↓↓Sim2Real↓ROS2↓真实机器人Camera↓↓目标状态↓RL Policy↓Action↓ROS2↓机械臂这时候强化学习才真正进入你的机器人系统。
可以把它理解成一个“现成的人体视觉关键点提取器”。目前官方主推的是,Python 直接即可使用,支持 Windows、Linux、macOS,官方文档目前写的是 Python 3.9 及以上。:识别手部,还能判断左手/右手,并输出图像坐标和 3D world landmarks。:提取人体姿态,比如肩、肘、腕、髋、膝等,用来做动作模仿、人体跟随、遥操作。:人脸关键点、表情分析,可以做人机交互和机器
实现自主抓取策略生成,由固定抓取升级为候选抓取评估模式,可根据物体姿态生成多种抓取方案,并结合可达性、碰撞、关节限制进行筛选,输出机械手位姿及手指动作。在 x86 主控端部署轨迹桥,实现 ROS 运动轨迹到机器人电机指令的转换,支持轨迹下发、误差检测、异常停止和运动取消等安全机制,完成真机验证。排查机器人视觉定位误差问题,确认相机无异常,修正机器人基准坐标参数,使视觉坐标与机器人实际空间位置一致。







