环境：ubuntu20.04, ROS版本：noetic, 1.5.8参考ROS answers: https://answers.ros.org/question/302967/importerror-no-module-named-rospkg/上面的大意是：ubuntu系统中安装过anaconda，并把bin/文件下的可执行文件放到了环境变量(PATH)下，当运行ros下的python程序时

前言PID控制器在工业界应用非常广泛，但是PID的参数调节一般需要人工根据经验法来试。对于有经验的工程师来说，一般试几次就可以获得满足调节的参数。然而对于新手工程师却很难确定一套比较好的参数。这里我们采用强化学习的方法来调节PID参数。这个例子展示了如何使用双延迟深度确定性策略梯度(TD3：twin-delayed deep deterministic policy gradient)强化学习算法

第一章 简要介绍本书开始从机器人的历史开始介绍，内容较多，有兴趣的可以看机器人领域大牛Oussama Khatib的专著——机器人学手册，这本书内容极为详尽！有时候一些比较繁琐的内容，我就只看插图。这种方法在鉴别论文的好坏也有用处，一般一篇好的论文，其插图一定极为完美。在这里仅展示一些书中的插图内容。（版权归原书作者所有）下面带大家一起领略以下本书的精美图片。第二章 位置和方向的表示...

今天给大家介绍一本新书，名字叫–Robotics,Vision and Control-2nd Edition。网上可以搜到这本书的免费电子版。作者是Peter Corke，我是通过Matlab软件中的Robotics Toolbox认识他的，他是该工具箱的作者，读者可以通过其个人网站petercorke.com更加了解这个大牛 。大概每一个从事机器人行业的人都知道该工具箱和另外一个叫Robtic

第一章 简要介绍本书开始从机器人的历史开始介绍，内容较多，有兴趣的可以看机器人领域大牛Oussama Khatib的专著——机器人学手册，这本书内容极为详尽！有时候一些比较繁琐的内容，我就只看插图。这种方法在鉴别论文的好坏也有用处，一般一篇好的论文，其插图一定极为完美。在这里仅展示一些书中的插图内容。（版权归原书作者所有）下面带大家一起领略以下本书的精美图片。第二章 位置和方向的表示...

文章目录OpenAI Gym库agent探深硬件和软件要求OpenAI Gym APIGym库的wrappers和monitors后记OpenAI Gym库agent探深硬件和软件要求OpenAI Gym APIGym库的wrappers和monitors后记

链接2021年10月18日DeepMind收购并开源了MuJoCo软件（之前都是收费的，最早由Roboti LLC开发），MuJoCo：Multi-Joint dynamics with Contact一、Overview1.1 介绍MuJoCo是一个带有C API的C/C库，面向研究人员和开发人员。运行时模拟模块被调优为最大限度地提高性能，并对由内置XML解析器和编译器预先分配的低级数据结构进行