sutton RL an introduction 2nd CH5例子ref:https://github.com/ShangtongZhang/reinforcement-learning-an-introduction/edit/master/chapter05/blackjack.py本文解读整理上述示例代码规则21点（blackjack）是经典赌场游戏，玩的是在牌面和不超过21点...

sutton RL an introduction 2nd CH5例子ref:https://github.com/ShangtongZhang/reinforcement-learning-an-introduction/edit/master/chapter05/blackjack.py本文解读整理上述示例代码规则21点（blackjack）是经典赌场游戏，玩的是在牌面和不超过21点...

概述为在嵌入式开发中碰到的算法验证问题，借助matlab平台可以更方便的调试。如控制算法，可以先验证算法编写的正确性，防止盲目调参的无用功。借助的是SIMULINK 与 S-Function Builder方法首先保证 matlab MEX部分能正常工作，可以参考 mex -setup相关信息。主要是让mex找到正确的编译器，如：已安装了gcc套件，则只需设置下环境变量：...

本文记录基于vscode、iverilog搭建轻量化Verilog学习环境的方法。

TagSlam是以AprilTag为前端构建的SLAM定位系统，得益于AprilTag技术能提供高精锚点，这一系统具有很高的定位精度。本文记录在ROS中使用TagSlam定位的方法USB摄像头使用与矫正Ubuntu下查看USB摄像头设备Ref: http://www.1zlab.com/wiki/python-opencv-tutorial/ubuntu-check-usb-camera-devi

概述tSNE是一个很流行的降维可视化方法，能在二维平面上把原高维空间数据的自然聚集表现的很好。这里学习下原始论文，然后给出pytoch实现。整理成博客方便以后看SNEtSNE是对SNE的一个改进，SNE来自Hinton大佬的早期工作。tSNE也有Hinton的参与。先解释下SNE。SNE 全称叫Stochastic Neighbor Embedding。思想是这样的，分别在降维前和降维后的...

1.何为运放噪声放大器的噪声模型如下大致有三部分组成，运放电压噪声，运放电流噪声，和反馈电阻产生的噪声。三者的平方和开根号就是总噪声。在处理精密信号时，显然噪声的问题就很关键了。2.运放噪声基础运放的噪声信息以上图这样的形式给出，这是一个频率谱密度图。因为噪声和频率相关，此图表征了噪声包含的各个频率分量的大小。图分两个区间，前面线性下降部分称为闪烁噪声，后半部分为宽白噪声。...

本文简介ZYNQ移植ARM CMSIS_DSP库的方法

基本理论系统常常由下面三个元件构成1.惯性元件2.弹性元件F=k*(derta x)3.阻尼表示如下要特别注意偶数次的符号，一般如下处理下面是重要的基本物理原理弹球例子仿真一个从10m处以15m/s向上抛出的弹性球，每次反弹速度衰减为0.8倍首先由力学建立方程之后搭建仿真如下，注意积分初值仿真后从查看器查看速度和位移图如下...

本文记录以platformio为开发环境，esp32-arduino为框架下ESP32及ESP32-C3上LVGL的移植、调试与帧率优化。硬件说明ESP32-S核心板ESP32-C3核心板SPI接口TFT屏幕（2.8寸320*240，带电阻屏，ST7789驱动）电阻屏驱动(NS2009)屏幕显示部分所需信号：SDA（SPI输入）SDO（SPI输出，可选）SCL （SPI时钟）CSX （SPI片选，