一、DQN的神经网络是怎样一种结构？有几层？什么作用？如何实现数据的记忆？如何做一些改进（一）问题描述：qu1. 问题复杂度提高导致无法使用Q表记录全部状态：1. 对状态的维度进行压缩，解决方案之一Value Function Approximation（值函数近似），用w来表示函数f的参数，则有2. 高维s和低维a的函数输入问题，低...

擅长一件事，喜欢一件事，工作一件事。如果三件事重合，就不要踌躇了。一、TensorFlow2TensorFlow的张量与数据流图：一维张量如向量，二维张量如矩阵，以此类推。TensorFlow的数据流图如下。二、神经网络基础编程实例1、Ten...

vsim指令 载入一个设计到仿真器。1、vsim语句格式：Vsim [option] +TESTNAME=[test] [work.实体名]2、常用选项：# 常用-c # 使vsim运行在命令行模式，不启动图形界面，节省时间-novopt # 不采用vopt优化，常和+acc配合使用-l <logfile> # 设置输出仿真的log文件-do "cmd" # 开始仿真后运行tcl脚本文

版本信息：Ubuntu16.04网上主要由三种方法，1、修改.modelsim文件的PrefDefault = ... textFontV2 {Verdana 12}这条配置。（我这边没有这条配置）2、通过xrandr命令和设置appearance下修改字体。（尝试无效）3、questasim-tool-edit preference-textfront。（单独此条无效）但是，还是修改好了，如下图

一、安装VMware二、安装Ubuntu（1）解除自动锁屏打开系统设置，找到“Brightness & Lock”（亮度和锁屏）设置并打开。更改设置为“Never”和“OFF”。三、安装Questasim1、换源（1）Found a swap file by the name "/etc/apt/.sources.list.swp"：vim删除临时文件...

注：监督学习是人指导机器认知/理解世界本质/特征。无监督学习是机器自己去认知世界本质。深度强化学习是在机器自己去学习如何认识世界、如何与世界交互。从人介入程度、类人智慧程度上，无疑深度强化学习更深一层。问题一：神经网络如何设计问题二：状态空间和动作空间如何设计问题三：奖励函数如何设计...

梯度：上升最快的方向。梯度下降法：沿着梯度反方向，找到全局最小值（损失函数）。神经网络的有效性：两层神经网络可以无限逼近任意二维连续函数。其实从输入层到隐藏层的矩阵计算，就是对输入数据进行了空间变换，使其可以被线性可分，然后输出层画出了一个分界线。而训练的过程，就是确定那个空间变换矩阵的过程。因此，多层神经网络的本质就是对复杂函数的拟合。我们可以在后面的试验中来学习如何拟合上述的复杂函数的...

本篇文章主要介绍在gym环境下env环境编写（未待完续，空闲更新）经典的迷宫宝藏例子import numpy as npimport timeimport tkinter as tk # 窗口界面库UNIT = 40# 像素MAZE_H = 5# 高宽格子数MAZE_W = 3class Maze(tk.Tk): # 新类继承父类tkinter.Tkd...

版本信息：Ubuntu16.04网上主要由三种方法，1、修改.modelsim文件的PrefDefault = ... textFontV2 {Verdana 12}这条配置。（我这边没有这条配置）2、通过xrandr命令和设置appearance下修改字体。（尝试无效）3、questasim-tool-edit preference-textfront。（单独此条无效）但是，还是修改好了，如下图

擅长一件事，喜欢一件事，工作一件事。如果三件事重合，就不要踌躇了。一、TensorFlow2TensorFlow的张量与数据流图：一维张量如向量，二维张量如矩阵，以此类推。TensorFlow的数据流图如下。二、神经网络基础编程实例1、Ten...