logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

神经网络常见的激活函数汇总

1.激活函数的作用在神经网络中,激活函数的作用是能够给神经网络加入一些非线性因素,使得神经网络可以更好地解决较为复杂的问题。比如在下面的这个问题中:如上图所示,这是一个简单的线性分类问题,只需要一条直线就可以很好地分类。当我们碰到下图问题时,无法通过一条直线将样本分类出来,需要我们加入非线性因素才可以将样本分类好,而我们的激活函数就是我们要加入的非线性因素。2.常见的激活函数...

记录在训练深度学习算法过程中遇到的问题及解决办法。持续更新中....

问题1. RuntimeError: received 0 items of ancdata"解决办法主要由两种:(出现这种错误是因为文件描述器共享策略达到了峰值)(1)将代码里面的num_workers的值设为0num_workers=0(2) 在import torch 后面增加一句话就可以解决这个问题import torchtorch.multiprocessing.set_sharing_

#python#深度学习
跑通SOLOV1-V2实例分割代码,并训练自己的数据集。

系统平台:Ubuntu18.04硬件平台:RTX2080 supercuda和cudnn版本:cuda10.0 cudnn:7.5.6pytorch版本:pytorch1.2.0环境安装:#创建solo虚拟环境conda create -n solo python=3.7 -yconda activate solo#下载solo源码,并编译git clone https://github.com/

#深度学习#python#pytorch
IoU,GIoU,DIoU和CIoU三种目标检测loss

IoU:使用最广泛的检测框loss。GIoU:2019年CVPRGeneralized Intersection over Union: A Metric and A Loss for Bounding Box RegressionDIoU和CIoU:2020年AAAIDistance-IoU Loss: Faster and Better Learning for Bound...

#深度学习#目标检测
记录在训练深度学习算法过程中遇到的问题及解决办法。持续更新中....

问题1. RuntimeError: received 0 items of ancdata"解决办法主要由两种:(出现这种错误是因为文件描述器共享策略达到了峰值)(1)将代码里面的num_workers的值设为0num_workers=0(2) 在import torch 后面增加一句话就可以解决这个问题import torchtorch.multiprocessing.set_sharing_

#python#深度学习
树莓派4B快速安装pytorch,torchvision和opencv

树莓派安装pytorch1.3和torchvison0.4.0:直接使用命令:pip3 installtorch-1.3.0a0+de394b6-cp37-cp37m-linux_armv7l.whlpi3 installtorchvision-0.4.1a0+a263704-cp37-cp37m-linux_armv7l.whl就可以安装好pytorch和torchvisio...

深度学习中的优化函数optimizer SGD Adam AdaGrad RMSProp

当前深度学习中使用到的主流的优化函数有:1. BGD(Batch Gradient Descent),SGD(Stochastic Gradient Descent)和MBGD(Mini-Batch Gradient Descent)2. Momentum & Nesterov Momentum3. AdaGrad4. RMSProp5. Adam这三类优化算法是最早的优化算法,它们之前的不同之处

#深度学习#人工智能
方差和偏差来分析:深度学习中的过拟合、欠拟合

偏差和方差的定义介绍:https://mp.csdn.net/postedit/80414998假设一个识别狗算法分类器:1.   过拟合    训练集错误率:1%    测试集错误率:15%    偏差为:1%    方差为:15%-1%=14%    总误差为  15%    虽然分类器训练误差非常低,但是没能成功泛化到测试集。这叫做过拟合。2.欠拟合     训练集错误率:15%     测

#机器学习
经典网络结构梳理:Mobilenet网络结构

论文下载地址:https://arxiv.org/abs/1704.04861Caffe复现地址:https://github.com/shicai/MobileNet-CaffeMobilenet发布在2017年的CVPR。Mobilenet这篇论文是Google针对手机等嵌入式设备提出的一种轻量级的深层神经网络,取名为MobileNets。个人感觉论文所做工作偏向于模型压缩方面,核...

#深度学习
    共 23 条
  • 1
  • 2
  • 3
  • 请选择