logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

pytorch笔记:10) 源代码跟读 On the Automatic Generation of Medical Imaging Reports

论文地址:https://arxiv.org/pdf/1711.08195.pdfgithub地址:https://github.com/ZexinYan/Medical-Report-Generation模型框架图:模型简介给定一张CT图片,使用CNN对其进行多标签分类,模型最后一层输出(1维向量)作为Visual Features(VF),对分类结果取概率最大k个类别索引(topk)...

#自然语言处理
pytorch笔记:11) 多标签多分类中损失函数选择及样本不均衡问题

来了一个kmer1.首先确认其prefix_array-> hash2inde即prefix转换为int类型,在通过map找到对应的array_index. prefix array index要保存在中2.已知prefix array index,如何在data_array中定位,首先需要一个数组,里面保存了prefix array index对应数组的大小,比如第0个index对应后..

#pytorch
pytorch笔记:09)RNN和Transform中的Attention机制

原博客是哈佛大学NLP研究组,根据论文“Attention is All You Need” 使用pytorch实现,撰写得非常精彩,强烈推荐。下面是几个笔者阅读时困惑的地方,记录下来以防忘记。原文中给的一个简单的栗子,给定一个序列,模拟生成同一的序列。We can begin by trying out a simple copy-task. Given a random set of i...

#pytorch
pytorch笔记:08)使用LSTM写古诗词

测试环境:centos7 + python3.6 + pytorch0.4 +cuda9下面是用模型生成的藏头诗(深度学习)深宫昔时见,古貌多自有。度日不相容,年年生一目。学者若为霖,百姓贻忧厄。习坎与天聪,优游宁敢屡。训练数据57580首诗歌,每首诗歌,书(pytorch入门与实践)的作者对其进行了预处理,每首诗歌长度125字符(不足补空格,超过则丢弃)下面da...

pytorch笔记:06)requires_grad和volatile

requires_gradVariable变量的requires_grad的属性默认为False,若一个节点requires_grad被设置为True,那么所有依赖它的节点的requires_grad都为True。x=Variable(torch.ones(1))w=Variable(torch.ones(1),requires_grad=True)y=x*wx.requires...

#pytorch
pytorch笔记:04)resnet网络&解决输入图像大小问题

因为torchvision对resnet18-resnet152进行了封装实现,因而想跟踪下源码(^▽^)首先看张核心的resnet层次结构图(图1),它诠释了resnet18-152是如何搭建的,其中resnet18和resnet34结构类似,而resnet50-resnet152结构类似。下面先看resnet18的源码图1resnet18首先是models.resnet18...

#pytorch
pytorch笔记:03)softmax和log_softmax,以及CrossEntropyLoss

softmax在神经网络里面比较常见,简而言之,就是多分类的概率输出sotfmax(xi)=exp(xi)∑jexp(xj)sotfmax(xi)=exp⁡(xi)∑jexp⁡(xj)sotfmax(x_i)=\frac{\exp(x_i)}{\sum_j \exp(x_j)}但是在pytorch里面发现额外有个log_softmax(对softmax取了一个In的对数),为啥这样做呢? ...

#pytorch
ncnn笔记:01)windows+AndriodStudio在安卓机上快速构建一个深度学习分类模型

1.安装AndriodStudioAndriodStudio-3.5.2下载地址: http://www.android-studio.org若遇到 unable to access android sdk add-on list 点击cancel默认安装即可下载sdk,ndk等组件:File->Settings,sdk的路径默认路径为C:\Users\Javis\AppData\Local

#深度学习#android
Openstack使用官方ubuntu和Centos镜像无法使用ssh用户名密码登录登录的问题

关于使用官方ubuntu镜像无法使用ssh用户名密码登录登录的问题在创建instance的时候,选择创建后,然后选择直接输入,最好输入如下代码#!/bin/shsed -i 's/PermitRootLogin without-password/PermitRootLogin yes/g' /etc/ssh/sshd_configsed -i 's/PasswordAuthentica

大模型微调02-使用LLaMA-Factory进行lora微调

数据使用一个医疗诊断数据medical-o1-reasoning-SFT,先把数据转换为LLaMA-Factory支持的Alpaca数据格式,并划分数据集,4060显卡只有8G,这里取2000个样本训练,200个样本验证。在LLaMA-Factory的安装目录下运行如下目录,方便后面选择数据集,比如我的目录为D:\LeStoreDownload\LLaMA-Factory-0.9.2\LLaMA-

文章图片
#深度学习
    共 13 条
  • 1
  • 2
  • 请选择