logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

爬取知网博硕士文献及中国专利存到mysql数据库中的代码及其注意事项

今天因为需要做了一个爬取知网博硕士论文及中国专利的爬虫,在制作的过程中遇到了不少坑,在网上查资料时都是很老的资源,在现在知网的反爬虫下不起作用,所以我来写这篇文章来供大家参考。(这篇文章主要介绍通过改写获得的网址来避开知网的反爬机制,完成普通文章和以表格为主体的html代码的信息的抓取)这篇代码主要是抓取指望中关键字为保护渣的博硕士论文以及中国专利信息,其中中国专利信息较难抓取,主要是因为专利的.

#python#正则表达式#mysql
在虚拟机中(与在本机上安装双系统时遇到的问题是一样的)安装deepin20.0beta时遇到的问题及解决方法(超全)

文章目录花了两天的时间经过重重障碍终于把deepin的20.0beta版安装好了,两个字,巴适。其中遇到过不少问题,让我一一在本文讲解。###1. 显示Operating System not found:解决方法:检查虚拟机设置中DVD的配置,将其由自动检测改为选取的镜像。###2. 打开deepin虚拟机后黑屏:解决办法...

#linux#ubuntu
解决ubuntu虚拟机打开黑屏问题(简单有效,亲测)

直入主题。第一次打开虚拟机黑屏后会发现关机时也无法关机,这时首先要强制电脑重启,关闭虚拟机,重启之后打开ubuntu虚拟机设置将右侧界面中的3D图像加速取消勾选后确定,先不要开机。打开安装Ubuntu的文件夹,将XXX.lck文件夹删除,放心删不会有影响。(注意:当你第一次打开虚拟机黑屏时,会自动在你虚拟机的文件下生成一个lck锁定文件,如果你正常关机的话,这个文件在关机后会自动删除,但是由于虚拟

#ubuntu#unix#linux
检测tensorflow2.0-gpu是否安装成功

用cmd进入安装tensorflow2.0-gpu的环境下的python,输入代码检测,如下图所示。Microsoft Windows [版本 10.0.18362.836](c) 2019 Microsoft Corporation。保留所有权利。C:\Users\赵立铭>activate tensorflow2_gpu(tensorflow2_gpu) C:\Users\赵立铭>p

#tensorflow#python#深度学习
linux服务器后台训练模型(关闭终端之后训练也会继续)

使用nohup python train,py &命令进行训练,train.py是你的训练文件,默认会将信息打印在当前目录的nohup.out下,可以随时查看。训练之后断开终端再重新连接,输入nvidia-smi可以看到最后一行的20789就是我们的训练进程正在使用gpu啦...

#linux#centos#深度学习
labelimg使用方法

目录1.下载labelimg2.labelimg使用1.下载labelimg打开cmd命令行,激活虚拟环境(我这里激活的是tensorflow2cpu这个环境,输入activate tensorflow2_cpu后执行即可),之后直接输入pip install labelimg -i https://pypi.tuna.tsinghua.edu.cn/simple(清华源下载比较快),之后显示安装

解决ubuntu虚拟机打开黑屏问题(简单有效,亲测)

直入主题。第一次打开虚拟机黑屏后会发现关机时也无法关机,这时首先要强制电脑重启,关闭虚拟机,重启之后打开ubuntu虚拟机设置将右侧界面中的3D图像加速取消勾选后确定,先不要开机。打开安装Ubuntu的文件夹,将XXX.lck文件夹删除,放心删不会有影响。(注意:当你第一次打开虚拟机黑屏时,会自动在你虚拟机的文件下生成一个lck锁定文件,如果你正常关机的话,这个文件在关机后会自动删除,但是由于虚拟

#ubuntu#unix#linux
检测tensorflow2.0-gpu是否安装成功

用cmd进入安装tensorflow2.0-gpu的环境下的python,输入代码检测,如下图所示。Microsoft Windows [版本 10.0.18362.836](c) 2019 Microsoft Corporation。保留所有权利。C:\Users\赵立铭>activate tensorflow2_gpu(tensorflow2_gpu) C:\Users\赵立铭>p

#tensorflow#python#深度学习
到底了