logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

初识scrapy框架的介绍和命令行使用

一、介绍Scrapy一个开源和协作的框架,其最初是为了页面抓取 (更确切来说, 网络抓取 )所设计的,使用它可以以快速、简单、可扩展的方式从网站中提取所需的数据。但目前Scrapy的用途十分广泛,可用于如数据挖掘、监测和自动化测试等领域,也可以应用在获取API所返回的数据(例如 Amazon Associates Web Services ) 或者通用的网络爬虫。Scrapy 是基于twisted

【博客】前端添加富文本编辑器(django)

这里使用的是开源的kindeditor来作为富文本编辑器。下载地址:http://kindeditor.net/down.php然后将下载的文件放在static文件下, 可以去掉无用的文件。配置操作如下:在django的settings.py 文件中加上媒体和静态文件的配置。settings.py# 静态文件STATIC_URL = '/static/'STATICFILES_DIRS=[os.p

Nginx 414 Request-URI Too Large报错解决方法

症状:前台客户端发送大量请求或发送的数据包太大的时候,nginx会报nginx 414 Request-URI Too Large错误,如下图原因:当请求头过大时,超过large_client_header_buffer时,nginx可能返回"Request URI too large" (414)或者"Bad-request"(400)错误,请求投中最长的一行也要小于large_client_h

暂无文章信息