1 为什么要重点学习requests模块，而不是urllibrequests的底层实现就是urllibrequests在python2 和python3中通用，方法完全一样requests简单易用Requests能够自动帮助我们解压(gzip压缩的等)响应内容 2 requests的作用作用：发送网络请求，返回响应数据中文文档 ： http://docs.python...

1 什么是爬虫把互联网比喻成一张网，那么爬虫就是网上爬行的蜘蛛，把网的节点比喻成一个个网页，爬虫爬取到就相当于访问了该页面，获取了其信息，爬虫可以通过一个节点之后，顺着节点连线（链接) 继续爬行到下一个节点，即通过一个网页继续获取后续的网页，这样整个网的节点就可以被爬虫全部爬到。实际实现可理解为：网络爬虫（又称网页蜘蛛，网络机器人）模拟浏览器发送网络请求，接...

一、MD5哈希加密算法 MD5即Message-Digest Algorithm 5（信息-摘要算法 5），用于确保信息传输完整一致。是计算机广泛使用的散列算法之一（又译摘要算法、哈希算法），主流编程语言普遍已有MD5实现。 将数据（如汉字）运算为另一固定长度值，是散列算法的基础原理，MD5的前身有MD2、MD3和MD4。MD5一度被广泛应用于安全领域。但是由于MD5的弱点被不断发现以及...

期望， 方差， 协方差，标准差期望概率论中描述一个随机事件中的随机变量的平均值的大小可以用数学期望这个概念，数学期望的定义是实验中可能的结果的概率乘以其结果的总和。定义设P(x) 是一个离散概率分布，自变量的取值范围为{x1,x2,...,xn}。其期望被定义为：E(x)=∑k=1nxkP(xk)设P(x) 是一个连续概率密度函数，其期望为：E(x)=∫+∞−∞x...

基本上接触过网络相关知识的人应该多少都会听过 DNS 这个名词。因为它非常重要，在我们上网的过程中扮演着重要的角色—“将网址/域名解析成 IP 地址”。如果配置了不合理的 DNS 服务器，可能会导致网速缓慢、打不开网站；一些恶意的 DNS 还会让你电脑出现弹窗广告、网站被劫持修改 (中间人攻击)、监听等等一系列的安全问题。DNS 的全称是 Domain Name System 或者 D...

转：https://yq.aliyun.com/articles/68828 一、PaaS的发展简史PaaS作为新一代的云计算平台，目前在业界得到了广泛的关注与讨论。诸多大公司也纷纷推出自己的PaaS平台，比如Pivotal的CloudFoundry, IBM的Bluemix和Redhat的OpenShift等。其实在此之前， PaaS已经有很长一段时间的发展历程。2007年，...

WEB服务器与WEB应用web服务器：用来处理客户端的HTTP请求，并发送响应。web应用：用来处理客户端的动态请求，并返回给web服务器。WSGI协议为啥要用WSGI ?下面三张图一目了然：图1图2图3首先弄清下面几个概念：WSGI：全称是Web Server Gateway Interface，WSGI不是服务器，python模块，框架，A...

Json模块dumps、loads、dump、load函数介绍1、json.dumps()         json.dumps()用于将dict类型的数据转成str，因为如果直接将dict类型的数据写入json文件中会发生报错，因此在将数据写入时需要用到该函数。import jsonname_emb = {'a':'1111','b':'2222','c':'...

基本上接触过网络相关知识的人应该多少都会听过 DNS 这个名词。因为它非常重要，在我们上网的过程中扮演着重要的角色—“将网址/域名解析成 IP 地址”。如果配置了不合理的 DNS 服务器，可能会导致网速缓慢、打不开网站；一些恶意的 DNS 还会让你电脑出现弹窗广告、网站被劫持修改 (中间人攻击)、监听等等一系列的安全问题。DNS 的全称是 Domain Name System 或者 D...

一、脚本百科解释：脚本（script）是使用一种特定的描述性语言，依据一定的格式编写的可执行文件，又称作宏或批处理文件。脚本通常可以由应用程序临时调用并执行。各类脚本目前被广泛地应用于网页设计中，因为脚本不仅可以减小网页的规模和提高网页浏览速度，而且可以丰富网页的表现，如动画、声音等。举个最常见的例子，当我们点击网页上的E－mail地址时能自动调用Outlook Express或Fox...