dict（字典）Python内置了字典：dict的支持，dict全称dictionary，在其他语言中也称为map，使用键-值（key-value）存储，具有极快的查找速度。和list比较，dict有以下几个特点：查找和插入的速度极快，不会随着key的增加而变慢；需要占用大量的内存，内存浪费多。而list相反：查找和插入的时间随着元素的增加而增加；占用空间小，浪费内存很少。所以，dict是用空间来

启用session首先确认在 MIDDLEWARE_CLASSES中确保它包含’django.contrib.sessions.middleware.SessionMiddleware’，如果不想使用用session会话可以删除这一项配置session引擎默认情况下，django框架会将session数据存储在数据库（django框架中默认创建的model里有存储session的model，...

在Python的正则表达式中，有一个参数为re.S。它表示“.”（不包含外侧双引号，下同）的作用扩展到整个字符串，包括“\n”。看如下代码：运行结果如下：正则表达式中，“.”的作用是匹配除“\n”以外的任何字符，也就是说，它是在一行中进行匹配。这里的“行”是以“\n”进行区分的。a字符串有每行的末尾有一个“\n”，不过它不可见。如果不使用re.S参数，则只在每一行内...

前言当大家谈到数据分析时，提及最多的语言就是Python和SQL。Python之所以适合数据分析，是因为它有很多第三方强大的库来协助，pandas就是其中之一。pandas的文档中是这样描述的：“快速，灵活，富有表现力的数据结构，旨在使”关系“或”标记“数据的使用既简单又直观。”我们知道pandas的两个主要数据结构：dataframe和series，我们对数据的一些操作都是基于这两个...

引言在第一次导入新数据集时，我们首先要做的是了解数据。这包括确定特定预测变量的范围，识别每个预测变量的数据类型以及计算每个预测变量的缺失值的数量或百分比等步骤。这一步通常被称为探索性数据分析（EDA，exploratory data analysis）。pandas库提供了许多非常有用的功能来帮助我们完成EDA。但是，在能够应用这些功能之前，通常我们必须先使用更普遍的功能，如 df.descr..

1.案例分析：需求：爬取网易新闻的国内板块下的新闻数据需求分析：当点击国内超链进入国内对应的页面时，会发现当前页面展示的新闻数据是被动态加载出来的，如果直接通过程序对url进行请求，是获取不到动态加载出的新闻数据的。则就需要我们使用selenium实例化一个浏览器对象，在该对象中进行url的请求，获取动态加载的新闻数据。2.selenium在scrapy中使用的原理分析：当引...

findall方法相比其他方法，findall方法有些特殊。它的作用是查找字符串中所有能匹配的字符串，并以结果存于列表中，然后返回该列表注意：match 和 search 是匹配一次 findall 匹配所有。1 pattern.findall方法该方法的作用是在string[pos, endpos]区间从pos下标处开始查找所有满足pattern的子串， 直到endpos位置结...

1.re.search函数re.search 扫描整个字符串并返回第一个成功的匹配，如果匹配失败search()就返回None。(1)函数语法：re.search(pattern,string,flags=0)　　函数参数说明：　　　　pattern 匹配的正则表达式　　　　string要匹配的字符串　　　　flgs标志位，用于控制正则...

1. 写一个正则表达式，使其能同时识别下面所有的字符串：'bat','bit', 'but', 'hat', 'hit', 'hut'2.匹配由单个空格分隔的任意单词对，也就是姓和名3. 匹配由单个逗号和单个空白符分隔的任何单词和单个字母,如姓氏的首字母4.匹配所有的有效的Python标识符集合5. 根据美国街道地址格式,匹配街道地址。美国接...

之前接触scrapy本来是想也许scrapy能够让我的爬虫更快，但是也许是我没有掌握scrapy的要领，所以爬虫运行起来并没有我想象的那么快，看这篇文章就是之前使用scrapy的写得爬虫。然后昨天我又看到了pyspider，说实话本来只是想看看，但是没想到一看就让我喜欢上了pyspider。先给大家看一下pyspider的后台截图：pyspider的后台截图pyspider是国人写...