import pandas as pddata_dic = {‘姓名’: [‘xl’, ‘xh’], ‘年龄’: [22, 18], ‘身高’: [170, 165]}data = pd.DataFrame(data_dic)print( data )data.to_excel(‘l.xlsx’)

自动化参数测试

首先要确定请求方式要获取哪些数据，确定数据框分析页码变化规律，取出所有页码数据不要忽略re.S,忽略换行，如果不加获取标签就会获取不到。...

scrapy-redsi分布式1.什么分布式？由多个计算机共同完成一个任务的模式。多个计算机共同完成，可以提高效率。问题：如何让多个计算机协同处理一件事？2.scrapy-redis涉及的就是爬虫项目的分布式部署。我们把一个相同的爬虫项目部署到多个机器上，让多个机器同时爬取，增加爬取效率。分布式思路：1.在存入数据的时候，我们可以规定一台电脑是主机，所有人都链接这个电脑数据库存入数...