安装参考：http://www.python3.vip/tut/auto/appium/01/其他：https://www.cnblogs.com/king2/p/13683218.htmlimport timefrom appium import webdriverdesired_caps = {'platformName': 'Android', # 被测手机是安卓'platformVersi

from selenium import webdriverfrom bs4 import BeautifulSoupoption = ChromeOptions()option.add_experimental_option('excludeSwitches', ['enable-automation'])driver = webdriver.Chrome(options=opti...

#!/usr/bin/env python# coding=utf-8# 封装实现读取表格数据# 2018.11.10增加了如果不传sheet_name默认读取第一个表格的功能import xlrd,osfrom xlrd import xldate_as_tuplefrom datetime import datetimefrom openpyxl import load_wo...

wb_a = openpyxl.load_workbook(filearray[0],data_only=True)excel_Result = openpyxl.load_workbook(文件名, data_only=True)

1.什么是状态码301,302301 Moved Permanently（永久重定向） 被请求的资源已永久移动到新位置，并且将来任何对此资源的引用都应该使用本响应返回的若干个URI之一。比如百度百科：http://baike.baidu.com/fenlei/%E6%94%BF%E6%B2%BB%E4%BA%BA%E7%89%A9解决（一）1.在Request中将scrapy的dont...

Scrapy-Redis 空跑问题，redis_key链接跑完后，自动关闭爬虫问题：scrapy-redis框架中，reids存储的xxx:requests已经爬取完毕，但程序仍然一直运行，如何自动停止程序，结束空跑。分布式扩展：我们知道 scrapy 默认是单机运行的，那么scrapy-redis是如何把它变成可以多台机器协作的呢？首先解决爬虫等待，不被关闭的问题：1、scrapy内部的信号系统

定位网页上某个按钮时，总是报错元素定位不到，具体如下：NoSuchElementException: Message: no such element: Unable to locate element不是 xpath 的问题，是因为脚本执行到这一行代码时，对应页面上的元素还没加载完成，导致定位不到，需要设置等待时间，举个简单的例子：from selenium import webdriverim

1. 清除 git 的全局设置（针对已安装 git）新安装 git 跳过。若之前对 git 设置过全局的user.name和user.email。类似 (用git config --global --l进行查看你是否设置)，显示为：$ git config --global user.name "你的名字"$ git config --global user.email"你的邮箱"必须删除该设置$

1、创建Scrapy项目scrapy startproject Dushu2.进入项目目录，使用命令genspider创建Spiderscrapy genspider dushu dushu.com3、定义要抓取的数据（处理items.py文件）import scrapyclass DushuItem(scrapy.Item):# 书籍IDbook_id = scrapy.Field()# 书的链

You should consider upgrading via the 'pip install --upgrade pip' command.提示有新版本了，可以升级pip（但是注意要把pip命令替换成pip3）pip3 install --upgrade pip-----------------------------------------------------------------