subtitle
Scrapy 集成 Selenium Scrapy 集成 Selenium
设置中间件集成 selenium driver,实现动态加载以下方法改变了scrapy异步加载,变为了同步加载,会降低运行效率,当然也可以解决,需要重写 downloader(至少要了解 twisted API) 定义中间件class J
2020-08-09
Selenium 基本使用 Selenium 基本使用
Selenium简介​ 自动化测试框架,最开始是用来做Web自动化测试的,测试网站系统开发。 Selenium 是一个用于Web应用程序测试的工具。Selenium测试直接运行在浏览器中,就像真正的用户在操作一样。支持的浏览器包括IE
2020-08-09
ChromeDriver 图片加载控制 ChromeDriver 图片加载控制
设置 chromedriver 不加载图片方法一:# 关闭图片加载, 使得代码运行速度更快 chrome_option.add_argument('blink-settings=imagesEnabled=false') 注意: 该选项在远
2020-08-09