subtitle
  Post Categories
Git 1 MySQL 2 Python 6 Data 1 Network 4 Linux 1 Scrapy 7 Selenium 3
解决倒立文字验证 解决倒立文字验证
引用第三方库，调用接口进行识别安装 zheye 第三方库git clone https://github.com/996refuse/zheye.git 安装依赖包，并移动到项目目录下其中 tensorflow 库，改为1.13版本接口调用
2020-08-09 Scrapy
Learn Selenium
模拟 Firefox 知乎登录 模拟 Firefox 知乎登录
代码示例： # -*- coding: utf-8 -*- from ArticleSpider.utils.common import DataConvert import scrapy import pickle from mouse
2020-08-09 Scrapy
Learn Selenium
模拟 Chrome 知乎登录 模拟 Chrome 知乎登录
创建 chromedriver 实例class ZhihuReqSpider(scrapy.Spider): name = 'zhihu_req' allowed_domains = ['www.zhihu.com'] start_u
2020-08-09 Scrapy
Learn Selenium
存储知乎数据 存储知乎数据
Scrapy -> Shell 中配置 User-Agent ​ scrapy shell -s USER_AGENT="Browser AGENT" URL 分析URL 源URLhttps://www.zh
2020-08-09 Scrapy
Learn
Selenium 简介 Selenium 简介
简单实例：from selenium import webdriver from scrapy.selector import Selector browser = webdriver.Chrome(executable_path='E:
2020-08-09 Scrapy
Learn
Selenium 模拟微博登录 Selenium 模拟微博登录
启用 ChromeDriverdef start_requests(self): """使用 selenium 获取 cookie""" # 获得 Options(操作)对象 chrome_option = Opti
2020-08-09 Scrapy
Learn
Scrapy 暂停与重启 Scrapy 暂停与重启
实现方法如下方法一：进入 Terminal 输入以下命令scrapy crawl spider -s JOBDIR=job_info/001 方法二：配置 settings 组件JOBDIR='job_info/001' 方法三：在 Spi
2020-08-09 Scrapy
Learn