上传者: 42109178
|
上传时间: 2022-03-08 11:46:00
|
文件大小: 17KB
|
文件类型: -
Scrapy_crawl_qichacha
要求:
python版本:python 3.6
确保已在计算机中安装了scrapy。
用法:
首先,您需要访问并登录以获取Cookie。
然后清除之前存在于cookies.txt中的cookie,然后将您自己的cookie粘贴到其中。
您可以在其中粘贴多个cookie,这是由于网站访问的限制而使抓取工具的性能更好。
打开命令窗口并输入主路径:
cd Scrapy_crawl_qichacha-master
然后开始抓取:
scrapy crawl qcc
然后按照窗口中显示的说明进行操作。
笔记:
如果抓取速度过快,则会显示验证码并使程序报告错误,因此该程序设置了相对较慢的速度,您可以在settings.py中进行更改。
当程序报告错误时,这意味着您的帐户中会出现一个验证码,您需要在浏览器中访问URL并输入确认码。