Scrapy 框架
Scrapy 是一个功能很强大的爬虫框架。
官方文档:
https://docs.scrapy.org/en/latest/
https://scrapy-chs.readthedocs.io/zh_CN/latest/intro/overview.html
安装命令:
pip install scrapy -i https://pypi.douban.com/simple
不过很有可能会安装 Scrapy 失败。一般出现错误的都是 Twised 安装失败,提示:Running setup.py install for Twisted ... error 错误。
我们可以手动下载 Twisted 再安装。
下载地址:http://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted
根据自己 Python 版本下载对应版本安装(如果你的Python是最新的,选择最新版就可以了)
然后命令行进入刚才这个文件的下载目录,然后运行下面命令进行安装。
pip install Twisted-19.10.0-cp38-cp38-win_amd64.whl
其中 Twisted-19.10.0-cp38-cp38-win_amd64.whl 是你下载的文件名。
成功安装Twisted之后,再运行pip命令安装 Scrapy,就可以安装成功了。
更多Python日志点击:Python学习日志目录
下一篇:Python 数据分析第三方库 Numpy 的安装和使用
- 相关文章 -
Python 数据分析第三方库 Numpy 的安装和使用 - 2020-02-03
安装 Scrapy 以及出现 Twisted 安装错误的解决方法 - 2020-01-19
Python 如何定时执行任务和应用实例 - 2020-01-09
案例:使用Python 对Excel表格文档进行批量处理 - 2020-01-08
案例:用 Python 把最近三个月未修改过的文件进行压缩备份 - 2020-01-07
案例:使用 Python 批量给文件名加序号 - 2020-01-05
Python 函数与函数的自定义 - 2020-01-05
Python 收邮件、读邮件、标记已读和删除邮件 - 2020-01-04
- 文章评论 -
- 最新评论[0条评论] -
版权所有©逍遥峡谷 - 星际中心超自然局·地球总部 | 冀ICP备06033848号
Copyright©Interstellar Central Occult Agency (I.C.O.A)
本局纯属虚构,如有雷同,纯属巧合
网络违法犯罪举报