Scrapy 框架
Scrapy 是一个功能很强大的爬虫框架。
官方文档:
https://docs.scrapy.org/en/latest/
https://scrapy-chs.readthedocs.io/zh_CN/latest/intro/overview.html
安装命令:
pip install scrapy -i https://pypi.douban.com/simple
不过很有可能会安装 Scrapy 失败。一般出现错误的都是 Twised 安装失败,提示:Running setup.py install for Twisted ... error 错误。
我们可以手动下载 Twisted 再安装。
下载地址:http://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted
根据自己 Python 版本下载对应版本安装(如果你的Python是最新的,选择最新版就可以了)
然后命令行进入刚才这个文件的下载目录,然后运行下面命令进行安装。
pip install Twisted-19.10.0-cp38-cp38-win_amd64.whl
其中 Twisted-19.10.0-cp38-cp38-win_amd64.whl 是你下载的文件名。
成功安装Twisted之后,再运行pip命令安装 Scrapy,就可以安装成功了。
更多Python日志点击:Python学习日志目录
下一篇:Python 数据分析第三方库 Numpy 的安装和使用
- 相关文章 -
Python 函数与函数的自定义 - 2020-01-05
Python 收邮件、读邮件、标记已读和删除邮件 - 2020-01-04
Python 使用 yagmail 模块发送邮件 - 2020-01-04
Python 学习日志目录(持续更新中) - 2020-01-04
案例:Python glob模块和os模块 查找文件 - 2020-01-01
案例:Python os.listdir() 小练习 - 2020-01-01
Python 第三方库、模块安装和卸载方法以及国内镜像 - 2019-12-30
Python 使用openpyxl模块编辑 Excel 表格 - 2019-12-25
- 文章评论 -
- 最新评论[0条评论] -
版权所有©逍遥峡谷 - 星际中心超自然局 · 地球总部 |
逍遥峡谷 ·
酷品优选
Copyright©Interstellar Central Occult Agency (I.C.O.A)
本局纯属虚构,如有雷同,纯属巧合