python爬虫之scrapy框架安装

python爬虫之scrapy框架安装

cmd在线安装：

前提条件：ps——安装scrapy之前须提前安装好（wheel模块、pywin32模块、twisted模块）这三个模块。

1.wheel模块跟pywin32模块使用如下命令：

命令语法：pip install 模块名

pip install wheel

pip install pywin32

2.下载twisted模块：（好像twisted在线安装会报错，所以这里推荐使用离线安装！）

离线下载网址：https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted

【版本选择：python3.8就选择cp38，以此类推！系统多少位就选多少位，比如我的是64位，就要选择amd64，然后下载即可！】

3.安装twisted模块：（使用cmd命令行模式安装）

【如下：我的下载到了f盘edg下载这个文件中！安装时我们要进入这个文件夹！】

【命令行安装：使用命令——pip install  模块名】

4.安装scrapy框架:（安装该框架之前要确保前面三个已安装完毕，特别是twisted模块！如果该模块没有安装就会报错！）

命令语法：pip install scrapy 

离线安装：

离线安装下载网站：https://www.lfd.uci.edu/~gohlke/pythonlibs/#scrapy

步骤如下：（py3建议选择第第一个！）

【下载之后还是跟前面在线安装第3点（安装twisted模块）一样的操作！】