最近一直在win下跑爬虫,一般的爬虫用requests这个模块就差不多了,但是人呀总是要不断进步的,所以我们一定要学会scrapy嘿。
但是在安装scrapy的时候往往会出现错误所以说我在这里分享下安装scrapy的基本步骤,让你在windows下一步就能安装好scrapy
1、pip install pywin32
2、pip install twisted 注意这个安装的时候也是容易出现错误所以说大家在https://www.lfd.uci.edu/~gohlke/pythonlibs/#wordcloud 轮子网站中下载就好
3、pip install scrapy