python 爬虫框架scrapy的安装以及基本操作

scrapy是什么?:     

      scrapy是为了爬取网站数据的应用框架,当你需要从网站上回去信息,但该网站没有提供apl(应用程序接口,他是提供给用户来编程的)或者通过程序获取信息的机制时,scrapy可以帮助你。scrapy不仅包含了爬虫的特性,还可以将爬虫数据保存到CSV,json等文件中。

serapy的安装:

按下window键搜索anaconda输入:conda install scrapy    如图:

 

 

 

 第二种安装方式在终端上输入:pip install scrapy

如果安装不成功就需要下载scrapy的whl包,下载地址,

扫描二维码关注公众号,回复: 2571472 查看本文章

根据你的python版本安装相应包,我的python版本是3.6   cp36是python3.6的意思 amd32是python位数

 

将下载好的包拖到桌面在终端上输入以下命令:

 

 

 

 以上就是scrapy的安装,安装好了就可以进行一些操作了。以下是我的例子

先在桌面创建一个文件夹,在里面再建一个文件夹,并在pycharm中打开,然后打开终端在终端里输入以下代码

接下来继续看图:

 未完待续,我要睡觉了。

猜你喜欢

转载自blog.csdn.net/crq_zcbk/article/details/81346738