在PyCharm内部运行Scrapy项目

刚刚接触 scrapy,发现一切的scrapy项目的运行都是在命令行进行的,虽然说调试的时候也很方便,但是每次打开项目去运行都需要打开命令行进入到项目目录里面再去运行,我个人认为这是比较繁琐的。然后就去寻找其他办法,看看有没有就像在PyCharm里面的小项目一样可以直接在PyCharm内部调试运行的方法

我百度过之后发现在命令行运行其实是调用了 ...\Python36\Lib\site-packages\scrapy 路径中的 cmdline.py

换句话说也就是命令行中运行的

scrapy crawl run_quotes

就相当于在命令行中执行了

...\Python36\Lib\site-packages\scrapy\cmdline.py crawl run_quotes

测试:打开pycharm运行

from scrapy.cmdline import execute

execute()

运行结果:

打开命令行:

我们打开...\Python36\Lib\site-packages\scrapy 路径中的 cmdline.py看一下

也就是说其实程序调用的是 cmdline.py模块中的 execute方法

然后我们打开pycharm 以在命令行运行scrapy的方式在spiders的父级目录新建一个运行 scrapy项目的启动文件(名字看心情)

然后写入代码

from scrapy.cmdline import execute

# execute(argv=['scrapy', 'crawl', 'quotes'])
execute('scrapy crawl quotes'.split())

然后直接运行就可以了

猜你喜欢

转载自blog.csdn.net/qq_39377418/article/details/89306974