有些时候不知道自己的提取规则不知道是否正确,每次运行都要等待一段时间,这是一个很麻烦的事情,因此Scrapy提供了一个shell用来方便测试规则,也不仅仅局限于测试之用

打开Scrapy Shell:

打开cmd终端,进入Scrapy项目的目录,然后进入到scrapy框架所在的虚拟环境中,输入命令scrapy shell [链接]

使用4.7的项目代码为例:

1、进入爬虫目录

2、打开shell并输入需要测试的URL

3、进入shell后,输入测试命令,和代码中一样