scrapy

如何在一个Scrapy项目中同时运行多个spiders进行长尾词抓取？

本文共计606个文字，预计阅读时间需要3分钟。创建Scrapy项目后，若需让多个爬虫同时运行而非顺序运行，可以在spiders目录的同级目录下创建一个commands目录，并在该目录中创建一个名为c的文件。一般创建了scrapy文件夹后，可