scrapy添加新命令

  • COMMANDS_MODULE允许开发者自定义命令,假设工程名字为properties,在工程的根目录有一个hi.py文件内容如下:

    from scrapy.commands import ScrapyCommand
    class Command(ScrapyCommand):

       default_settings = {'LOG_ENABLED': False}
       def run(self, args, opts):
           print("hello")
    

在settings.py文件里设置COMMANDS_MODULE = 'properties.hi' ,就可以在Scrapy的帮助中看到这个命令,运行时用scrapy hi。自定义命令的默认设置default_settings会和工程的设置合并到 一起,但是相比在settings.py文件里和命令行定义的设置优先级要低。

如果需要自定义多个命令,则可以在工程的根目录下建立一个文件夹,又如commands,里面放一些类似上面hi.py文件的命令,然后设置COMMANDS_MODULE = 'properties.commands即可

    原文作者:zzZ摇篮曲
    原文地址: https://segmentfault.com/a/1190000016234008
    本文转自网络文章,转载此文章仅为分享知识,如有侵权,请联系博主进行删除。
点赞