scrapy 2.3 启用媒体管道
要启用媒体管道,必须首先将其添加到项目中 ITEM_PIPELINES
设置。
对于图像管道,请使用:
ITEM_PIPELINES = {'scrapy.pipelines.images.ImagesPipeline': 1}
对于文件管道,请使用:
ITEM_PIPELINES = {'scrapy.pipelines.files.FilesPipeline': 1}
注解
您还可以同时使用文件和图像管道。
然后,将目标存储设置配置为用于存储下载的图像的有效值。否则,管道将保持禁用状态,即使将其包含在 ITEM_PIPELINES
设置。
对于文件管道,设置 FILES_STORE
设置:
FILES_STORE = '/path/to/valid/dir'
对于图像管道,设置 IMAGES_STORE
设置:
IMAGES_STORE = '/path/to/valid/dir'