Scrapy 启用项目管道
Scrapy enabling item pipeline
如果我在与蜘蛛相同的文件中定义 ItemPipeline class,如何启用项目管道。
我尝试了以下但没有用。谢谢
process = CrawlerProcess(settings={
'ITEM_PIPELINES': {'ItemPipeline': 100}
})
不确定它是否有效,但您可以尝试 filename.ItemPipeline
。
您需要提供 class.
的完整导入路径
例如,如果您的蜘蛛文件位于 myproject/spiders/myspider.py
,请使用 myproject.spiders.myspider.ItemPipeline
。
如果我在与蜘蛛相同的文件中定义 ItemPipeline class,如何启用项目管道。 我尝试了以下但没有用。谢谢
process = CrawlerProcess(settings={
'ITEM_PIPELINES': {'ItemPipeline': 100}
})
不确定它是否有效,但您可以尝试 filename.ItemPipeline
。
您需要提供 class.
的完整导入路径例如,如果您的蜘蛛文件位于 myproject/spiders/myspider.py
,请使用 myproject.spiders.myspider.ItemPipeline
。