Scrapy CloseSpider 异常是否仍然重定向到用户定义的管道关闭程序?
Does the Scrapy CloseSpider exception still redirect to a user-defined pipeline shutdown procedure?
在我引发 Scrapy 异常 CloseSpider 之后,我希望在退出之前通过 Scrapy 执行我的管道程序来正常关闭。
这是自然而然的吗?还是立即终止所有脚本?
因为关闭所有排队的项目需要时间 - 我认为实施失败了。它确实经历了所有正常的关闭过程,包括完成已抓取项目的管道程序。
在我引发 Scrapy 异常 CloseSpider 之后,我希望在退出之前通过 Scrapy 执行我的管道程序来正常关闭。
这是自然而然的吗?还是立即终止所有脚本?
因为关闭所有排队的项目需要时间 - 我认为实施失败了。它确实经历了所有正常的关闭过程,包括完成已抓取项目的管道程序。