想在on_finished时重新抓取,运行正常但经常无故暂停(非pause状态),点击run又可以正常运行,请问是什么原因呢?
代码逻辑如下:
def on_start(self):
self.crawl(self.baseUrl, callback=self.index_page, force_update=True)
def on_finished(self, response, task):
self.on_start()`
想在on_finished时重新抓取,运行正常但经常无故暂停(非pause状态),点击run又可以正常运行,请问是什么原因呢?
代码逻辑如下:
def on_start(self):
self.crawl(self.baseUrl, callback=self.index_page, force_update=True)
def on_finished(self, response, task):
self.on_start()`