检查一下两个任务中生成的taskid,如果taskid相同的话,pyspider会认为这是同一个任务,只会爬取一次,在脚本中覆盖get_taskid方法来配置不同的taskid。
2.4k 阅读
1 回答3.1k 阅读
1 回答2.1k 阅读
1 回答2.4k 阅读✓ 已解决
1 回答4.3k 阅读✓ 已解决
检查一下两个任务中生成的taskid,如果taskid相同的话,pyspider会认为这是同一个任务,只会爬取一次,在脚本中覆盖get_taskid方法来配置不同的taskid。