检查一下两个任务中生成的taskid,如果taskid相同的话,pyspider会认为这是同一个任务,只会爬取一次,在脚本中覆盖get_taskid方法来配置不同的taskid。
2.3k 阅读
1 回答3.1k 阅读
1 回答2k 阅读
1 回答2.3k 阅读✓ 已解决
1 回答4.2k 阅读✓ 已解决
检查一下两个任务中生成的taskid,如果taskid相同的话,pyspider会认为这是同一个任务,只会爬取一次,在脚本中覆盖get_taskid方法来配置不同的taskid。