用pychamn写的scrapy爬虫代码,要怎么暂停继续爬虫,在网上只找到cmd命令下的操作。 想知道是在main文件里,还是setting里写什么代码?
用pychamn写的scrapy爬虫代码,要怎么暂停继续爬虫,在网上只找到cmd命令下的操作。 想知道是在main文件里,还是setting里写什么代码?
你说到main文件,那你已经知道怎样用代码来代替命令行启动scrapy了对不对?
那其实暂停爬虫的命令也可以用代码来代替了对不对?
那也就是在程序运行中触发这个暂停的代码就可以了对不对?
那程序运行中触发一段代码就很简单了对不对?
比如判断时间,每个整点我暂停10分钟应该不难吧?
或者我在某些想暂停的地方插入个input,由用户来决定要不要暂停也可以吧?
4 回答4.4k 阅读✓ 已解决
4 回答3.8k 阅读✓ 已解决
1 回答3k 阅读✓ 已解决
3 回答2.1k 阅读✓ 已解决
1 回答4.5k 阅读✓ 已解决
1 回答3.8k 阅读✓ 已解决
1 回答2.8k 阅读✓ 已解决
虽然还是不知道怎么在pycharm里面设置停止,但是在cmd下和terminal都成功了,先将就着吧