python requests 爬虫监控工具?

王胖胖
  • 29

各位老铁好,问一下有没有一种工具,可以监控爬虫进程状态,如运行,停止,进程个数,数据质量,收集日志等
最好是web界面的。
我的爬虫都是requests+多进程写的,想找一个监控工具,监控我的爬虫。
如果是scrapy,可能会用scrapyd来监控状态。requests这种如何监控呢。
监控界面如下图
图片描述

回复
阅读 2.3k
撰写回答
你尚未登录,登录后可以
  • 和开发者交流问题的细节
  • 关注并接收问题和回答的更新提醒
  • 参与内容的编辑和改进,让解决方法与时俱进
宣传栏