日志收集并解析

新手上路,请多包涵

初学大数据,首当其冲的学习了日志收集(主要是flume),搜索了相关日志收集架构方案,如果是flume的话,大多数建议并支持flume + kafka,作为初学者的我,不甚理解,一个是分布式日志收集系统,一个是作为MQ,为什么会这么结合使用?还希望大神前辈们为我解惑,感激不尽。
此外,日志如果收集到了,还需要后续分析处理,求推荐分析一般用什么技术。

阅读 2.2k
1 个回答

其实你可以了解一下,另一个很有名的搭配,ELK,或许会让你对日志收集有一定的理解。

既然引用了MQ,那么生产者消费者模型也可以了解一下。

撰写回答
你尚未登录,登录后可以
  • 和开发者交流问题的细节
  • 关注并接收问题和回答的更新提醒
  • 参与内容的编辑和改进,让解决方法与时俱进