kafka 客户端消费过慢

现在有个topic 队列里面的数据快速增加的时候客户端消费能力跟不上造成数据的积压,现在的扩展方案是增加了消费者但是都是属于同一个group下面的,查看了下数据还是有很多,我的分区数量是大于consumer 的数量的,想问下有什么好的方法可以提升消费速度,

阅读 12.9k
2 个回答
  1. 消费逻辑开多线程

  2. 加机器,加partition

  3. 消费跟不上生产, 看下消费逻辑在什么地方耗时比较高,一味地加机器或者加partition不能根本解决问题的

新手上路,请多包涵

消费逻辑开多线程。必然会用到线程池,机器重启的时候,消息会丢失

撰写回答
你尚未登录,登录后可以
  • 和开发者交流问题的细节
  • 关注并接收问题和回答的更新提醒
  • 参与内容的编辑和改进,让解决方法与时俱进
推荐问题