kafka 的文章 - SegmentFault 思否

0

kafka 集群测试与socket api

北风之神 4月9日发布于 self.文章
收藏

本文不是讲怎么用kafka，是讲它运行时调用哪些核心标准c函数,属于底层基础知识。程序源码java/py/node/go/rust/php/c++这些语言编写的ascii文本文件我们称为源码程序大部分已经经过语言处理器【如编译器】处理...

0

Kafka概述

BrandonH 4月5日发布于 self.文章
收藏

解耦：允许你独立修改和扩展两边的处理过程，只要他们遵循相同的接口规范可恢复性：系统的一部分组件失效后，不会影响到整个系统。消息队列降低了进程之间的耦合度，所以即使一个处理消息的进程挂掉后，加入到队...

0

本地使用Docker部署kafka

BrandonH 4月4日发布于 self.文章
收藏

本地Kafka部署教程工作目录mkdir onlineinternshipcd onlineinternship准备docker-composeKAFKA_ADVERTISED_LISTENERS 为客户端调用kafka时使用的端口可以是localhost（也就是127.0.0.1），也可以是本机局域网IP...

0

Kafka又出问题了！

冰河 4月3日发布于 self.文章
收藏

估计运维年前没有祭拜服务器，Nginx的问题修复了，Kafka又不行了。今天，本来想再睡会，结果，电话又响了。还是运营，“喂，冰河，到公司了吗？赶紧看看服务器吧，又出问题了“。“在路上了，运维那哥们儿还没上班吗...

5

精心整理！面试必问的 kafka 知识点

民工哥 4月2日发布于民工哥技术之路
3 收藏

上面是传统的消息队列，比如一个用户要注册信息，当用户信息写入数据库后，后面还有一些其他流程，比如发送短信，则需要等这些流程处理完成后，再返回给用户。而新式队列，比如一个用户注册信息，数据直接丢进数...

0

搭建基于 docker 的 Kafka 集群及 Spring Boot 应用访问

bitkylin 3月27日发布于比特麒麟的全栈之路
收藏

需求搭建一个 3 节点 kafka 集群，测试功能和性能实现 Spring kafka 下对 kafka 集群的操作一、搭建精简版 kafka 集群参考排名第一的 kafka 镜像 wurstmeister/kafka 的官方文档，进行如下操作：创建 docker-comp...

0

Kafka(4)-kafka生产环境规划部署

startshineye 3月27日发布于 self.文章
收藏

我们上一节讲解了Kafka架构-底层原理:从基础的partition里面的offset引申到LEO和HW;以及对于Leader partition跟follower partition而言,他们的LEO跟HW是如何更新的的？以及高水位HW在leader选举切换时候，存在的...

0

Kafka 性能篇：为何 Kafka 这么快？

码哥字节 3月24日发布于 self.文章
收藏

『码哥』的 Redis 系列文章有一篇讲透了 Redis 的性能优化 ——《Redis 核心篇：唯快不破的秘密》。深入地从 IO、线程、数据结构、编码等方面剖析了 Redis “快”的内部秘密。65 哥深受启发，在学习 Kafka 的过程中，...

0

Kafka(3)-kafka架构-底层原理

startshineye 3月22日发布于 self.文章
收藏

我们上一节讲解了Kafka架构-基本原理，主要是降级了kafka的高性能，高可用，分布式存储，负载均衡故障感知。这一节主要讲解下kafka架构-底层原理。高可用底层实现:Partition中核心offset：LEO、HW;以及LEO跟HW如...

0

Kafka(2)-kafka架构-基本原理

startshineye 3月20日发布于 self.文章
收藏

上一讲解我们讲解了kafka的具备的一些特点：相比于传统的消息队列来说，kafka可以做到分布式存储，具备高可用，高性能的特点，我们这一讲主要讲解：Kafka实现高性能、高可用、分布式存储的的基本原理。主线主要从...

0

Kafka(1)-Kafka基本术语

startshineye 3月19日发布于 self.文章
收藏

业界已有的消息队列系统，在扩展性、可靠性、资源利用率和吞吐率方面存在明显不足，故LinkedIn团队开始尝试设计一款新的消息队列系统，进而诞生了Kafka消息队列系统。源软件Kafka的应用越来越广泛。

0

带你轻松了解任务运维和数据指标相关的使用

数栈DTinsight 3月18日发布于 self.文章
收藏

一、实时开发常见问题1、一个实时计算任务该分配多少资源？建议：一些简单ETL任务，并且源数据流量在一定范围内， tm个数1、全局并行度1、内存1G。分析： {代码...} 2、为什么写入Kafka结果中有些分区没有数据？...

0

四款面向高并发、海量级分布式存储的分布式架构对比

读字节 3月14日发布于读字节
收藏

首先redis采用去中心化的设计这个理解是不到位的。redis分布式的模式，具有主从和集群两种，redis社区的集群方案redis cluster采用的是去中心化设计。我们先看看redis的演化过程：

0

Kafka Connect 实战 ---- 入门

殷天文 3月11日发布于 Java开发指北
收藏

Kafka Connect 是一款可扩展并且可靠地在 Apache Kafka 和其他系统之间进行数据传输的工具。可以很简单的定义 connectors（连接器）将大量数据迁入、迁出Kafka。

0

数据采集组件：Flume基础用法和Kafka集成

知了一笑 3月5日发布于 self.文章
收藏

Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统，Flume支持在日志系统中定制各类数据发送方，用于收集数据；