前言

flink 相关学习,资料来源于网络
Flink中文社区:https://doc.flink-china.org/i...
Flink官方网站:https://flink.apache.org/
简书上的翻译:https://www.jianshu.com/u/e7c...
教程:https://ke.qq.com/course/list...

1、Flink 简介

clipboard.png
备注:迭代计算用于机器学习相关

clipboard.png

clipboard.png

备注:
1、流处理
2、批处理
3、机器学习
4、图计算

2、flink 组件

mapreduce:包含map 和reduce两个阶段
storm:包含spout bolt
flink:包含:DataSource,Transformations,Data Sink

clipboard.png

3、流式处理和批处理

clipboard.png

Storm: 流式处理
Spark: 批处理
MapReduce: 批处理

clipboard.png

Spark Streaming:
批处理之上的流式处理,一个batch,如果每个数据单元经过1处理,然后放到2中的缓存,缓存中有一个数据,3就取数据然后处理
clipboard.png
Flink:
clipboard.png

对比如下:
clipboard.png

4、应用场景

clipboard.png


dhxx
37 声望19 粉丝

中间件相关