Spark Streaming遇到问题分析

2017-07-17
阅读 12 分钟
12.3k
先看看Spark Streaming 的 JobSet, Job,与 Spark Core 的 Job, Stage, TaskSet, Task 这几个概念。

Spark Streaming学习笔记

2017-06-30
阅读 17 分钟
10.9k
Spark Streaming支持从多种数据源提取数据,如:Kafka、Flume、Twitter、ZeroMQ、Kinesis以及TCP套接字,并且可以提供一些高级API来表达复杂的处理算法,如:map、reduce、join和window等。