spark提交任务的运行机制?

使用sparkContext而不是sparkStream上下文

在获取数据源,处理数据,打印或输出一系列操作后

sc.stop()结束上下文

对于这样的一个job,使用spark-submit提交到集群后

它是只运行一次的还是会运行完了驻留在任务集群中?

阅读 850
撰写回答
你尚未登录,登录后可以
  • 和开发者交流问题的细节
  • 关注并接收问题和回答的更新提醒
  • 参与内容的编辑和改进,让解决方法与时俱进
推荐问题