spark sql和hive的问题?

wxmimperio
  • 720

看到spark sql兼容hive,并有一个hive on spark的项目

那完全使用spark sql自己的解析,和hive on spark 让hive借助spark运行有什么不同?

哪个更高效?

hive是否能提供比spark sql原生更好的sql支持,是否需要学习hive语法?

回复
阅读 4.9k
1 个回答

总体上差不太多,hive on spark只是相当于给hive提供了一个新的计算引擎,将hive的sql解析成spark的DAG去计算。spark sql也差不多。不过,hive在sql上的优势是可以直接利用 hive cli 来进行交互操作,比起spark sql要方便不少。

撰写回答
你尚未登录,登录后可以
  • 和开发者交流问题的细节
  • 关注并接收问题和回答的更新提醒
  • 参与内容的编辑和改进,让解决方法与时俱进
宣传栏