大家帮帮忙!Azkaban - 在读取HDFS路径的文件用于执行时,找错路径

新手上路,请多包涵

当我用Azkaban的spark jobtype时,execution-jar 的参数配置为 hdfs:///offline/spark/jars/test.jar,但是azkaban报错:

java.lang.Exception: java.lang.Exception: Job set up failed: execution jar is suppose to be in this folder, but the folder doesn't exist:/root/azkaban/exec/executions/15/hdfs:///offline/spark/jars

azkaban把hdfs:///当做了本地路径,不能识别是hdfs的路径,我该如何配置?很久都没解决这个问题。。。大家帮帮忙!

阅读 965
撰写回答
你尚未登录,登录后可以
  • 和开发者交流问题的细节
  • 关注并接收问题和回答的更新提醒
  • 参与内容的编辑和改进,让解决方法与时俱进