Spark: 如果我想使用美元号来表示数据列,应该引入哪个包?

我看到文档里写 Spark 中可以用 $"name" 的形式表示 name 这一列。

我的代码类似这样的:

initialDataFrame.join(broadcast(usersToKeep), $"userID" === $"userID_")

但是编译错误,提示我:

value $ is not a member of StringContext

我应该引入哪个包才能使用这种语法?

PS:我用的 spark 版本是 1.5,scala 版本是 2.10.4

阅读 4k
1 个回答

spark2.0下面:参考

import spark.implicits._

老版本(未亲测)

import sqlContext.implicits._
撰写回答
你尚未登录,登录后可以
  • 和开发者交流问题的细节
  • 关注并接收问题和回答的更新提醒
  • 参与内容的编辑和改进,让解决方法与时俱进