Spark如何从文件读取记录到RDD,每一行记录成为RDD的一个元素,求代码示例

Spark如何从文件读取记录到RDD,每一行记录成为RDD的一个元素,求代码示例

阅读 10.1k
2 个回答

建议去看看官方文档,rdd的生成大类可分两种方法

lines = sc.textFile(your file path)
lines.map(lambda x: x).collect()

撰写回答
你尚未登录,登录后可以
  • 和开发者交流问题的细节
  • 关注并接收问题和回答的更新提醒
  • 参与内容的编辑和改进,让解决方法与时俱进
宣传栏