在不将其转换为 Pandas 的情况下绘制 Spark Dataframe 的方法

新手上路,请多包涵

有什么方法可以在不将数据帧转换为熊猫的情况下绘制来自 Spark 数据帧的信息?

做了一些在线研究,但似乎找不到方法。我需要自动将这些图保存为 .pdf,因此无法使用 databricks 的内置可视化工具。

现在,这就是我正在做的(例如):

 # df = some Spark data frame
df = df.toPandas()
df.plot()
display(plt.show())

我想在不将我的数据框转换为熊猫数据框的情况下生成折线图、直方图、条形图和散点图。谢谢!

原文由 KikiNeko 发布,翻译遵循 CC BY-SA 4.0 许可协议

阅读 689
1 个回答

显示功能只有databricks kernel notebook有,spark没有

原文由 Gravity 发布,翻译遵循 CC BY-SA 4.0 许可协议

撰写回答
你尚未登录,登录后可以
  • 和开发者交流问题的细节
  • 关注并接收问题和回答的更新提醒
  • 参与内容的编辑和改进,让解决方法与时俱进
推荐问题