在不将其转换为 Pandas 的情况下绘制 Spark Dataframe 的方法

Question

有什么方法可以在不将数据帧转换为熊猫的情况下绘制来自 Spark 数据帧的信息？

做了一些在线研究，但似乎找不到方法。我需要自动将这些图保存为 .pdf，因此无法使用 databricks 的内置可视化工具。

现在，这就是我正在做的（例如）：

 # df = some Spark data frame
df = df.toPandas()
df.plot()
display(plt.show())

我想在不将我的数据框转换为熊猫数据框的情况下生成折线图、直方图、条形图和散点图。谢谢！

原文由 KikiNeko 发布，翻译遵循 CC BY-SA 4.0 许可协议

Answer 1

显示功能只有databricks kernel notebook有，spark没有

原文由 Gravity 发布，翻译遵循 CC BY-SA 4.0 许可协议