有什么方法可以在不将数据帧转换为熊猫的情况下绘制来自 Spark 数据帧的信息?
做了一些在线研究,但似乎找不到方法。我需要自动将这些图保存为 .pdf,因此无法使用 databricks 的内置可视化工具。
现在,这就是我正在做的(例如):
# df = some Spark data frame
df = df.toPandas()
df.plot()
display(plt.show())
我想在不将我的数据框转换为熊猫数据框的情况下生成折线图、直方图、条形图和散点图。谢谢!
原文由 KikiNeko 发布,翻译遵循 CC BY-SA 4.0 许可协议
显示功能只有databricks kernel notebook有,spark没有