Databricks 将 pandas 数据框保存为 CSV Azure Data Lake
Databrics save pandas dataframe as CSV Azure Data Lake
我在 Azure Databricsk 中有 pandas 数据框。
我需要将其保存为 Azure Data Lake gen2 上的一个 csv 文件。
我试过：
df.write.mode("overwrite").format("com.databricks.spark.csv").option("header","true").csv(dstPath)
和
df.write.format("csv").mode("overwrite").save(dstPath)
但现在我有 10 个 csv 文件，但我需要一个文件并命名它。
提前致谢。
我找到了解决方案：
df.to_csv('/dbfs/mnt/....../df.csv', sep=',', header=True, index=False)
我在 Azure Databricsk 中有 pandas 数据框。 我需要将其保存为 Azure Data Lake gen2 上的一个 csv 文件。
我试过：
df.write.mode("overwrite").format("com.databricks.spark.csv").option("header","true").csv(dstPath)
和
df.write.format("csv").mode("overwrite").save(dstPath)
但现在我有 10 个 csv 文件，但我需要一个文件并命名它。
提前致谢。
我找到了解决方案：
df.to_csv('/dbfs/mnt/....../df.csv', sep=',', header=True, index=False)