有没有办法使用 spark_write_csv 为 sparklyr 中的 csv 文件设置名称？

Question

我需要将数据框写入单个 csv 文件，发现可以使用 sdf_coalesce() 将文件变成单个分区。我想知道是否有任何方法可以更改 spark_write_csv()?

生成的 csv 文件的名称

提前致谢。

Answer 1

没有。文件名是自动生成的，在不同的任务中是唯一的，它是不可配置的。如果您想要特定的名称，您可以使用特定于正在使用的文件系统/存储解决方案的实用程序重命名输出。