如何避免在 spark saveAsHadoopFile() 中生成 .crc 文件？
How to avoid generating .crc file in spark saveAsHadoopFile()?
在 java - apache spark 中使用 saveAsHadoopFile 方法时是否有任何配置可以关闭生成 .crc 文件？
我在独立模式下使用 Apache Spark 1.6.2 和运行我的应用程序。
我没有找到任何方法来避免在使用 saveAsHadoopFile() 方法时创建 .crc 文件。
因此我写了一个实用程序来删除那些不需要的 .crc 和 .SUCCESS 文件。
在 java - apache spark 中使用 saveAsHadoopFile 方法时是否有任何配置可以关闭生成 .crc 文件？
我在独立模式下使用 Apache Spark 1.6.2 和运行我的应用程序。
我没有找到任何方法来避免在使用 saveAsHadoopFile() 方法时创建 .crc 文件。 因此我写了一个实用程序来删除那些不需要的 .crc 和 .SUCCESS 文件。