使用 StringBuilder 将字符串数组列表转换为 CSV 文件的省时方法？

Question

我有一个字符串数组列表，需要将其有效写入 CSV 文件。我试过下面两种方法。

数据集是一个至少有 100 万条记录的文件。 IE。 returnedList 至少有 100 万个 String[] 数组。

我当前的代码非常低效，并且使用 StringBuilder 花费的时间太长：

BufferedWriter br = new BufferedWriter(new FileWriter(filePath + "test.csv"));

for(String[] listEntry : returnedList) {
  // convert each array to a string first
  for(String s : listEntry) {
    builder.append(s);
  }
  String str = builder.toString();
  br.write(str);
  br.newLine();
}
br.close();
assertThat(newFirstRow).isNotEmpty();

我的第二次尝试是使用 OpenCsv API:

Writer writer = Files.newBufferedWriter(Paths.get(filePath + "test.csv"));
StatefulBeanToCsv<String[]> beanToCsv = new StatefulBeanToCsvBuilder(writer)
        .withQuotechar(CSVWriter.NO_QUOTE_CHARACTER)
        .build();
beanToCsv.write(returnedList);

此方法失败，不知何故，插入文件的所有记录都是空的。

我是否错误地使用了 OpenCsv 库？

Answer 1

不要使用 StringBuilder。 BufferedWriter 的工作原理是将数据存储在主内存中，并在需要时将其刷新到磁盘上，从而避免了频繁的网络传输。你能试试下面的代码吗？

for(String[] listEntry : returnedList) {
  for(String s : listEntry) {
    br.append(s);
  }
  br.flush(str);
  br.newLine();
}
//If memory constrain allows Flush everything in one go here and close instead of doing flush() in for loop
br.close();

使用 StringBuilder 将字符串数组列表转换为 CSV 文件的省时方法？

Time efficient way to convert List of String Arrays into CSV file using StringBuilder?

java

opencsv

export-to-csv