使用 nzsql 将数据导出到 CSV

Question

我想从 netezza 将数据导出为 CSV。数据由数百万行记录组成。数据应在引号内，并应以 ^ 作为分隔符。例如："a"^"b"^"c"

Answer 1

无论何时要从 Netezza 导出数据，都需要使用其外部 tables 功能。

如果要导出到本地安装到 Netezza 主机的文件系统，您可以使用：

CREATE external TABLE '/tmp/test_export.txt' USING (delimiter '^') AS
SELECT *
FROM test_export;

如果您通过 Aginity Workbench 等工具通过 JDBC、ODBC 或 OLE-DB 连接到 Netezza，并希望将数据本地导出到您的工作站，您可以使用以下命令：

CREATE external TABLE 'c:\test_export.txt' USING (delimiter '^' remotesource odbc) AS
SELECT *
FROM test_export;

遗憾的是，没有外部 table 选项允许您也将每一列用引号引起来。您将必须通过 SQL 中的连接明确地执行此操作，如下所示：

CREATE external TABLE 'c:\test_export.txt' USING (delimiter '^' remotesource odbc) AS
SELECT  '"' || col1 || '"',
        '"' || col2 || '"'
FROM test_export;

您也可以使用带有以下选项的 nzsql CLI 界面来实现类似的功能，但速度要慢一些。例如，在我的系统上，使用外部 table 方法导出大约 200 万行，创建一个大小约为 3.5 GB 的导出文件，需要 20 秒。使用 CLI 方法需要 3 大约 180 秒。

nzsql -d DB_NAME -F "^" -t -A -o export.txt  -c "select * from test_export"

使用 nzsql 将数据导出到 CSV

Export data to CSV using nzsql

shell

netezza