Pentaho 在查询大型数据集时给出流的意外结束
Pentaho gives Unexpected End of Stream when querying a large dataset
我有一个 Pentaho 转换,它使用 Table 输入步骤读取数百万行数据。 运行几百万的时候就可以了。当我达到大约 1500 万时,我得到了 y 个字节中的意外流结束异常 x。发生这种情况时,我有几个其他 table 输入将流式传输工作正常的查找。我的主流输入没有行。我的数据库是 mariadb,我的超时设置为 8 小时(不要问 :/)。有人遇到过类似情况吗?
当我的日期范围很大时,我的查询没有在我的日期范围内使用索引。我已经强制这个索引,但仍然有同样的问题。在我的进程列表中,查询停留在 "Writing to net".
问题出在我的 MariaDB 连接器上。我将其更改为 MySQL 连接器,它运行良好。
我有一个 Pentaho 转换,它使用 Table 输入步骤读取数百万行数据。 运行几百万的时候就可以了。当我达到大约 1500 万时,我得到了 y 个字节中的意外流结束异常 x。发生这种情况时,我有几个其他 table 输入将流式传输工作正常的查找。我的主流输入没有行。我的数据库是 mariadb,我的超时设置为 8 小时(不要问 :/)。有人遇到过类似情况吗?
当我的日期范围很大时,我的查询没有在我的日期范围内使用索引。我已经强制这个索引,但仍然有同样的问题。在我的进程列表中,查询停留在 "Writing to net".
问题出在我的 MariaDB 连接器上。我将其更改为 MySQL 连接器,它运行良好。