一次 MERGE INTO 多个语句 Oracle SQL

Question

我有一个 merge into 语句：

   private static final String UPSERT_STATEMENT = "MERGE INTO " + TABLE_NAME + " tbl1 " +
    "USING (SELECT ? as KEY,? as DATA,? as LAST_MODIFIED_DATE FROM dual) tbl2 " +
    "ON (tbl1.KEY= tbl2.KEY) " +
    "WHEN MATCHED THEN UPDATE SET DATA = tbl2.DATA, LAST_MODIFIED_DATE = tbl2.LAST_MODIFIED_DATE " +
    "WHEN NOT MATCHED THEN " +
    "INSERT (DETAILS,KEY, DATA, CREATION_DATE, LAST_MODIFIED_DATE) " +
    "VALUES (SEQ.NEXTVAL,tbl2.KEY, tbl2.DATA, tbl2.LAST_MODIFIED_DATE,tbl2.LAST_MODIFIED_DATE)";

这是执行方法：

 public void mergeInto(final JavaRDD<Tuple2<Long, String>> rows) {
    if (rows != null && !rows.isEmpty()) {
        rows.foreachPartition((Iterator<Tuple2<Long, String>> iterator) -> {

            JdbcTemplate jdbcTemplate = jdbcTemplateFactory.getJdbcTemplate();
            LobCreator lobCreator = new DefaultLobHandler().getLobCreator();

            while (iterator.hasNext()) {
                Tuple2<Long, String> row = iterator.next();
                String details = row._2();
                Long key = row._1();

                java.sql.Date lastModifiedDate = Date.valueOf(LocalDate.now());
                Boolean isSuccess = jdbcTemplate.execute(UPSERT_STATEMENT, (PreparedStatementCallback<Boolean>) ps -> {

                    ps.setLong(1, key);
                    lobCreator.setBlobAsBytes(ps, 2, details.getBytes());
                    ps.setObject(3, lastModifiedDate);
                    return ps.execute();
                });
                System.out.println(row + "_" + isSuccess);

            }
        });
    }
}

我需要在 PLSQL 中插入多个此语句，如果可能，批量插入 10K。

节省时间的有效方法是什么：一次执行 10K 条语句，或者如何在同一事务中执行 10K 条语句？
我应该如何更改支持方法？

谢谢，我

Answer 1

最有效的方法是批量加载您的数据到数据库中。与逐一上传（如您的示例）相比，我预计性能提升至少 1 或 2 个数量级（"bigger" 数据意味着通过批量插入获得的收益更少）。
您可以使用 this answer 中描述的技术将您的记录批量插入到临时 table 中，然后执行单个使用临时 table.

一次 MERGE INTO 多个语句 Oracle SQL

MERGE INTO multiple statements at once Oracle SQL

sql

oracle

bulk-operations

apache-spark

apache-spark-sql