php mysql select 在同一服务器的不同数据库上插入
php mysql select insert on different DBs in same server
我在同一台服务器上有两个数据库。 db1 中的 Table1 有 11 列,大约 800 万行数据。我想将四列的 table1 数据(即 4 列 x 800 万行)插入到 db2 的 table2 中。
我在下面的脚本中使用 php 进行了尝试,首先选择 db1.table1 中的所有内容,然后将结果插入 while 循环中。
但是 -- 根据插入 10,000 行的实验(耗时 7 分钟),我认为将所有 800 万行放入 db2.table2 需要 12 小时。我的方法看起来效率极低,但看看:
<?php
/////////// set up connections to db1 and db1
$link = new mysqli('localhost', 'root', '', 'db1');
/////////// query to get data from db1/table1
$sql1 = "select * from db1.table1";
$sql1_result = mysqli_query($link, $sql1) or die ("sql1 failed: " . mysqli_error());
/////////// turn data from db1.table1 into php variables
while ( $row = mysqli_fetch_assoc($sql1_result))
{
extract($row);// gives 8 million rows, each containing 11 pieces of data
/////////// connect to database db2
$link->select_db('db2');
/////////// put query results into db2
$sql2 = "insert ignore into db2.table2 (field4, field5, field6, field7)
values ('$field4', '$field5', '$field6', '$field7')";
$sql2_result = mysqli_query($link, $sql2) or die ("sql2 failed: " . mysqli_error());
}
?>
经过研究,我想知道是否执行 INSERT INTO SELECT 会更快更有效,但我不知道如何处理两个数据库连接。
有什么想法吗?
如果您的连接对两个数据库都有权限,则不需要有两个连接。数据库连接是与服务器的连接,而不是与特定数据库的连接(尽管您可以 select 连接中的默认数据库)。
你可以做的是在一个连接中正常插入SELECT:
insert ignore into db2.table2 (field4, field5, field6, field7)
select field4, field5, field6, field7
from db1.table1;
这种执行是在数据库服务器中完成的,无需将数据移动到 PHP(并返回)。
我在同一台服务器上有两个数据库。 db1 中的 Table1 有 11 列,大约 800 万行数据。我想将四列的 table1 数据(即 4 列 x 800 万行)插入到 db2 的 table2 中。
我在下面的脚本中使用 php 进行了尝试,首先选择 db1.table1 中的所有内容,然后将结果插入 while 循环中。
但是 -- 根据插入 10,000 行的实验(耗时 7 分钟),我认为将所有 800 万行放入 db2.table2 需要 12 小时。我的方法看起来效率极低,但看看:
<?php
/////////// set up connections to db1 and db1
$link = new mysqli('localhost', 'root', '', 'db1');
/////////// query to get data from db1/table1
$sql1 = "select * from db1.table1";
$sql1_result = mysqli_query($link, $sql1) or die ("sql1 failed: " . mysqli_error());
/////////// turn data from db1.table1 into php variables
while ( $row = mysqli_fetch_assoc($sql1_result))
{
extract($row);// gives 8 million rows, each containing 11 pieces of data
/////////// connect to database db2
$link->select_db('db2');
/////////// put query results into db2
$sql2 = "insert ignore into db2.table2 (field4, field5, field6, field7)
values ('$field4', '$field5', '$field6', '$field7')";
$sql2_result = mysqli_query($link, $sql2) or die ("sql2 failed: " . mysqli_error());
}
?>
经过研究,我想知道是否执行 INSERT INTO SELECT 会更快更有效,但我不知道如何处理两个数据库连接。
有什么想法吗?
如果您的连接对两个数据库都有权限,则不需要有两个连接。数据库连接是与服务器的连接,而不是与特定数据库的连接(尽管您可以 select 连接中的默认数据库)。
你可以做的是在一个连接中正常插入SELECT:
insert ignore into db2.table2 (field4, field5, field6, field7)
select field4, field5, field6, field7
from db1.table1;
这种执行是在数据库服务器中完成的,无需将数据移动到 PHP(并返回)。