PHP:file_get_contents 的大量请求
PHP: large amount of requests with file_get_contents
我目前有一个数据库 table,里面装满了组织编号 [10.02 亿行]。
现在,我要做的是从远程网站 API 获取组织的 phone 编号。我已经开始工作了,但是在对 API 发出 30-50 次左右的请求之后,我没有看到 table 有任何新的变化,我正在插入 phone 数字。我还有 100 万 ++ 行可以从中获取 phone 数字,但我似乎只能获取少量行。
在此先感谢您的帮助。
我不知道这是否有帮助,但这是我用来执行此操作的代码。
// Remove timeout limit
// This is going to take alot of time!
set_time_limit(0);
// Initialize...
include $_SERVER['DOCUMENT_ROOT'] . '/core/Init.php';
// Profiles
$url = 'http://finnrett.no/API/business/get/quickresults?q=';
$profile_url = 'http://finnrett.no/API/business/get/profile?id=';
// Select names
$sql = 'SELECT organisasjonsnummer FROM brreg ORDER BY id LIMIT 10000';
$result = $Dbh -> query($sql, []);
// Each name
foreach ($result as $orgnr) {
// Pre for output explananation
echo'<pre>';
// Grab json from quick results url
$bedrift = json_decode(file_get_contents($url.$orgnr['organisasjonsnummer']));
$ID = get_object_vars($bedrift[0])['ID'];
$profile = json_decode(file_get_contents($profile_url.$ID));
$CONTACT = get_object_vars($profile);
$number = $CONTACT['contact'] ? $CONTACT['contact']: '0';
$sql = 'INSERT INTO profiles (orgnr, telefon) VALUES (:orgnr, :telefon)';
$args = ['orgnr' => $orgnr['organisasjonsnummer'], 'telefon' => $number];
if (!$Dbh -> query($sql, $args)) {
echo 'Sjekk opp org: ' . $orgnr['organisasjonsnummer'] . ' fordi her skjedde det noe galt.';
}
}
看起来我通过选择 curl 而不是 file_get_contents 解决了这个问题。
通过切换到 curl
instead of file_get_contents()
解决了它
我目前有一个数据库 table,里面装满了组织编号 [10.02 亿行]。
现在,我要做的是从远程网站 API 获取组织的 phone 编号。我已经开始工作了,但是在对 API 发出 30-50 次左右的请求之后,我没有看到 table 有任何新的变化,我正在插入 phone 数字。我还有 100 万 ++ 行可以从中获取 phone 数字,但我似乎只能获取少量行。
在此先感谢您的帮助。
我不知道这是否有帮助,但这是我用来执行此操作的代码。
// Remove timeout limit
// This is going to take alot of time!
set_time_limit(0);
// Initialize...
include $_SERVER['DOCUMENT_ROOT'] . '/core/Init.php';
// Profiles
$url = 'http://finnrett.no/API/business/get/quickresults?q=';
$profile_url = 'http://finnrett.no/API/business/get/profile?id=';
// Select names
$sql = 'SELECT organisasjonsnummer FROM brreg ORDER BY id LIMIT 10000';
$result = $Dbh -> query($sql, []);
// Each name
foreach ($result as $orgnr) {
// Pre for output explananation
echo'<pre>';
// Grab json from quick results url
$bedrift = json_decode(file_get_contents($url.$orgnr['organisasjonsnummer']));
$ID = get_object_vars($bedrift[0])['ID'];
$profile = json_decode(file_get_contents($profile_url.$ID));
$CONTACT = get_object_vars($profile);
$number = $CONTACT['contact'] ? $CONTACT['contact']: '0';
$sql = 'INSERT INTO profiles (orgnr, telefon) VALUES (:orgnr, :telefon)';
$args = ['orgnr' => $orgnr['organisasjonsnummer'], 'telefon' => $number];
if (!$Dbh -> query($sql, $args)) {
echo 'Sjekk opp org: ' . $orgnr['organisasjonsnummer'] . ' fordi her skjedde det noe galt.';
}
}
看起来我通过选择 curl 而不是 file_get_contents 解决了这个问题。
通过切换到 curl
instead of file_get_contents()