mysql query结果集_如何解决PHP使用mysql_query查询超大结果集超内存问题
再使用mysql_query查詢超大結(jié)果集的時候會出現(xiàn)超出內(nèi)存限制的致命錯誤,這是因為mysql_query采用的是查詢?nèi)拷Y(jié)果然后把結(jié)果集全部緩存到內(nèi)存中的方式。
mysql的查詢還提供了另外一種查詢方式,函數(shù)名為mysql_unbuffered_query,這個函數(shù)采用的是查出結(jié)果后立即操作結(jié)果集,并不會把結(jié)果集緩存到內(nèi)存中,這樣就避免了超出內(nèi)存的情況發(fā)生。但是使用這個方法的代價就是不能再查詢的時候使用獲取總行之類的方法,因為這種方法是便查詢邊返回結(jié)果。同時在使用該方法的時候不能在同一數(shù)據(jù)庫鏈接上執(zhí)行其他的操作,想要執(zhí)行其他操作的時候必須先終止當(dāng)前操作,釋放所有未緩存的sql查詢所產(chǎn)生的結(jié)果行,或者重新實例化一個數(shù)據(jù)庫連接,使用新鏈接進(jìn)行其他操作。
以下是使用緩存和不使用緩存的對比(所查詢的表中有1000多萬行數(shù)據(jù)):
function selecttest()
{
try {
$pdo = new PDO("mysql:host=localhost;dbname=test", 'root', '123456');
// 不使用緩存結(jié)果集方式
// $pdo->setAttribute(PDO::MYSQL_ATTR_USE_BUFFERED_QUERY, false);
$sth = $pdo->prepare('select * from test');
$sth->execute();
echo '最初占用內(nèi)存大小:' . memory_get_usage() . "\n";
$i = 0;
while ($result = $sth->fetch(PDO::FETCH_ASSOC)) {
$i += 1;
if ($i > 10) {
break;
}
sleep(1);
print_r($result);
echo '占用內(nèi)存大小:' . memory_get_usage() . "\n";
}
} catch (Exception $e) {
echo $e->getMessage();
}
}
上面使用到的是緩存所有結(jié)果集的方式,運(yùn)行該函數(shù)時將會報超內(nèi)存的錯誤,如下所示:
Fatal error: Allowed memory size of 134217728 bytes exhausted (tried to allocate 204800000 bytes) in E:\ProgramDevelopment\RuntimeEnvironment\xampp\htdocs\test\test.php on line 57
Call Stack:
0.0005 135392 1. {main}() E:\ProgramDevelopment\RuntimeEnvironment\xampp\htdocs\test\test.php:0
0.0005 135568 2. test->selecttest() E:\ProgramDevelopment\RuntimeEnvironment\xampp\htdocs\test\test.php:86
0.0055 142528 3. PDOStatement->execute() E:\ProgramDevelopment\RuntimeEnvironment\xampp\htdocs\test\test.php:57
在執(zhí)行$sth->execute();時超出內(nèi)存限制;
將// $pdo->setAttribute(PDO::MYSQL_ATTR_USE_BUFFERED_QUERY, false);這行的注釋去掉后將使用不緩存結(jié)果集的方式,運(yùn)行該函數(shù)將輸出以下內(nèi)容:
最初占用內(nèi)存大小:144808
Array
(
[id] => 1
[a] => v
[b] => w
[c] => i
)
占用內(nèi)存大小:145544
Array
(
[id] => 2
[a] => b
[b] => l
[c] => q
)
占用內(nèi)存大小:145544
Array
(
[id] => 3
[a] => m
[b] => p
[c] => h
)
占用內(nèi)存大小:145536
Array
(
[id] => 4
[a] => j
[b] => i
[c] => b
)
占用內(nèi)存大小:145536
Array
(
[id] => 5
[a] => q
[b] => g
[c] => g
)
占用內(nèi)存大小:145536
可以看到,使用不緩存結(jié)果集的方式獲取一行結(jié)果所占用的內(nèi)存是極少的。這樣就結(jié)局了超出內(nèi)存限制的問題。
總結(jié)
以上是生活随笔為你收集整理的mysql query结果集_如何解决PHP使用mysql_query查询超大结果集超内存问题的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 展鹏科技是做什么的
- 下一篇: mysql window怎么安装补丁_w