如何解決PHP查詢大量數(shù)據(jù)內存耗盡的問題

這個問題在PHP的官方網(wǎng)站上叫緩沖查詢和非緩沖查詢(Buffered and Unbuffered queries)。PHP的查詢缺省模式是緩沖模式。也就是說，查詢數(shù)據(jù)結果會一次全部提取到內存里供PHP程序處理。這樣給了PHP程序額外的功能，比如說，計算行數(shù)，將指針指向某一行等。更重要的是程啟喚序可以對數(shù)據(jù)集反復進行二次查詢和過濾等操作。但這種緩沖查詢模式的缺陷就是消耗內存，也就是用空間換速度。

十載的淄川網(wǎng)站建設經驗，針對設計、前端、開發(fā)、售后、文案、推廣等六對一服務，響應快，48小時及時工作處理。營銷型網(wǎng)站建設的優(yōu)勢是能夠根據(jù)用戶設備顯示端的尺寸不同，自動調整淄川建站的顯示方式，使網(wǎng)站能夠適用不同顯示終端，在瀏覽器中調整網(wǎng)站的寬度，無論在任何一種瀏覽器上瀏覽網(wǎng)站，都能展現(xiàn)優(yōu)雅布局與設計，從而大程度地提升瀏覽體驗。創(chuàng)新互聯(lián)公司從事“淄川網(wǎng)站設計”,“淄川網(wǎng)站推廣”以來，每個客戶項目都認真落實執(zhí)行。

相對的，另外一種PHP查詢模式察旁滲是非緩沖查詢，數(shù)據(jù)庫服務器會一條一條的返回數(shù)據(jù)，而不是一次全部返回，這樣的結果就是PHP程序消耗較少的內存，但卻增加了數(shù)據(jù)庫服務器的壓力，因為數(shù)據(jù)庫會一直等待PHP來取數(shù)據(jù)，一直到數(shù)據(jù)全部取完。

很顯然，緩沖查詢模式適敗脊用于小數(shù)據(jù)量查詢，而非緩沖查詢適應于大數(shù)據(jù)量查詢。

PHP-大數(shù)據(jù)量怎么處理優(yōu)化

大數(shù)據(jù)的話可以進行以下操作：宴塵圓

減少對數(shù)據(jù)庫的讀取，也就是減少調用數(shù)據(jù)庫，

進行數(shù)據(jù)緩存，

利用數(shù)據(jù)庫的自身兄團優(yōu)化技術，如索引等

精確查詢條件，晌塌有利于提高查找速度

在PHP中怎么解決大量數(shù)據(jù)處理的問題

mysql_query函數(shù)查詢的方式是查詢出全部結果后緩存到內存中，這樣就會出現(xiàn)超內存的現(xiàn)象，使用另外一個函數(shù)mysql_unbuffered_query可以解決這個問題，mysql_unbuffered_query不會緩存結果集，而是查詢出來數(shù)據(jù)后立馬對結果集進行操作，也就是便查詢邊返回，這樣就不會出現(xiàn)超出內存的現(xiàn)象，但是使用mysql_unbuffered_query的是時候不能使用 mysql_num_rows() 和 mysql_data_seek()。并且向 MySQL 發(fā)送一條新的 SQL 查詢之前，必須提取掉所有未緩存的 SQL 查詢所產生的結果行。例如：

使用緩存結果集的代碼：

function selecttest()

{

try {

$pdo = new PDO("mysql:host=localhost;dbname=test", 'root', '123456');

//納卜 不使用緩存結果集方式

// $pdo-setAttribute(PDO::MYSQL_ATTR_USE_BUFFERED_QUERY, false);

$sth = $pdo-prepare('select * from test');

$sth-execute();

echo '最初占用內存大?。? . memory_get_usage() . "\n"散衫;

$i = 0;

while ($result = $sth-fetch(PDO::FETCH_ASSOC)) {

$i += 1;

if ($i 10) {

break;

}

sleep(1);

print_r($result);

echo '占用內存大?。? . memory_get_usage() . "\n";

}

} catch (Exception $e) {

echo $e-getMessage();

}

}

執(zhí)行時將會報超出內存的錯誤：

Fatal error: Allowed memory size of 134217728 bytes exhausted (tried to allocate 204800000 bytes) in E:\ProgramDevelopment\RuntimeEnvironment\xampp\htdocs\test\test.php on line 56

Call Stack:

0.0005 135392 1. {main}() E:\ProgramDevelopment\RuntimeEnvironment\xampp\htdocs\test\test.php:0

0.0005 135568 2. test-洞掘穗selecttest() E:\ProgramDevelopment\RuntimeEnvironment\xampp\htdocs\test\test.php:85

0.0050 142528 3. PDOStatement-execute() E:\ProgramDevelopment\RuntimeEnvironment\xampp\htdocs\test\test.php:56

將上面代碼中的$pdo-setAttribute(PDO::MYSQL_ATTR_USE_BUFFERED_QUERY, false);一行的注釋去掉后將不在緩存結果集，這時運行該函數(shù)的結果如下：

最初占用內存大?。?44808

Array

(

[id] = 1

[a] = v

[b] = w

[c] = i

)

占用內存大?。?45544

Array

(

[id] = 2

[a] = b

[b] = l

[c] = q

)

占用內存大小：145544

Array

(

[id] = 3

[a] = m

[b] = p

[c] = h

)

占用內存大?。?45536

Array

(

[id] = 4

[a] = j

[b] = i

[c] = b

)

占用內存大?。?45536

可以看到，這時返回一條數(shù)據(jù)內存占用非常的小，也就700多字節(jié)，這樣就不會出現(xiàn)超出內存的錯誤了。

網(wǎng)站題目：php怎么處理大量數(shù)據(jù) php 數(shù)據(jù)處理
分享鏈接：http://jinyejixie.com/article40/ddpeiho.html

成都網(wǎng)站建設公司_創(chuàng)新互聯(lián)，為您提供全網(wǎng)營銷推廣、動態(tài)網(wǎng)站、微信小程序、建站公司、外貿建站、網(wǎng)站內鏈

廣告

聲明：本網(wǎng)站發(fā)布的內容（圖片、視頻和文字）以用戶投稿、用戶轉載內容為主，如果涉及侵權請盡快告知，我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內容未經允許不得轉載，或轉載時需注明來源： 創(chuàng)新互聯(lián)