PHP使用PDO從mysql讀取大量數(shù)據(jù)處理詳解
前言
本文主要介紹了關(guān)于PHP利用PDO從mysql讀取大量數(shù)據(jù)處理的相關(guān)內(nèi)容,分享出來(lái)供大家參考學(xué)習(xí),下面話不多說(shuō)了,來(lái)一起看看詳細(xì)的介紹吧。
環(huán)境
- mysql: 5.6.34
- php: 5.6
- nginx: php-fpm
適用場(chǎng)景
需要處理一定數(shù)據(jù)集業(yè)務(wù)
- 從mysql讀取一定數(shù)據(jù)的業(yè)務(wù)導(dǎo)出
- 一次需要處理一定的mysql業(yè)務(wù)操作更新刪除等
- 更多需要處理一定數(shù)據(jù)集的操作
pdo 關(guān)鍵設(shè)置
$dbh = new \PDO($dsn, $user, $pass);
# 關(guān)鍵設(shè)置,如果不設(shè)置,php依舊會(huì)從pdo一次取出數(shù)據(jù)到php
$dbh->setAttribute(\PDO::MYSQL_ATTR_USE_BUFFERED_QUERY, false);
//perpare里的游標(biāo)屬性不是必須的
$sth = $dbh->prepare("SELECT * FROM `order`", array(\PDO::ATTR_CURSOR => \PDO::CURSOR_SCROLL));
$sth->execute();
生成器
生成器,迭代數(shù)據(jù)操作
本生成器可省略
嘗試代碼
class Test {
public function test()
{
set_time_limit(0);
$dbms='mysql'; //數(shù)據(jù)庫(kù)類(lèi)型
$host=C('DB_HOST'); //數(shù)據(jù)庫(kù)主機(jī)名
$dbName=C('DB_NAME'); //使用的數(shù)據(jù)庫(kù)
$user=C('DB_USER'); //數(shù)據(jù)庫(kù)連接用戶名
$pass=C('DB_PWD'); //對(duì)應(yīng)的密碼
$dsn="$dbms:host=$host;dbname=$dbName";
$dbh = new \PDO($dsn, $user, $pass);
$dbh->setAttribute(\PDO::MYSQL_ATTR_USE_BUFFERED_QUERY, false);
$sth = $dbh->prepare("SELECT * FROM `order`");
$sth->execute();
$i = 0;
$newLine = PHP_SAPI == 'cli' ? "\n" : '<br />';
foreach ($this->cursor($sth) as $row) {
// var_dump($row);
echo $row['id'] . $newLine;
$i++;
}
echo "消耗內(nèi)存:" . (memory_get_usage() / 1024 / 1024) . "M" . $newLine;
echo "處理數(shù)據(jù)行數(shù):" . $i . $newLine;
echo "success";
}
public function cursor($sth)
{
while($row = $sth->fetch(\PDO::FETCH_ASSOC)) {
yield $row;
}
}
}
$test = new Test();
$test->test();
輸出
1 ... //省略部分id 804288 消耗內(nèi)存:"0.34918212890625M 處理數(shù)據(jù)行數(shù):254062 success
總結(jié)
以上就是這篇文章的全部?jī)?nèi)容了,希望本文的內(nèi)容對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,如果有疑問(wèn)大家可以留言交流,謝謝大家對(duì)腳本之家的支持。
- php中mysql連接方式PDO使用詳解
- Php中用PDO查詢Mysql來(lái)避免SQL注入風(fēng)險(xiǎn)的方法
- php mysql PDO 查詢操作的實(shí)例詳解
- PHP實(shí)現(xiàn)PDO的mysql數(shù)據(jù)庫(kù)操作類(lèi)
- php中數(shù)據(jù)庫(kù)連接方式pdo和mysqli對(duì)比分析
- php基于PDO實(shí)現(xiàn)功能強(qiáng)大的MYSQL封裝類(lèi)實(shí)例
- php下pdo的mysql事務(wù)處理用法實(shí)例
- PHP基于pdo的數(shù)據(jù)庫(kù)操作類(lèi)【可支持mysql、sqlserver及oracle】
- PHP基于PDO擴(kuò)展操作mysql數(shù)據(jù)庫(kù)示例
- PHP使用PDO創(chuàng)建MySQL數(shù)據(jù)庫(kù)、表及插入多條數(shù)據(jù)操作示例
相關(guān)文章
php模塊memcache和memcached區(qū)別分析
談及php搭配memcached使用,已經(jīng)是老生常談的問(wèn)題。但是有一些細(xì)節(jié),不見(jiàn)得人人清楚。比如說(shuō)php的模塊memcache和memcached有什么區(qū)別等。下面我就簡(jiǎn)單介紹一下。2011-06-06
PHP數(shù)組循環(huán)操作詳細(xì)介紹 附實(shí)例代碼
PHP數(shù)組循環(huán)操作主要有兩種方式:一種是foreach,另一種是while,文章有詳細(xì)的介紹,希望對(duì)大家有幫助2013-02-02
php構(gòu)造函數(shù)與析構(gòu)函數(shù)
PHP析構(gòu)函數(shù)與構(gòu)造函數(shù)是相反的,它們被調(diào)用來(lái)一個(gè)對(duì)象從內(nèi)存中銷(xiāo)毀,幫助我們釋放對(duì)象屬性所占用的內(nèi)存并銷(xiāo)毀對(duì)象相關(guān)的資源。2016-04-04
php函數(shù)實(shí)現(xiàn)判斷是否移動(dòng)端訪問(wèn)
本文給大家分享的是一則php判斷是否移動(dòng)端訪問(wèn)的函數(shù),是之前收藏的,這里發(fā)出來(lái),推薦給小伙伴們。2015-03-03
使用PHP數(shù)組實(shí)現(xiàn)無(wú)限分類(lèi),不使用數(shù)據(jù)庫(kù),不使用遞歸.
使用PHP數(shù)組實(shí)現(xiàn)無(wú)限分類(lèi),不使用數(shù)據(jù)庫(kù),不使用遞歸....2006-12-12

