這篇文章主要講解了“php實現(xiàn)百萬級數(shù)據(jù)快速導(dǎo)出CSV的方法”,文中的講解內(nèi)容簡單清晰,易于學(xué)習(xí)與理解,下面請大家跟著小編的思路慢慢深入,一起來研究和學(xué)習(xí)“php實現(xiàn)百萬級數(shù)據(jù)快速導(dǎo)出CSV的方法”吧!
創(chuàng)新互聯(lián)為客戶提供專業(yè)的網(wǎng)站設(shè)計、成都網(wǎng)站設(shè)計、程序、域名、空間一條龍服務(wù),提供基于WEB的系統(tǒng)開發(fā). 服務(wù)項目涵蓋了網(wǎng)頁設(shè)計、網(wǎng)站程序開發(fā)、WEB系統(tǒng)開發(fā)、微信二次開發(fā)、手機網(wǎng)站制作設(shè)計等網(wǎng)站方面業(yè)務(wù)。
php實現(xiàn)百萬級數(shù)據(jù)導(dǎo)出這里使用了服務(wù)器的緩存來實現(xiàn)
實現(xiàn):
一:建立測試表,并加入測試數(shù)據(jù)
1:創(chuàng)建測試表
這里我建了一個test表,字段分別為:id,name,age,email
2:加入測試數(shù)據(jù)
(1)首先手動向表中添加若干行數(shù)據(jù)
然后執(zhí)行如下命令批量添加數(shù)據(jù)
INSERT INTO test (name,age,email) SELECT name,age,email FROM test;
多次執(zhí)行上面的命令測試數(shù)據(jù)會呈指數(shù)增加,這樣就可以得到很多測試數(shù)據(jù)
二:php實現(xiàn)導(dǎo)出百萬級數(shù)據(jù)(這里我的查詢命令使用的時Yii框架自帶的查詢命令)
//讓程序一直運行 set_time_limit(0); //設(shè)置程序運行內(nèi)存 ini_set('memory_limit', '128M'); //導(dǎo)出文件名 $fileName = '測試導(dǎo)出數(shù)據(jù)'; header('Content-Encoding: UTF-8'); header("Content-type:application/vnd.ms-excel;charset=UTF-8"); header('Content-Disposition: attachment;filename="' . $fileName . '.csv"'); //打開php標準輸出流 $fp = fopen('php://output', 'a'); //添加BOM頭,以UTF8編碼導(dǎo)出CSV文件,如果文件頭未添加BOM頭,打開會出現(xiàn)亂碼。 fwrite($fp, chr(0xEF).chr(0xBB).chr(0xBF)); //添加導(dǎo)出標題 fputcsv($fp, ['姓名', '歲數(shù)', '郵箱']); $nums = 10000; //每次導(dǎo)出數(shù)量 $count = Test::find()->count(); $step = ceil($count/$nums);//循環(huán)次數(shù) for($i = 0; $i < $step; $i++) { $result = Test::find() ->select(['name', 'age', 'email']) ->limit($nums) ->offset($i * $nums) ->asArray() ->all(); foreach ($result as $item) { fputcsv($fp, $item); } //每1萬條數(shù)據(jù)就刷新緩沖區(qū) ob_flush(); flush(); } exit;
如上測試后可以發(fā)現(xiàn)導(dǎo)出一百萬左右數(shù)據(jù)只需十幾秒左右時間,效率還算是不錯的
感謝各位的閱讀,以上就是“php實現(xiàn)百萬級數(shù)據(jù)快速導(dǎo)出CSV的方法”的內(nèi)容了,經(jīng)過本文的學(xué)習(xí)后,相信大家對php實現(xiàn)百萬級數(shù)據(jù)快速導(dǎo)出CSV的方法這一問題有了更深刻的體會,具體使用情況還需要大家實踐驗證。這里是創(chuàng)新互聯(lián),小編將為大家推送更多相關(guān)知識點的文章,歡迎關(guān)注!
分享題目:php實現(xiàn)百萬級數(shù)據(jù)快速導(dǎo)出CSV的方法
轉(zhuǎn)載注明:http://jinyejixie.com/article6/pgipog.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供小程序開發(fā)、定制開發(fā)、軟件開發(fā)、自適應(yīng)網(wǎng)站、靜態(tài)網(wǎng)站、App設(shè)計
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源: 創(chuàng)新互聯(lián)