php讀取大數(shù)據(jù)文件 php yield 處理大數(shù)據(jù)

PHP實(shí)現(xiàn)在有限內(nèi)存中的大文件讀取

方法一：通過(guò)yield的生成器實(shí)現(xiàn)有限內(nèi)存中的大文件讀取

創(chuàng)新互聯(lián)網(wǎng)站建設(shè)服務(wù)商，為中小企業(yè)提供成都網(wǎng)站制作、網(wǎng)站設(shè)計(jì)服務(wù)，網(wǎng)站設(shè)計(jì)，成都網(wǎng)站托管等一站式綜合服務(wù)型公司，專業(yè)打造企業(yè)形象網(wǎng)站，讓您在眾多競(jìng)爭(zhēng)對(duì)手中脫穎而出創(chuàng)新互聯(lián)。

方法二：使用SPL 庫(kù) 提供的 SplFileObject 類

怎樣用PHP逐行讀取數(shù)G的大文件最有效率且不會(huì)搞爆內(nèi)存

你需要安裝php運(yùn)行環(huán)境，才能解析php文件！百度phpstudy！一鍵安裝，然后把php放在phpstudy的網(wǎng)站目錄！然后就可以用sublime編寫(xiě)！然后測(cè)試！ 要直接sublime+瀏覽器只可以運(yùn)行html+script！ 歡迎拍磚

php如何讀取CSV大文件并且將其導(dǎo)入數(shù)據(jù)庫(kù)示例

思路：

讀取csv文件，每讀取一行數(shù)據(jù)，就插入數(shù)據(jù)庫(kù)

示例

文件夾結(jié)構(gòu)

/

file.csv????//csv大文件，這里只模擬三行數(shù)據(jù)，不考慮運(yùn)行效率（PS：csv文件格式很簡(jiǎn)單，文件一般較小，解析很快，運(yùn)行效率的瓶頸主要在寫(xiě)入數(shù)據(jù)庫(kù)操作）

index.php????//php文件

file.csv

singi,20

lily,19

daming,23

index.php

/**

*?讀取csv文件，每讀取一行數(shù)據(jù)，就插入數(shù)據(jù)庫(kù)

*/

//獲取數(shù)據(jù)庫(kù)實(shí)例

$dsn?=?'mysql:dbname=test;host=127.0.0.1';

$user?=?'root';

$password?=?'';

try?{

$db?=?new?PDO($dsn,?$user,?$password);

}?catch?(PDOException?$e)?{

echo?'Connection?failed:?'?.?$e-getMessage();

}

//讀取file.csv文件

if?(($handle?=?fopen("file.csv",?"r"))?!==?FALSE)?{

while?(($row?=?fgetcsv($handle,?1000,?","))?!==?FALSE)?{

//寫(xiě)入數(shù)據(jù)庫(kù)

$sth?=?$db-prepare('insert?into?test?set?name=:name,age=:age');

$sth-bindParam(':name',$row[0],PDO::PARAM_STR,255);

$sth-bindParam(':age',$row[1],PDO::PARAM_INT);

$sth-execute();

}

fclose($handle);

}

數(shù)據(jù)表

CREATE?TABLE?`test`?(

`id`?INT(10)?UNSIGNED?NOT?NULL?AUTO_INCREMENT,

`name`?VARCHAR(255)?NULL?DEFAULT?''?COLLATE?'utf8mb4_bin',

`age`?INT(10)?NULL?DEFAULT?'0',

PRIMARY?KEY?(`id`)

)

COLLATE='utf8mb4_bin'

ENGINE=InnoDB;

運(yùn)行結(jié)束后，數(shù)據(jù)庫(kù)中會(huì)插入csv中的三行數(shù)據(jù)

標(biāo)題名稱：php讀取大數(shù)據(jù)文件 php yield 處理大數(shù)據(jù)
文章源于：http://muchs.cn/article24/dohcgce.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供、小程序開(kāi)發(fā)、微信公眾號(hào)、做網(wǎng)站、網(wǎng)站營(yíng)銷、關(guān)鍵詞優(yōu)化

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請(qǐng)盡快告知，我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng)，如需處理請(qǐng)聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來(lái)源： 創(chuàng)新互聯(lián)