海量資料的插入時間對比

2021-07-06 04:11:10 字數 2060 閱讀 6019

這篇文章主要介紹了php大批量插入資料庫的3種方法和速度對比,3種方法分別使用普通insert語句、insert into語句和事務提交,需要的朋友可以參考下

第一種方法:使用insert into 插入,**如下:

$params=array(『value'=>'50′);

set_time_limit(0);

echodate(「h:i:s」);

for($i=0;$i<2000000;$i++);

echodate(「h:i:s」);

最後顯示為:23:25:05 01:32:05 也就是花了2個小時多!

第二種方法:使用事務提交,批量插入資料庫(每隔10w條提交下)最後顯示消耗的時間為:22:56:13 23:04:00 ,一共8分13秒  ,**如下:

echodate(「h:i:s」);

$connect_mysql->query(『begin');

$params=array(『value'=>'50′);

for($i=0;$i<2000000;$i++)

}

$connect_mysql->query(『commit');

echodate(「h:i:s」);

第三種方法:使用優化sql語句:將sql語句進行拼接,使用 insert into table () values  (),(),(),()然後再一次性插入,如果字串太長,

則需要配置下mysql,在mysql 命令列中執行 :set global max_allowed_packet =  2*1024*1024*10;消耗時間為:11:24:06 11:25:06;

插入200w條測試資料僅僅用了1分鐘!**如下:

$sql= 「insert into twenty_million (value) values」;

for($i=0;$i<2000000;$i++);

$sql=substr($sql,0,strlen($sql)-1);

$connect_mysql->query($sql);

最後總結下,在插入大批量資料時,第一種方法無疑是最差勁的,而第二種方法在實際應用中就比較廣泛,第三種方法在插入測試資料或者其他低要求時比較合適,速度確實快。

資料庫插入時間不對 比實際時間快 慢

今天修改另乙個專案,發現插入時間怎麼都不對,相差14個小時 1.查詢資料庫時間是對的.2.查詢伺服器時間是對的 3.查詢docker時間是對的 後來經過搜尋檢視,發現據說是由於 在解析成預編譯語句的時候,誤將cst china standard time utc 8 解析成cst central s...

MYSQL資料庫自動插入時間

我們在設計書資料庫 時,有些時候是要需要插入資料的時間,和更新資料的時間,但是這個時間不需要使用者手動輸入,只需要在使用者提交,資料儲存到資料庫時,資料庫自動更新時間。這個時候可以把字段型別設定成timestamp,timestamp屬性設定為current timestamp 和 on updat...

修改插入時間不匹配問題

檢視客戶端字符集引數 select from nls session parameters 修改登錄檔的方法 regedit.exe hkey程式設計客棧 local machine software oracle home0 nls language 中文環境 simplified chinese...