分享insert into語句優化的小技巧

MYSQL批量插入數據庫實現語句性能分析

假定我們的表結構如下

代碼如下 ? ?

CREATE?TABLE?example?(  example_id?INT?NOT?NULL,  name?VARCHAR(?50?)?NOT?NULL,  value?VARCHAR(?50?)?NOT?NULL,  other_value?VARCHAR(?50?)?NOT?NULL  )

 通常情況下單條插入的sql語句我們會這么寫:

代碼如下?

INSERT?INTO?example  (example_id,?name,?value,?other_value)  VALUES  (100,?'Name?1',?'Value?1',?'Other?1');

 mysql允許我們在一條sql語句中批量插入數據,如下sql語句:

代碼如下 ? ?

INSERT?INTO?example  (example_id,?name,?value,?other_value)  VALUES  (100,?'Name?1',?'Value?1',?'Other?1'),  (101,?'Name?2',?'Value?2',?'Other?2'),  (102,?'Name?3',?'Value?3',?'Other?3'),  (103,?'Name?4',?'Value?4',?'Other?4');

如果我們插入列的順序和表中列的順序一致的話,還可以省去列名的定義,如下sql

代碼如下 ? ?

INSERT?INTO?example  VALUES  (100,?'Name?1',?'Value?1',?'Other?1'),  (101,?'Name?2',?'Value?2',?'Other?2'),  (102,?'Name?3',?'Value?3',?'Other?3'),  (103,?'Name?4',?'Value?4',?'Other?4');

上面看上去沒什么問題,下面我來使用sql語句優化的小技巧,下面會分別進行測試,目標是插入一個空的數據表200W條數據

第一種方法:使用insert into 插入,代碼如下:

$params?=?array('value'=>'50');  set_time_limit(0);  echo?date("H:i:s");  for($i=0;$iinsert($params);  };  echo?date("H:i:s");

最后顯示為:23:25:05 01:32:05 也就是花了2個小時多!

第二種方法:使用事務提交,批量插入數據庫(每隔10W條提交下)最后顯示消耗的時間為:22:56:13 23:04:00 ,一共8分13秒 ,代碼如下:

echo?date("H:i:s");  $connect_mysql->query('BEGIN');  $params?=?array('value'=>'50');  for($i=0;$iinsert($params);  if($i%100000==0){  $connect_mysql->query('COMMIT');  $connect_mysql->query('BEGIN');  }  }  $connect_mysql->query('COMMIT');  echo?date("H:i:s");

第三種方法:使用優化SQL語句:將SQL語句進行拼接,使用 insert into table () values (),(),(),()然后再一次性插入,如果字符串太長,

 則需要配置下MYSQL,在mysql 命令行中運行 :set global max_allowed_packet = 2*1024*1024*10;消耗時間為:11:24:06 11:25:06;

 插入200W條測試數據僅僅用了1分鐘!代碼如下:

$sql=?"insert?into?twenty_million?(value)?values";  for($i=0;$iquery($sql);

最后總結下,在插入大批量數據時,第一種方法無疑是最差勁的,而第二種方法在實際應用中就比較廣泛,第三種方法在插入測試數據或者其他低要求時比較合適,速度確實快。

【相關推薦】

1.?分享一條insert語句批量插入多條記錄教程

2.?分享一條insert語句批量插入多條記錄教程

? 版權聲明
THE END
喜歡就支持一下吧
點贊15 分享