mysql大數據下Limit使用

對于一直用oracle的我,今天可是非常詫異,mysql中同一個函數在不同數量級上的性能居然差距如此之大。

  先看表ibmng(id,title,info) ?唯一 ?id key?索引title

  先看看兩條語句:

  select * from ibmng limit 1000000,10

  select * from ibmng limit 10,10

  很多人都會認為不會有多大差別,但是他們都錯了,差別太大了,(可能機器不同有點差距,但絕對10倍以上)具體執行時間留給好奇的同學。

  這是為什么呢,都是offset的錯!

  優化的話你可以想方法減小offset,如以下:

  Select * From ibmng Where id >=(
    Select id From ibmng Order By id limit 1000000,1
  ) limit 10

  大家一定會看到問題,?limit 1000000,1 同樣offset不是一樣大嗎,肯定不能優化。(但是,又錯了,執行之后才知道結果!)

  原因是id是索引,所有快,那么如下sql呢:

  select id from ibmng where title=’mysql’ order by id limit 1000000,10;?

  這條sql大家又會猜錯,同樣慢的跟蝸牛一樣。(在此大家都會想title加了索引啊怎么會這樣!)

  接下來大家再執行一條sql如下:

  select id from ibmng where title=’mysql’ limit 1000000,10;?

  執行之后你會發現速度是sousou的快!

  原因看出來了吧,都是用了索引的原因,如果你要用select id from ibmng where title=’mysql’ order by id limit 1000000,10; 那么就追加復合索引(title,id?)吧!

  注意:接下來與limit無關!

  最后回到我現在的場景,如果千萬級別的數據分批次讀取統計的話,不要使用limit最好,用主鍵范圍判斷最佳!(eg:id=1000001)

? 版權聲明
THE END
喜歡就支持一下吧
點贊5 分享