MySQL之-分庫分表的技巧分享

分表是分散數(shù)據(jù)庫壓力的好方法。

分表,最直白的意思,就是將一個表結(jié)構(gòu)分為多個表,然后,可以再同一個庫里,也可以放到不同的庫。
當(dāng)然,首先要知道什么情況下,才需要分表。個人覺得單表記錄條數(shù)達(dá)到百萬到千萬級別時就要使用分表了。
1,分表的分類
1>縱向分表
將本來可以在同一個表的內(nèi)容,人為劃分為多個表。(所謂的本來,是指按照關(guān)系型數(shù)據(jù)庫的第三范式要求,是應(yīng)該在同一個表的。)
分表理由:根據(jù)數(shù)據(jù)的活躍度進(jìn)行分離,(因為不同活躍的數(shù)據(jù),處理方式是不同的)
案例:
對于一個博客系統(tǒng),文章標(biāo)題,作者,分類,創(chuàng)建時間等,是變化頻率慢,查詢次數(shù)多,而且最好有很好的實時性的數(shù)據(jù),我們把它叫做冷數(shù)據(jù)。而博客的瀏覽量,回復(fù)數(shù)等,類似的統(tǒng)計信息,或者別的變化頻率比較高的數(shù)據(jù),我們把它叫做活躍數(shù)據(jù)。所以,在進(jìn)行數(shù)據(jù)庫結(jié)構(gòu)設(shè)計的時候,就應(yīng)該考慮分表,首先是縱向分表的處理。
這樣縱向分表后:
首先存儲引擎的使用不同,冷數(shù)據(jù)使用MyIsam 可以有更好的查詢數(shù)據(jù)。活躍數(shù)據(jù),可以使用Innodb ,可以有更好的更新速度。
其次,對冷數(shù)據(jù)進(jìn)行更多的從庫配置,因為更多的操作時查詢,這樣來加快查詢速度。對熱數(shù)據(jù),可以相對有更多的主庫的橫向分表處理。
其實,對于一些特殊的活躍數(shù)據(jù),也可以考慮使用memcache ,redis之類的緩存,等累計到一定量再去更新數(shù)據(jù)庫。或者mongodb 一類的nosql 數(shù)據(jù)庫,這里只是舉例,就先不說這個。
2>橫向分表
字面意思,就可以看出來,是把大的表結(jié)構(gòu),橫向切割為同樣結(jié)構(gòu)的不同表,如,用戶信息表,user_1,user_2 等。表結(jié)構(gòu)是完全一樣,但是,根據(jù)某些特定的規(guī)則來劃分的表,如根據(jù)用戶ID來取模劃分。
分表理由:根據(jù)數(shù)據(jù)量的規(guī)模來劃分,保證單表的容量不會太大,從而來保證單表的查詢等處理能力。
案例:同上面的例子,博客系統(tǒng)。當(dāng)博客的量達(dá)到很大時候,就應(yīng)該采取橫向分割來降低每個單表的壓力,來提升性能。例如博客的冷數(shù)據(jù)表,假如分為100個表,當(dāng)同時有100萬個用戶在瀏覽時,如果是單表的話,會進(jìn)行100萬次請求,而現(xiàn)在分表后,就可能是每個表進(jìn)行1萬個數(shù)據(jù)的請求(因為,不可能絕對的平均,只是假設(shè)),這樣壓力就降低了很多很多。

數(shù)據(jù)庫的復(fù)制能解決訪問問題,并不能解決大規(guī)模的并發(fā)寫入問題,要解決這個問題就要考慮mysql數(shù)據(jù)切分了

數(shù)據(jù)切分,顧名思義,就是數(shù)據(jù)分散,將一臺主機(jī)上的數(shù)據(jù)分?jǐn)偟蕉嗯_,減輕單臺主機(jī)的負(fù)載壓力,有兩種切分方式,一種是分庫,即按照業(yè)務(wù)模塊分多個庫,每個庫中的表不一樣,還有一種就是分表,按照一定的業(yè)務(wù)規(guī)則或者邏輯將數(shù)據(jù)拆分到不同的主機(jī)上,每個主機(jī)上的表是一樣的,這個有點(diǎn)類似于Oracle的表分區(qū)。

分庫又叫垂直分區(qū),這種方式實現(xiàn)起來比較簡單,重要的是對業(yè)務(wù)要細(xì)化,分庫時候要想清楚各個模塊業(yè)務(wù)之間的交互情況,避免將來寫程序時出現(xiàn)過多的跨庫操作。

分表又叫水平分區(qū),這種方式實現(xiàn)起來就比垂直分區(qū)復(fù)雜些,但是它能解決垂直分區(qū)所不能解決的問題,即單張表的訪問及寫入很頻繁,這時候就可以根據(jù)一定的業(yè)務(wù)規(guī)則(PS:如互聯(lián)網(wǎng)BBS論壇的會員等級概念:根據(jù)會員等級來分表)來分表,這樣就能減輕單表壓力,并且還能解決各個模塊的之間的頻繁交互問題。

分庫的優(yōu)點(diǎn)是:實現(xiàn)簡單,庫與庫之間界限分明,便于維護(hù),缺點(diǎn)是不利于頻繁跨庫操作,單表數(shù)據(jù)量大的問題解決不了。

分表的優(yōu)點(diǎn)是:能解決分庫的不足點(diǎn),但是缺點(diǎn)卻恰恰是分庫的優(yōu)點(diǎn),分表實現(xiàn)起來比較復(fù)雜,特別是分表規(guī)則的劃分,程序的編寫,以及后期的數(shù)據(jù)庫拆分移植維護(hù)。

實際應(yīng)用中,一般互聯(lián)網(wǎng)企業(yè)的路線都是先分庫再分表,兩者結(jié)合使用,取長補(bǔ)短,這樣發(fā)揮了mysql擴(kuò)展的最大優(yōu)勢,但是缺點(diǎn)是架構(gòu)很大,很復(fù)雜,應(yīng)用程序的編寫也比較復(fù)雜。

? 版權(quán)聲明
THE END
喜歡就支持一下吧
點(diǎn)贊7 分享