數(shù)據(jù)庫高可用方案(摘選)

低讀低寫并發(fā)、低數(shù)據(jù)量方案

方案一:雙機(jī)高可用方案

1.數(shù)據(jù)庫架構(gòu)圖

2.特點(diǎn)

一臺(tái)機(jī)器A作為讀寫庫,另一臺(tái)B作為備份庫;A庫故障后B庫作為讀寫庫;A庫恢復(fù)后A作為備庫。

3.開發(fā)說明

此種情況下,數(shù)據(jù)源配置中的數(shù)據(jù)庫IP地址,可采用虛擬的IP地址。虛擬IP地址由兩臺(tái)數(shù)據(jù)庫機(jī)器上的keepalive配置,并互相檢測(cè)心跳。當(dāng)其中一臺(tái)故障后,虛擬IP地址會(huì)自動(dòng)漂移到另外一臺(tái)正常的庫上。

數(shù)據(jù)庫的主備配置、故障排除和數(shù)據(jù)補(bǔ)全,需要DBA和運(yùn)維人員來維護(hù)。而程序代碼或配置并不需要修改。

具體配置可參考資料:

http://lizhenliang.blog.51cto.com/7876557/1362313

http://database.51cto.com/art/201012/237204.htm

http://gaoke.iteye.com/blog/2283890

4.適應(yīng)場(chǎng)景

讀和寫都不高的場(chǎng)景(單表數(shù)據(jù)低于500萬),雙機(jī)高可用。

5.優(yōu)缺點(diǎn)

優(yōu)點(diǎn)是一個(gè)機(jī)器故障了可以自動(dòng)切換;缺點(diǎn)是只有一個(gè)庫在工作,讀寫并未分離,并發(fā)有限制。

方案二:主從結(jié)構(gòu)方案

1.數(shù)據(jù)庫架構(gòu)圖

2.特點(diǎn)

一臺(tái)機(jī)器A作為寫庫,另一臺(tái)B作為讀庫;A庫故障后B庫充當(dāng)讀寫,A修復(fù)后,B庫為寫庫,A庫為讀庫。


3.開發(fā)說明

這種方案的實(shí)現(xiàn),要借助數(shù)據(jù)庫中間件Mycat來實(shí)現(xiàn),Mycat的datahost配置如下(注意balance和writetype的設(shè)置)

<dataHost name="localhost1" maxCon="1000" minCon="10" balance="1" writeType="0" dbType="mysql" dbDriver="native" switchType="1" slaveThreshold="100">

<heartbeat>select user()</heartbeat>

<writeHost host="hostM1" url="192.168.1.135:3306" user="root" password="123" />

<writeHost host="hostM2" url="192.168.1.136:3306" user="root" password="123" />

</dataHost>

項(xiàng)目開發(fā)中,要配置Mycat數(shù)據(jù)源,并實(shí)現(xiàn)對(duì)Mycat數(shù)據(jù)源的數(shù)據(jù)操作。數(shù)據(jù)庫A和數(shù)據(jù)庫B應(yīng)該互為主從。數(shù)據(jù)庫的主主配置、故障排除和數(shù)據(jù)補(bǔ)全,依然需要DBA和運(yùn)維人員來維護(hù)。

4.適應(yīng)場(chǎng)景

讀和寫都不是非常高的場(chǎng)景(單表數(shù)據(jù)低于1000萬),高可用。比方案一并發(fā)要高很多。

5.優(yōu)缺點(diǎn)

優(yōu)點(diǎn)是一個(gè)機(jī)器故障了可以自動(dòng)切換;讀寫分離,并發(fā)有了很大的提升。缺點(diǎn)是引入了一個(gè)Mycat節(jié)點(diǎn),若要高可用需要引入至少兩個(gè)Mycat。常規(guī)的解決方案是引入haproxy和keepalive對(duì)mycat做集群。

高讀低寫并發(fā)、低數(shù)據(jù)量方案

方案三:一主多從+讀寫分離

1.數(shù)據(jù)庫架構(gòu)圖


2.特點(diǎn)

一個(gè)主寫庫A多個(gè)從庫,當(dāng)主庫A故障時(shí),提升從庫B為主寫庫,同時(shí)修改C、D庫為B的從庫。A故障修復(fù)后,作為B的從庫。

3.開發(fā)說明

項(xiàng)目開發(fā)中需要使用Mycat作為中間件,來配置主庫和從庫,核心配置如下:

<dataHost name="localhost1" maxCon="1000" minCon="10" balance="1" writeType="0" dbType="mysql" dbDriver="native" switchType="1" slaveThreshold="100">

<heartbeat>select user()</heartbeat>


<writeHost host="hostM1" url="192.168.1.135:3306" user="root" password="123" />


<writeHost host="hostM2" url="192.168.1.136:3306" user="root" password="123456" />


<writeHost host="hostM3" url="192.168.1.137:3306" user="root" password="123" />


<writeHost host="hostM4" url="192.168.1.138:3306" user="root" password="123" />

</dataHost>


主庫A故障后,Mycat會(huì)自動(dòng)把從B提升為寫庫。而C、D從庫,則可以通過MHA等工具,自動(dòng)修改其主庫為B。進(jìn)而實(shí)現(xiàn)自動(dòng)切換的目地。

MHA Manager可以單獨(dú)部署在一臺(tái)獨(dú)立的機(jī)器上管理多個(gè)master-slave集群,也可以部署在一臺(tái)slave節(jié)點(diǎn)上。MHA Node運(yùn)行在每臺(tái)MySQL服務(wù)器上,MHA Manager會(huì)定時(shí)探測(cè)集群中的master節(jié)點(diǎn),當(dāng)master出現(xiàn)故障時(shí),它可以自動(dòng)將最新數(shù)據(jù)的slave提升為新的master,然后將所有其他的slave重新指向新的master。整個(gè)故障轉(zhuǎn)移過程對(duì)應(yīng)用程序完全透明。

MHA相關(guān)知識(shí)請(qǐng)參考:

http://www.cnblogs.com/gomysql/p/3675429.html


4.適應(yīng)場(chǎng)景

該架構(gòu)適合寫并發(fā)不大、但是讀并發(fā)大的很的場(chǎng)景

5.優(yōu)缺點(diǎn)

由于配置了多個(gè)讀節(jié)點(diǎn),讀并發(fā)的能力有了質(zhì)的提高。理論上來說,讀節(jié)點(diǎn)可以多個(gè),可以負(fù)載很高級(jí)別的讀并發(fā)。當(dāng)然,Mycat依然需要設(shè)計(jì)高可用方案。


高讀寫并發(fā)、低數(shù)據(jù)量方案

方案四:MariaDB Galera Cluster方案

1.數(shù)據(jù)庫架構(gòu)圖

2.特點(diǎn)

? ? 多個(gè)數(shù)據(jù)庫,在負(fù)載均衡作用下,可同時(shí)進(jìn)行寫入和讀取操作;各個(gè)庫之間以Galera Replication的方法進(jìn)行數(shù)據(jù)同步,即每個(gè)庫理論上來說,數(shù)據(jù)是完全一致的。

3.開發(fā)說明

數(shù)據(jù)庫讀寫時(shí),只需要修改數(shù)據(jù)庫讀寫IP為keepalive的虛擬節(jié)點(diǎn)即可;數(shù)據(jù)庫配置方面相對(duì)比較復(fù)雜,需要引入haproxy、keepalive、Galaera等各種插件和配置。

4.適用場(chǎng)景

? ? 該方案適合讀寫并發(fā)較大、數(shù)據(jù)量不是非常大的場(chǎng)景。

5.優(yōu)缺點(diǎn)點(diǎn)

優(yōu)點(diǎn):1)可以在任意節(jié)點(diǎn)上進(jìn)行讀2)自動(dòng)剔除故障節(jié)點(diǎn)3)自動(dòng)加入新節(jié)點(diǎn)4)真正并行的復(fù)制,基于行級(jí)5)客戶端連接跟操作單數(shù)據(jù)庫的體驗(yàn)一致。6)?同步復(fù)制,因此具有較高的性能和可靠性。

缺點(diǎn):1) DELETE操作不支持沒有主鍵的表,沒有主鍵的表在不同的節(jié)點(diǎn)順序?qū)⒉煌?)處理事務(wù)時(shí),會(huì)運(yùn)行一個(gè)協(xié)調(diào)認(rèn)證程序來保證事務(wù)的全局一致性,若該事務(wù)長時(shí)間運(yùn)行,就會(huì)鎖死節(jié)點(diǎn)中所有的相關(guān)表,導(dǎo)致插入卡住(這種情況和單表插入是一樣的)。2)整個(gè)集群的寫入吞吐量是由最弱的節(jié)點(diǎn)限制,如果有一個(gè)節(jié)點(diǎn)變得緩慢,那么整個(gè)集群將是緩慢的。為了穩(wěn)定的高性能要求,所有的節(jié)點(diǎn)應(yīng)使用統(tǒng)一的硬件。3)如果DDL語句有問題將破壞集群,建議禁用。4)?Mysql數(shù)據(jù)庫5.7.6及之后的版本才支持此種方案。


高讀寫并發(fā)、高數(shù)據(jù)量方案

方案五?數(shù)據(jù)庫中間件

1.?數(shù)據(jù)庫架構(gòu)圖


2.特點(diǎn)

采用Mycat進(jìn)行分片存儲(chǔ),可以解決寫負(fù)載均衡和數(shù)據(jù)量過大問題;每個(gè)分片配置多個(gè)讀從庫,可以減少單個(gè)庫的讀壓力。

3.開發(fā)說明

此種情況,需要配置Haproxy、keepalive和mycat集群,每個(gè)分片上又需要配置一主多從的集群。每個(gè)分片上的完整配置,具體請(qǐng)參考方案三,可以簡(jiǎn)單地把方案三理解為一個(gè)分片結(jié)構(gòu)。因此,配置和維護(hù)量都比較大。


4.適用場(chǎng)景

讀寫并發(fā)都很大并且數(shù)據(jù)量非常大的場(chǎng)景。

5.優(yōu)缺點(diǎn)

優(yōu)點(diǎn):終極的解決高并發(fā)高數(shù)據(jù)量的方法。

缺點(diǎn):配置和維護(hù)都比較麻煩,需要的軟硬件設(shè)備資源大。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡(jiǎn)書系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 228,119評(píng)論 6 531
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 98,382評(píng)論 3 415
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事。” “怎么了?”我有些...
    開封第一講書人閱讀 176,038評(píng)論 0 373
  • 文/不壞的土叔 我叫張陵,是天一觀的道長。 經(jīng)常有香客問我,道長,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 62,853評(píng)論 1 309
  • 正文 為了忘掉前任,我火速辦了婚禮,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 71,616評(píng)論 6 408
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 55,112評(píng)論 1 323
  • 那天,我揣著相機(jī)與錄音,去河邊找鬼。 笑死,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 43,192評(píng)論 3 441
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 42,355評(píng)論 0 288
  • 序言:老撾萬榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個(gè)月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 48,869評(píng)論 1 334
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 40,727評(píng)論 3 354
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 42,928評(píng)論 1 369
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 38,467評(píng)論 5 358
  • 正文 年R本政府宣布,位于F島的核電站,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 44,165評(píng)論 3 347
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 34,570評(píng)論 0 26
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 35,813評(píng)論 1 282
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 51,585評(píng)論 3 390
  • 正文 我出身青樓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 47,892評(píng)論 2 372

推薦閱讀更多精彩內(nèi)容

  • 關(guān)于Mongodb的全面總結(jié) MongoDB的內(nèi)部構(gòu)造《MongoDB The Definitive Guide》...
    中v中閱讀 31,985評(píng)論 2 89
  • feisky云計(jì)算、虛擬化與Linux技術(shù)筆記posts - 1014, comments - 298, trac...
    不排版閱讀 3,882評(píng)論 0 5
  • 文/Bruce.Liu1 文章大綱MHA簡(jiǎn)介1.1. mha組件介紹1.2. 背景和目標(biāo)MHA原理2.1. MHA...
    BruceLiu1閱讀 10,364評(píng)論 4 19
  • 這不是頭條旗下的?到了這就不行了?這標(biāo)準(zhǔn)牌坊,仙人多少也是醉的! 資本主義過渡開放的結(jié)果就是他們收拾不住局面了,各...
    縱情嬉戲天地間閱讀 161評(píng)論 0 0
  • 從未遇見遙遠(yuǎn),只因時(shí)間看得出現(xiàn)實(shí)。 今天我仍舊是今天的我,明天的我,仍舊是昨天的我。 頃刻之間,風(fēng)沒了,拉著風(fēng)箏的...
    叮宕閱讀 217評(píng)論 0 0