建站
咨詢
售后
建站咨詢
新聞中心
五大常見的MySQL高可用方案(最全)
1. 概述
讓客戶滿意是我們工作的目標(biāo)，不斷超越客戶的期望值來自于我們對(duì)這個(gè)行業(yè)的熱愛。我們立志把好的技術(shù)通過有效、簡(jiǎn)單的方式提供給客戶，將通過不懈努力成為客戶在信息化領(lǐng)域值得信任、有價(jià)值的長(zhǎng)期合作伙伴，公司提供的服務(wù)項(xiàng)目有：申請(qǐng)域名、雅安服務(wù)器托管、營(yíng)銷軟件、網(wǎng)站建設(shè)、綏濱網(wǎng)站維護(hù)、網(wǎng)站推廣。
我們?cè)诳紤]MySQL數(shù)據(jù)庫(kù)的高可用的架構(gòu)時(shí)，主要要考慮如下幾方面：
如果數(shù)據(jù)庫(kù)發(fā)生了宕機(jī)或者意外中斷等故障，能盡快恢復(fù)數(shù)據(jù)庫(kù)的可用性，盡可能的減少停機(jī)時(shí)間，保證業(yè)務(wù)不會(huì)因?yàn)閿?shù)據(jù)庫(kù)的故障而中斷。
用作備份、只讀副本等功能的非主節(jié)點(diǎn)的數(shù)據(jù)應(yīng)該和主節(jié)點(diǎn)的數(shù)據(jù)實(shí)時(shí)或者最終保持一致。
當(dāng)業(yè)務(wù)發(fā)生數(shù)據(jù)庫(kù)切換時(shí)，切換前后的數(shù)據(jù)庫(kù)內(nèi)容應(yīng)當(dāng)一致，不會(huì)因?yàn)閿?shù)據(jù)缺失或者數(shù)據(jù)不一致而影響業(yè)務(wù)。
關(guān)于對(duì)高可用的分級(jí)在這里我們不做詳細(xì)的討論，這里只討論常用高可用方案的優(yōu)缺點(diǎn)以及高可用方案的選型。
2. 高可用方案
2.1. 主從或主主半同步復(fù)制
使用雙節(jié)點(diǎn)數(shù)據(jù)庫(kù)，搭建單向或者雙向的半同步復(fù)制。在5.7以后的版本中，由于lossless replication、logical多線程復(fù)制等一些列新特性的引入，使得MySQL原生半同步復(fù)制更加可靠。
常見架構(gòu)如下：
通常會(huì)和proxy、keepalived等第三方軟件同時(shí)使用，即可以用來監(jiān)控?cái)?shù)據(jù)庫(kù)的 健康 ，又可以執(zhí)行一系列管理命令。如果主庫(kù)發(fā)生故障，切換到備庫(kù)后仍然可以繼續(xù)使用數(shù)據(jù)庫(kù)。
優(yōu)點(diǎn)：
架構(gòu)比較簡(jiǎn)單，使用原生半同步復(fù)制作為數(shù)據(jù)同步的依據(jù)；
雙節(jié)點(diǎn)，沒有主機(jī)宕機(jī)后的選主問題，直接切換即可；
雙節(jié)點(diǎn)，需求資源少，部署簡(jiǎn)單；
缺點(diǎn)：
完全依賴于半同步復(fù)制，如果半同步復(fù)制退化為異步復(fù)制，數(shù)據(jù)一致性無法得到保證；
需要額外考慮haproxy、keepalived的高可用機(jī)制。
2.2. 半同步復(fù)制優(yōu)化
半同步復(fù)制機(jī)制是可靠的。如果半同步復(fù)制一直是生效的，那么便可以認(rèn)為數(shù)據(jù)是一致的。但是由于網(wǎng)絡(luò)波動(dòng)等一些客觀原因，導(dǎo)致半同步復(fù)制發(fā)生超時(shí)而切換為異步復(fù)制，那么這時(shí)便不能保證數(shù)據(jù)的一致性。所以盡可能的保證半同步復(fù)制，便可提高數(shù)據(jù)的一致性。
該方案同樣使用雙節(jié)點(diǎn)架構(gòu)，但是在原有半同復(fù)制的基礎(chǔ)上做了功能上的優(yōu)化，使半同步復(fù)制的機(jī)制變得更加可靠。
可參考的優(yōu)化方案如下：
2.2.1. 雙通道復(fù)制
半同步復(fù)制由于發(fā)生超時(shí)后，復(fù)制斷開，當(dāng)再次建立起復(fù)制時(shí)，同時(shí)建立兩條通道，其中一條半同步復(fù)制通道從當(dāng)前位置開始復(fù)制，保證從機(jī)知道當(dāng)前主機(jī)執(zhí)行的進(jìn)度。另外一條異步復(fù)制通道開始追補(bǔ)從機(jī)落后的數(shù)據(jù)。當(dāng)異步復(fù)制通道追趕到半同步復(fù)制的起始位置時(shí)，恢復(fù)半同步復(fù)制。
2.2.2. binlog文件服務(wù)器
搭建兩條半同步復(fù)制通道，其中連接文件服務(wù)器的半同步通道正常情況下不啟用，當(dāng)主從的半同步復(fù)制發(fā)生網(wǎng)絡(luò)問題退化后，啟動(dòng)與文件服務(wù)器的半同步復(fù)制通道。當(dāng)主從半同步復(fù)制恢復(fù)后，關(guān)閉與文件服務(wù)器的半同步復(fù)制通道。
優(yōu)點(diǎn)：
雙節(jié)點(diǎn)，需求資源少，部署簡(jiǎn)單；
架構(gòu)簡(jiǎn)單，沒有選主的問題，直接切換即可;
相比于原生復(fù)制，優(yōu)化后的半同步復(fù)制更能保證數(shù)據(jù)的一致性。
缺點(diǎn)：
需要修改內(nèi)核源碼或者使用mysql通信協(xié)議。需要對(duì)源碼有一定的了解，并能做一定程度的二次開發(fā)。
依舊依賴于半同步復(fù)制，沒有從根本上解決數(shù)據(jù)一致性問題。
2.3. 高可用架構(gòu)優(yōu)化
將雙節(jié)點(diǎn)數(shù)據(jù)庫(kù)擴(kuò)展到多節(jié)點(diǎn)數(shù)據(jù)庫(kù)，或者多節(jié)點(diǎn)數(shù)據(jù)庫(kù)集群?？梢愿鶕?jù)自己的需要選擇一主兩從、一主多從或者多主多從的集群。
由于半同步復(fù)制，存在接收到一個(gè)從機(jī)的成功應(yīng)答即認(rèn)為半同步復(fù)制成功的特性，所以多從半同步復(fù)制的可靠性要優(yōu)于單從半同步復(fù)制的可靠性。并且多節(jié)點(diǎn)同時(shí)宕機(jī)的幾率也要小于單節(jié)點(diǎn)宕機(jī)的幾率，所以多節(jié)點(diǎn)架構(gòu)在一定程度上可以認(rèn)為高可用性是好于雙節(jié)點(diǎn)架構(gòu)。
但是由于數(shù)據(jù)庫(kù)數(shù)量較多，所以需要數(shù)據(jù)庫(kù)管理軟件來保證數(shù)據(jù)庫(kù)的可維護(hù)性?？梢赃x擇MMM、MHA或者各個(gè)版本的proxy等等。常見方案如下：
2.3.1. MHA+多節(jié)點(diǎn)集群
MHA Manager會(huì)定時(shí)探測(cè)集群中的master節(jié)點(diǎn)，當(dāng)master出現(xiàn)故障時(shí)，它可以自動(dòng)將最新數(shù)據(jù)的slave提升為新的master，然后將所有其他的slave重新指向新的master，整個(gè)故障轉(zhuǎn)移過程對(duì)應(yīng)用程序完全透明。
MHA Node運(yùn)行在每臺(tái)MySQL服務(wù)器上，主要作用是切換時(shí)處理二進(jìn)制日志，確保切換盡量少丟數(shù)據(jù)。
MHA也可以擴(kuò)展到如下的多節(jié)點(diǎn)集群：
優(yōu)點(diǎn)：
可以進(jìn)行故障的自動(dòng)檢測(cè)和轉(zhuǎn)移;
可擴(kuò)展性較好，可以根據(jù)需要擴(kuò)展MySQL的節(jié)點(diǎn)數(shù)量和結(jié)構(gòu);
相比于雙節(jié)點(diǎn)的MySQL復(fù)制，三節(jié)點(diǎn)/多節(jié)點(diǎn)的MySQL發(fā)生不可用的概率更低
缺點(diǎn)：
至少需要三節(jié)點(diǎn)，相對(duì)于雙節(jié)點(diǎn)需要更多的資源;
邏輯較為復(fù)雜，發(fā)生故障后排查問題，定位問題更加困難;
數(shù)據(jù)一致性仍然靠原生半同步復(fù)制保證，仍然存在數(shù)據(jù)不一致的風(fēng)險(xiǎn);
可能因?yàn)榫W(wǎng)絡(luò)分區(qū)發(fā)生腦裂現(xiàn)象;
2.3.2. zookeeper+proxy
Zookeeper使用分布式算法保證集群數(shù)據(jù)的一致性，使用zookeeper可以有效的保證proxy的高可用性，可以較好的避免網(wǎng)絡(luò)分區(qū)現(xiàn)象的產(chǎn)生。
優(yōu)點(diǎn)：
較好的保證了整個(gè)系統(tǒng)的高可用性，包括proxy、MySQL;
擴(kuò)展性較好，可以擴(kuò)展為大規(guī)模集群;
缺點(diǎn)：
數(shù)據(jù)一致性仍然依賴于原生的mysql半同步復(fù)制;
引入zk，整個(gè)系統(tǒng)的邏輯變得更加復(fù)雜;
2.4. 共享存儲(chǔ)
共享存儲(chǔ)實(shí)現(xiàn)了數(shù)據(jù)庫(kù)服務(wù)器和存儲(chǔ)設(shè)備的解耦，不同數(shù)據(jù)庫(kù)之間的數(shù)據(jù)同步不再依賴于MySQL的原生復(fù)制功能，而是通過磁盤數(shù)據(jù)同步的手段，來保證數(shù)據(jù)的一致性。
2.4.1. SAN共享儲(chǔ)存
SAN的概念是允許存儲(chǔ)設(shè)備和處理器（服務(wù)器）之間建立直接的高速網(wǎng)絡(luò)（與LAN相比）連接，通過這種連接實(shí)現(xiàn)數(shù)據(jù)的集中式存儲(chǔ)。常用架構(gòu)如下：
使用共享存儲(chǔ)時(shí)，MySQL服務(wù)器能夠正常掛載文件系統(tǒng)并操作，如果主庫(kù)發(fā)生宕機(jī)，備庫(kù)可以掛載相同的文件系統(tǒng)，保證主庫(kù)和備庫(kù)使用相同的數(shù)據(jù)。
優(yōu)點(diǎn)：
兩節(jié)點(diǎn)即可，部署簡(jiǎn)單，切換邏輯簡(jiǎn)單；
很好的保證數(shù)據(jù)的強(qiáng)一致性；
不會(huì)因?yàn)镸ySQL的邏輯錯(cuò)誤發(fā)生數(shù)據(jù)不一致的情況；
缺點(diǎn)：
需要考慮共享存儲(chǔ)的高可用；
價(jià)格昂貴；
2.4.2. DRBD磁盤復(fù)制
DRBD是一種基于軟件、基于網(wǎng)絡(luò)的塊復(fù)制存儲(chǔ)解決方案，主要用于對(duì)服務(wù)器之間的磁盤、分區(qū)、邏輯卷等進(jìn)行數(shù)據(jù)鏡像，當(dāng)用戶將數(shù)據(jù)寫入本地磁盤時(shí)，還會(huì)將數(shù)據(jù)發(fā)送到網(wǎng)絡(luò)中另一臺(tái)主機(jī)的磁盤上，這樣的本地主機(jī)(主節(jié)點(diǎn))與遠(yuǎn)程主機(jī)(備節(jié)點(diǎn))的數(shù)據(jù)就可以保證實(shí)時(shí)同步。常用架構(gòu)如下：
當(dāng)本地主機(jī)出現(xiàn)問題，遠(yuǎn)程主機(jī)上還保留著一份相同的數(shù)據(jù)，可以繼續(xù)使用，保證了數(shù)據(jù)的安全。
DRBD是linux內(nèi)核模塊實(shí)現(xiàn)的快級(jí)別的同步復(fù)制技術(shù)，可以與SAN達(dá)到相同的共享存儲(chǔ)效果。
優(yōu)點(diǎn)：
兩節(jié)點(diǎn)即可，部署簡(jiǎn)單，切換邏輯簡(jiǎn)單；
相比于SAN儲(chǔ)存網(wǎng)絡(luò)，價(jià)格低廉；
保證數(shù)據(jù)的強(qiáng)一致性；
缺點(diǎn)：
對(duì)io性能影響較大；
從庫(kù)不提供讀操作；
2.5. 分布式協(xié)議
分布式協(xié)議可以很好解決數(shù)據(jù)一致性問題。比較常見的方案如下：
2.5.1. MySQL cluster
MySQL cluster是官方集群的部署方案，通過使用NDB存儲(chǔ)引擎實(shí)時(shí)備份冗余數(shù)據(jù)，實(shí)現(xiàn)數(shù)據(jù)庫(kù)的高可用性和數(shù)據(jù)一致性。
優(yōu)點(diǎn)：
全部使用官方組件，不依賴于第三方軟件；
可以實(shí)現(xiàn)數(shù)據(jù)的強(qiáng)一致性；
缺點(diǎn)：
國(guó)內(nèi)使用的較少；
配置較復(fù)雜，需要使用NDB儲(chǔ)存引擎，與MySQL常規(guī)引擎存在一定差異；
至少三節(jié)點(diǎn)；
2.5.2. Galera
基于Galera的MySQL高可用集群， 是多主數(shù)據(jù)同步的MySQL集群解決方案，使用簡(jiǎn)單，沒有單點(diǎn)故障，可用性高。常見架構(gòu)如下：
優(yōu)點(diǎn)：
多主寫入，無延遲復(fù)制，能保證數(shù)據(jù)強(qiáng)一致性；
有成熟的社區(qū)，有互聯(lián)網(wǎng)公司在大規(guī)模的使用；
自動(dòng)故障轉(zhuǎn)移，自動(dòng)添加、剔除節(jié)點(diǎn)；
缺點(diǎn)：
需要為原生MySQL節(jié)點(diǎn)打wsrep補(bǔ)丁
只支持innodb儲(chǔ)存引擎
至少三節(jié)點(diǎn)；
2.5.3. POAXS
Paxos 算法解決的問題是一個(gè)分布式系統(tǒng)如何就某個(gè)值（決議）達(dá)成一致。這個(gè)算法被認(rèn)為是同類算法中最有效的。Paxos與MySQL相結(jié)合可以實(shí)現(xiàn)在分布式的MySQL數(shù)據(jù)的強(qiáng)一致性。常見架構(gòu)如下：
優(yōu)點(diǎn)：
多主寫入，無延遲復(fù)制，能保證數(shù)據(jù)強(qiáng)一致性；
有成熟理論基礎(chǔ)；
自動(dòng)故障轉(zhuǎn)移，自動(dòng)添加、剔除節(jié)點(diǎn)；
缺點(diǎn)：
只支持innodb儲(chǔ)存引擎
至少三節(jié)點(diǎn)；
3. 總結(jié)
隨著人們對(duì)數(shù)據(jù)一致性的要求不斷的提高，越來越多的方法被嘗試用來解決分布式數(shù)據(jù)一致性的問題，如MySQL自身的優(yōu)化、MySQL集群架構(gòu)的優(yōu)化、Paxos、Raft、2PC算法的引入等等。
而使用分布式算法用來解決MySQL數(shù)據(jù)庫(kù)數(shù)據(jù)一致性的問題的方法，也越來越被人們所接受，一系列成熟的產(chǎn)品如PhxSQL、MariaDB Galera Cluster、Percona XtraDB Cluster等越來越多的被大規(guī)模使用。
隨著官方MySQL Group Replication的GA，使用分布式協(xié)議來解決數(shù)據(jù)一致性問題已經(jīng)成為了主流的方向。期望越來越多優(yōu)秀的解決方案被提出，MySQL高可用問題可以被更好的解決。
mysql-mmm中mmm-monitor單點(diǎn)故障，有什么解決方案沒？替代方案也可以
這方面沒有做過， 不過其他的web集群倒是做過， 希望跟樓主學(xué)習(xí) 。
這方面還真不太懂。
不過， 以后要是遇到了Linux服務(wù)器的問題， 都可以一起研究探討啊。
MySQL - 主備
在實(shí)際的生產(chǎn)中，為了解決Mysql的單點(diǎn)故障，一般都會(huì)采用「主備模式」。
MySQL幾乎所有的高可用架構(gòu)，都直接依賴于 binlog。雖然這些高可用架構(gòu)已經(jīng)呈現(xiàn)出越來越復(fù)雜的趨勢(shì)，但都是從最基本的一主一備演化過來的。
下圖為主備切換流程
在狀態(tài) 1 中，客戶端的讀寫都直接訪問節(jié)點(diǎn) A，而節(jié)點(diǎn) B 是 A 的備庫(kù)，只是將 A 的更新都同步過來，到本地執(zhí)行。這樣可以保持節(jié)點(diǎn) B 和 A 的數(shù)據(jù)是相同的。
當(dāng)需要切換的時(shí)候，就切成狀態(tài) 2。這時(shí)候客戶端讀寫訪問的都是節(jié)點(diǎn) B，而節(jié)點(diǎn) A 是 B 的備庫(kù)。
在狀態(tài) 1 中，雖然節(jié)點(diǎn) B 沒有被直接訪問，但是依然建議把節(jié)點(diǎn) B（也就是備庫(kù)）設(shè)置成只讀（readonly）模式。這樣做，有以下幾個(gè)考慮：
圖下圖 中畫出的就是一個(gè) update 語句在節(jié)點(diǎn) A 執(zhí)行，然后同步到節(jié)點(diǎn) B 的完整流程圖。
備庫(kù) B 跟主庫(kù) A 之間維持了一個(gè)長(zhǎng)連接。主庫(kù) A 內(nèi)部有一個(gè)線程，專門用于服務(wù)備庫(kù) B 的這個(gè)長(zhǎng)連接。一個(gè)事務(wù)日志同步的完整過程是這樣的：
在備庫(kù) B 上通過 change master 命令，設(shè)置主庫(kù) A 的 IP、端口、用戶名、密碼，以及要從哪個(gè)位置開始請(qǐng)求 binlog，這個(gè)位置包含文件名和日志偏移量。
在備庫(kù) B 上執(zhí)行 start slave 命令，這時(shí)候備庫(kù)會(huì)啟動(dòng)兩個(gè)線程，就是圖中的 io_thread 和 sql_thread。其中 io_thread 負(fù)責(zé)與主庫(kù)建立連接。
主庫(kù) A 校驗(yàn)完用戶名、密碼后，開始按照備庫(kù) B 傳過來的位置，從本地讀取 binlog，發(fā)給 B。
備庫(kù) B 拿到 binlog 后，寫到本地文件，稱為中轉(zhuǎn)日志（relay log）。
sql_thread 讀取中轉(zhuǎn)日志，解析出日志里的命令，并執(zhí)行。
主庫(kù)需要復(fù)制新增binlog到從庫(kù)才能完成同步，這個(gè)同步過程就是同步延遲。主從延遲最直接的表現(xiàn)是，備庫(kù)消費(fèi)中轉(zhuǎn)日志（relay log）的速度，比主庫(kù)生產(chǎn) binlog 的速度要慢。
「同步策略」：Master會(huì)等待所有的Slave都回應(yīng)后才會(huì)提交，這個(gè)主從的同步的性能會(huì)嚴(yán)重的影響。
「半同步策略」：Master至少會(huì)等待一個(gè)Slave回應(yīng)后提交。
「異步策略」：Master不用等待Slave回應(yīng)就可以提交。
「延遲策略」：Slave要落后于Master指定的時(shí)間。
對(duì)于不同的業(yè)務(wù)需求，有不同的策略方案，但是一般都會(huì)采用最終一致性，不會(huì)要求強(qiáng)一致性，畢竟強(qiáng)一致性會(huì)嚴(yán)重影響性能。
當(dāng)前文章：mysql單點(diǎn)怎么解決 mysql單例模式
文章URL：http://www.dlmjj.cn/article/ddgihcp.html
