使用MySQL Proxy解决MySQL主从同步延迟
MySQL的主從同步機制非常方便的解決了高并發(fā)讀的應(yīng)用需求,給Web方 面開發(fā)帶來了極大的便利。但這種方式有個比較大的缺陷在于MySQL的同步機制是依賴Slave主動向Master發(fā)請求來獲取數(shù)據(jù)的,而且由于服務(wù)器負(fù) 載、網(wǎng)絡(luò)擁堵等方面的原因,Master與Slave之間的數(shù)據(jù)同步延遲是完全沒有保證的。短在1秒內(nèi),長則幾秒、幾十秒甚至更長都有可能。
由于數(shù)據(jù)延遲問題的存在,當(dāng)應(yīng)用程序在Master上進行數(shù)據(jù)更新,然后又立刻需要從數(shù)據(jù)庫中讀取數(shù)據(jù)時,這時候如果應(yīng)用程序從Slave上取數(shù)據(jù)(這也是當(dāng)前Web開發(fā)的常規(guī)做法),就可能出現(xiàn)讀取不到期望的數(shù)據(jù),造成程序運行異常。
解決這個問題有多種方式,比如最簡單的在所有的insert和update之后,強制sleep幾秒鐘。這是非常粗魯?shù)姆绞?#xff0c;對于更新操作不是很高的中小型系統(tǒng),此方式基本能解決問題。
另外一種方式是應(yīng)用程序把被更新的數(shù)據(jù)保存在本機的內(nèi)存(或者集中式緩存)中,如果在寫入數(shù)據(jù)完成后需要直接讀取數(shù)據(jù),則從本機內(nèi)存中讀取。這種方式的缺點是極大的增加了應(yīng)用程序的復(fù)雜度,而且可靠性并不能完全得到保障。
使用MySQL Proxy可以很方便的解決這個問題。MySQL Proxy是基于MySQL Client 和 MySQL Server之間的代理程序,能夠完成對Client所發(fā)請求的監(jiān)控、修改。從Client角度看,通過Proxy訪問Server和直接訪問Server沒有任何區(qū)別。對于既有的程序而言,只要把直接被訪問的Server的IP地址和端口號換成Proxy的IP地址和端口號就可以。
MySQL Proxy的工作原理也較簡單。在Proxy啟動時可以指定Proxy所需要使用的lua腳本,在lua腳本中預(yù)先實現(xiàn)6個方法:
- connect_server()???? // 接收到Client的連接請求時調(diào)用
- read_handshake()?? //
- read_auth()?????????????? // 讀取Client的認(rèn)證信息時調(diào)用
- read_auth_result() // 讀取認(rèn)證結(jié)果時調(diào)用
- read_query()??????????? // 讀取Client的query請求時調(diào)用
- read_query_result()?? //讀取query結(jié)果時調(diào)用
當(dāng)Proxy接收到Client請求時,在請求的不同的階段會調(diào)用上面的不同方法。這樣Proxy使用者就可以根據(jù)自己的業(yè)務(wù)需求,自由的實現(xiàn)這6個方法達到目的。
通過在read_query()中加入代碼,我們可以截取出當(dāng)前的請求是insert、update還是select,然后把insert和update請求發(fā)送到Master中,把select請求發(fā)送到Slave中,這樣就解決了讀寫分離的問題。
在解決了讀寫分離后,如何解決同步延遲呢?
方法是在Master上增加一個自增表,這個表僅含有1個的字段。當(dāng)Master接收到任何數(shù)據(jù)更新的請求時,均會觸發(fā)這個觸發(fā)器,該觸發(fā)器更新自增表中的記錄。如下圖所示:
由于Count_table也參與Mysq的主從同步,因此在Master上作的Update更新也會同步到Slave上。當(dāng)Client通過Proxy進行數(shù)據(jù)讀取時,Proxy可以先向Master和Slave的Count_table表發(fā)送查詢請求,當(dāng)二者的數(shù)據(jù)相同時,Proxy可以認(rèn)定Master和Slave的數(shù)據(jù)狀態(tài)是一致的,然后把select請求發(fā)送到Slave服務(wù)器上,否則就發(fā)送到Master上。如下圖所示:
通 過這種方式,就可以比較完美的結(jié)果MySQL的同步延遲不可控問題。之所以所“比較完美”,是因為這種方案double了查詢請求,對Master和 Slave構(gòu)成了額外的壓力。不過由于Proxy與真實的Mysql Server采用連接池的方式連接,因此額外的壓力還是可以接受的。
總結(jié)
以上是生活随笔為你收集整理的使用MySQL Proxy解决MySQL主从同步延迟的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 就这样就这样是什么歌?在线等
- 下一篇: 利用bigpipe机制实现页面模块的异步