系统提升架构能力之10种mysql主从实践总结
? ? ? Mysql作為目前世界上使用最廣泛的免費數據庫，相信所有從事系統運維的工程師都一定接觸過。但在實際的生產環境中，由單臺Mysql作為獨立的數據庫是完全不能滿足實際需求的，無論是在安全性，高可用性以及高并發等各個方面。
? ? ? 因此，一般來說都是通過主從復制Master-Slave的方式來同步數據，再通過讀寫分離（MySQL-Proxy）來提升數據庫的并發負載能力 這樣的方案來進行部署與實施的。
如下圖所示：
下面是我在實際工作過程中所整理的筆記，在此分享出來，以供大家參考。
MySQL的安裝與配置
?
vi /ect/my.cnf
?配置如下截圖,標紅部分非常重要
接下來確認slave和master的上的server_id是否正確。可以分別在slave和master上運行 SHOW VARIABLES LIKE 'server_id'; 來查看server_id是否和你配置的一樣。
? ? ? 失敗原因: 1:server_id 配置的一樣或是配置的沒有更新到Mysql數據中來
? ? ? 失敗原因2:防火墻攔截了3306端口
? ? ? 失敗原因3:用戶與密碼不正確
二、MySQL主從復制
場景描述：
? ? ? 主數據庫服務器：192.168.10.130，MySQL已經安裝，并且無應用數據。
? ? ? 從數據庫服務器：192.168.10.131，MySQL已經安裝，并且無應用數據。
2.1 主服務器上進行的操作
? ? ? 啟動mysql服務
service mysqld start? ? ?停止mysql服務
service mysqld stop? ? ?重啟mysql服務
service mysqld restart? ? ?通過命令行登錄管理MySQL服務器
/opt/mysql/bin/mysql?-uroot?-p'new-password'? ? ?授權給從數據庫服務器192.168.100.201
mysql>GRANT REPLICATION SLAVE ON *.* to 'rep1'@'192.168.100.201' identified by ‘123456’;???? 查詢主數據庫狀態
Mysql> show master status; +------------------+----------+--------------+------------------+ | File | Position | Binlog_Do_DB | Binlog_Ignore_DB | +------------------+----------+--------------+------------------+ | mysql-bin.000005 | 261 | | | +------------------+----------+--------------+------------------+? ? ? 記錄下 FILE 及 Position 的值，在后面進行從服務器操作的時候需要用到。
?
2.2 配置從服務器
? ? ?修改從服務器的配置文件/opt/mysql/etc/my.cnf將 server-id = 1修改為 server-id = 10，并確保這個ID沒有被別的MySQL服務所使用。
? ? ?啟動mysql服務
/opt/mysql/init.d/mysql start????通過命令行登錄管理MySQL服務器
/opt/mysql/bin/mysql -uroot -p'new-password'????執行同步SQL語句
mysql> change master tomaster_host='192.168.0.104',master_user='rep1',master_password='root',master_log_file='log.000002',master_log_pos=364;? ?正確執行后啟動Slave同步進程
mysql> start slave;? ?主從同步檢查
mysql> show slave status\G??
Slave_IO_State:Master_Host: 192.168.10.130Master_User: rep1Master_Port: 3306Connect_Retry: 60Master_Log_File: mysql-bin.000005Read_Master_Log_Pos: 415Relay_Log_File: localhost-relay-bin.000008Relay_Log_Pos: 561Relay_Master_Log_File: mysql-bin.000005Slave_IO_Running: YESSlave_SQL_Running: YESReplicate_Do_DB:……………省略若干……………Master_Server_Id: 11 row in set (0.01 sec)????其中Slave_IO_Running與Slave_SQL_Running 的值都必須為YES，才表明狀態正常。
? ? ? 如果主服務器已經存在應用數據，則在進行主從復制時，需要做以下處理：
(1)主數據庫進行鎖表操作，不讓數據再進行寫入動作
(2)查看主數據庫狀態
mysql>?show?master?status;(3)記錄下 FILE 及 Position 的值。
將主服務器的數據文件（整個/opt/mysql/data目錄）復制到從服務器，建議通過tar歸檔壓縮后再傳到從服務器解壓。
(4)取消主數據庫鎖定
mysql> UNLOCK TABLES;2.3 驗證主從復制效果
主服務器上的操作
????在主服務器上創建數據庫first_db
????在主服務器上創建表first_tb
mysql> create table first_tb(id int(3),name char(10));????在主服務器上的表first_tb中插入記錄
mysql> insert into first_tb values (001,"myself");? ??在從服務器上查看
mysql> show databases;=============================+--------------------+| Database |+--------------------+| information_schema || first_db || mysql || performance_schema || test |+--------------------+5 rows in set (0.01 sec)? ?數據庫first_db已經自動生成
mysql> use first_dbDatabase chagedmysql> show tables;+--------------------+| Tables_in_first_db |+--------------------+| first_tb |+--------------------+1 row in set (0.02 sec)
? ?數據庫表first_tb也已經自動創建???????
記錄也已經存在
? ? ?由此，整個MySQL主從復制的過程就完成了，接下來，我們進行MySQL讀寫分離的安裝與配置。
三、MySQL讀寫分離
場景描述：
數據庫Master主服務器：192.168.10.130
數據庫Slave從服務器：192.168.10.131
MySQL-Proxy調度服務器：192.168.10.132
????以下操作，均是在192.168.10.132即MySQL-Proxy調度服務器 上進行的。
3.1 MySQL的安裝與配置
? ? ? 具體的安裝過程與上文相同。
3.2 檢查系統所需軟件包
? ? ?通過 rpm -qa | grep name 的方式驗證以下軟件包是否已全部安裝。???????
? ? ? 若缺少相關的軟件包，可通過yum -y install方式在線安裝，或直接從系統安裝光盤中找到并通過rpm -ivh方式安裝。
3.3 編譯安裝lua
? ? ?MySQL-Proxy的讀寫分離主要是通過rw-splitting.lua腳本實現的，因此需要安裝lua。
? ? ? lua可通過以下方式獲得從http://www.lua.org/download.html下載源碼包從rpm.pbone.net搜索相關的rpm包download.fedora.redhat.com/pub/fedora/epel/5/i386/lua-5.1.4-4.el5.i386.rpm
download.fedora.redhat.com/pub/fedora/epel/5/x86_64/lua-5.1.4-4.el5.x86_64.rpm
? ? ?這里我們建議采用源碼包進行安裝???????
cd /opt/installwget http://www.lua.org/ftp/lua-5.1.4.tar.gztar zvfx lua-5.1.4.tar.gzcd lua-5.1.4vi src/Makefile? ? ? 在 CFLAGS= -O2 -Wall $(MYCFLAGS) 這一行記錄里加上-fPIC，更改為 CFLAGS= -O2 -Wall -fPIC $(MYCFLAGS) 來避免編譯過程中出現錯誤。???????
make linuxmake install?????? cp etc/lua.pc /usr/lib/pkgconfig/export PKG_CONFIG_PATH=$PKG_CONFIG_PATH:/usr/lib/pkgconfig? ? ? 但運行的過程報錯了error:readline/readline.h:no such file or directory,上網搜了一下需要安裝readline-6.1.tar.gz，因此我去wget http://www.sfr-fresh.com/unix/misc/readline-6.1.tar.gz ，tar -zxvf readline-6.1.tar.gz，cd ~~ ./configure && make && make install ?， sudo ldconfig，再運行make linux，不報readline的錯誤，但是又提示/usr/bin/ld: cannot find -lncurses，在網上搜了一下，還得下載ncurses安裝，wget http://ftp.gnu.org/pub/gnu/ncurses/ncurses-5.7.tar.gz， tar -xvf ncurses -5.7.tar.gz，然后 cd ncurses-5.7 ，./configure，make，make install，再運行make linux就一切ok了。make install
安裝完成。
3.4 安裝配置MySQL-Proxy
?
? ?? MySQL-Proxy可通過以下網址獲得：
http://mysql.cdpa.nsysu.edu.tw/Downloads/MySQL-Proxy/
推薦采用已經編譯好的二進制版本，因為采用源碼包進行編譯時，最新版的MySQL-Proxy對automake，glib以及libevent的版本都有很高的要求，而這些軟件包都是系統的基礎套件，不建議強行進行更新。
并且這些已經編譯好的二進制版本在解壓后都在統一的目錄內，因此建議選擇以下版本：
??? 32位RHEL5平臺：
http://mysql.cdpa.nsysu.edu.tw/Downloads/MySQL-Proxy/mysql-proxy-0.8.3-linux-rhel5-x86-32bit.tar.gz
??? 64位RHEL5平臺：
http://mysql.cdpa.nsysu.edu.tw/Downloads/MySQL-Proxy/mysql-proxy-0.8.3-linux-rhel5-x86-64bit.tar.gz
測試平臺為RHEL5 32位，因此選擇32位的軟件包???????
wget http://mysql.cdpa.nsysu.edu.tw/Downloads/MySQL-Proxy/mysql-proxy-0.8.3-linux-rhel5-x86-32bit.tar.gztar xzvf mysql-proxy-0.8.3-linux-rhel5-x86-32bit.tar.gzmv mysql-proxy-0.8.3-linux-rhel5-x86-32bit /opt/mysql-proxy????創建mysql-proxy服務管理腳本???????
mkdir /opt/mysql-proxy/init.d/vim mysql-proxy????配置并使用rw-splitting.lua讀寫分離腳本
最新的腳本我們可以從最新的mysql-proxy源碼包中獲取???????
????修改讀寫分離腳本rw-splitting.lua
修改默認連接，進行快速測試，不修改的話要達到連接數為4時才啟用讀寫分離???????
? ? ?修改完成后，啟動mysql-proxy
/opt/mysql-proxy/init.d/mysql-proxy start3.5 測試讀寫分離效果
? ? ? ?創建用于讀寫分離的數據庫連接用戶
登陸主數據庫服務器192.168.10.130，通過命令行登錄管理MySQL服務器???????
? ? 由于我們配置了主從復制功能，因此從數據庫服務器192.168.10.131上已經同步了此操作。
為了清晰的看到讀寫分離的效果，需要暫時關閉MySQL主從復制功能
登陸從數據庫服務器192.168.10.131，通過命令行登錄管理MySQL服務器
? ? ? 關閉Slave同步進程???????
mysql> stop slave;Query OK, 0 rows affected (0.00 sec)? ? ? 連接MySQL-Proxy
/opt/mysql/bin/mysql -uproxy1 -p'password' -P4040 -h192.168.10.132? ? ? 登陸成功后，在first_db數據的first_tb表中插入兩條記錄???????
mysql> use first_db;Database changedmysql> insert into first_tb values (007,’first’);Query Ok, 1 row affected (0.00 sec)mysql> insert into first_tb values (110,’second’);Query Ok, 1 row affected (0.00 sec)? ? ? 查詢記錄???????
mysql> select * from first_tb;+------+------+| id | name |+------+------+| 1 | myself |+------+------+1 rows in set (0.00 sec)? ? 通過讀操作并沒有看到新記錄
mysql> quit? ? 退出MySQL-Proxy
????下面，分別登陸到主從數據庫服務器，對比記錄信息
????首先，檢查主數據庫服務器???????
? ? ? 兩條新記錄都已經存在
然后，檢查從數據庫服務器???????
mysql> select * from first_tb;+------+------+| id | name |+------+------+| 1 | myself |+------+------+1 rows in set (0.00 sec)沒有新記錄存在
? ? ?由此驗證，我們已經實現了MySQL讀寫分離，目前所有的寫操作都全部在Master主服務器上，用來避免數據的不同步；
另外，所有的讀操作都分攤給了其它各個Slave從服務器上，用來分擔數據庫壓力。
?
經驗分享：
? ??1.當MySQL主從復制在 show slave status\G 時出現Slave_IO_Running或Slave_SQL_Running 的值不為YES時，需要首先通過 stop slave 來停止從服務器，然后再執行一次本文 2.1與2.2 章節中的步驟即可恢復，但如果想盡可能的同步更多的數據，可以在Slave上將master_log_pos節點的值在之前同步失效的值的基礎上增大一些，然后反復測試，直到同步OK。因為MySQL主從復制的原理其實就是從服務器讀取主服務器的binlog，然后根據binlog的記錄來更新數據庫。
??? 2.MySQL-Proxy的rw-splitting.lua腳本在網上有很多版本，但是最準確無誤的版本仍然是源碼包中所附帶的lib/rw-splitting.lua腳本，如果有lua腳本編程基礎的話，可以在這個腳本的基礎上再進行優化；
??? 3.MySQL-Proxy實際上非常不穩定，在高并發或有錯誤連接的情況下，進程很容易自動關閉，因此打開--keepalive參數讓進程自動恢復是個比較好的辦法，但還是不能從根本上解決問題，因此通常最穩妥的做法是在每個從服務器上安裝一個MySQL-Proxy供自身使用，雖然比較低效但卻能保證穩定性；
? ? 4.一主多從的架構并不是最好的架構，通常比較優的做法是通過程序代碼和中間件等方面，來規劃，比如設置對表數據的自增id值差異增長等方式來實現兩個或多個主服務器，但一定要注意保證好這些主服務器數據的完整性，否則效果會比多個一主多從的架構還要差；
? ? 5.MySQL-Cluster 的穩定性也不是太好??
? ? 6.Amoeba for MySQL 是一款優秀的中間件軟件，同樣可以實現讀寫分離，負載均衡等功能，并且穩定性要大大超過MySQL-Proxy，建議大家用來替代MySQL-Proxy，甚至MySQL-Cluster。
?
總結
以上是生活随笔為你收集整理的系统提升架构能力之10种mysql主从实践总结的全部內容，希望文章能夠幫你解決所遇到的問題。
- 上一篇： Glances：一款功能强大的操作系统安
- 下一篇： linux cmake编译源码,linu