03_MyCat在MySQL主從復制基礎上實現讀寫分離

環境

  • 主節點
    操作系統: CentOS-6.6-x86_64
    JDK 版本: jdk1.7.0_45
    MySQL 版本: mysql-5.6.26.tar.gz
    IP: 192.168.175.200
    主機名: huachao

  • 從節點
    操作系統: CentOS-6.6-x86_64
    JDK 版本: jdk1.7.0_45
    MySQL 版本: mysql-5.6.26.tar.gz
    IP: 192.168.175.201
    主機名: mini1

  • mycat節點
    操作系統: CentOS-6.6-x86_64
    MyCat 版本: Mycat-server-1.4-release-20151019230038-linux.tar.gz
    JDK 版本: jdk1.7.0_45
    IP: 192.168.175.202
    主機名: mini2

MyCat 介紹

  • MyCat 官網
    MyCat 的讀寫分離是基于后端 MySQL 集群的主從同步來實現的, 而 MyCat 提供語句的分發功能。 MyCat1.4 開始支持 MySQL 主從復制狀態綁定的讀寫分離機制,讓讀更加安全可靠。

MyCat 的安裝

  1. 設置 MyCat 的主機名和 IP 與主機名的映射
# vi /etc/sysconfig/network
NETWORKING=yes
HOSTNAME=mini2
# vi /etc/hosts
127.0.0.1 huachao
192.168.175.200 huachao
192.168.175.201 mini1
192.168.175.202 mini2
  1. 因為 MyCat 是用 Java 開發的,因此 MyCat 運行需要安裝 JDK(準確來說是 JRE 就夠了),并且需要 JDK1.7 或以上版本

  2. 創建 mycat 用戶并設置密碼(可選操作)

# useradd mycat
# passwd mycat
  1. 上傳安裝包 Mycat-server-1.4-release-20151019230038-linux.tar.gz 到 MyCat 服務器中的/home/mycat 目錄,并解壓并移動到 /usr/local/mycat 目錄
$ tar -zxvf Mycat-server-1.4-release-20151019230038-linux.tar.gz
$ su root
Password:
# mv /home/mycat/mycat /usr/local/
# cd /usr/local/mycat/
# ll
  1. 設置 MyCat 的環境變量(可選操作)
# vi /etc/profile
## mycat env
export MYCAT_HOME=/usr/local/mycat
export PATH=$PATH:$MYCAT_HOME/bin
# source /etc/profile

配置 MyCat

  1. 在配置 MyCat 前,請確認 MySQL 的主從復制安裝配置已完成并正常運行。 MySQL 主從數據的同步在 MySQL 中配置, MyCat 不負責數據同步的問題。
    補充:
    ??(1) MySQL 主從復制配置中,如果涉及到函數或存儲過程的同步復制,需要在/etc/my.cnf 中的[mysqld]段中增加配置 log_bin_trust_function_creators=true 或在客戶端中設置 set global log_bin_trust_function_creators = 1;
    ??(2) 如果要做讀寫分離下的主從切換, 那么從節點也有可能會變為寫節點,因此從節點就不能設置為只讀 read_only=1 。
    ??(3) Linux 版本的 MySQL,需要設置為 MySQL 大小寫不敏感,否則可能會發生找不到表的問題。 可在/etc/my.cnf 的[mysqld]段中增加 lower_case_table_names=1

  2. 配置 MyCat 的 schema.xml
    schema.xml 是 MyCat 最重要的配置文件之一, 用于設置 MyCat 的邏輯庫、表、數據節點、dataHost 等內容,

[mycat@edu-mycat-01 conf]$ cd /usr/local/mycat/conf/
[mycat@edu-mycat-01 conf]$ vi schema.xml
<?xml version="1.0"?>
<!DOCTYPE mycat:schema SYSTEM "schema.dtd">
<mycat:schema xmlns:mycat="http://org.opencloudb/">
    
    <!-- 定義MyCat的邏輯庫 -->
    <!-- schema name="rc_schema1" checkSQLschema="false" sqlMaxLimit="100" dataNode="rc_dn1"></schema -->
    <!-- schema name="pay_schema1" checkSQLschema="false" sqlMaxLimit="100" dataNode="pay_dn1"></schema -->
    <schema name="rc_schema2" checkSQLschema="false" sqlMaxLimit="100" dataNode="rc_dn2"></schema>
    <schema name="pay_schema2" checkSQLschema="false" sqlMaxLimit="100" dataNode="pay_dn2"></schema>

    <!-- 定義MyCat的數據節點 -->
    <!-- dataNode name="rc_dn1" dataHost="dtHost1" database="roncoo" / -->
    <!-- dataNode name="pay_dn1" dataHost="dtHost1" database="edu_simple_pay" / -->
    <dataNode name="rc_dn2" dataHost="dtHost2" database="huachao" />
    <dataNode name="pay_dn2" dataHost="dtHost2" database="ron" />

    <!-- 注意:schema中的每一個dataHost中的host屬性值必須唯一,否則會出現主從在所有dataHost中全部切換的現象。 -->
    <!-- 定義數據主機dtHost1,只連接到MySQL讀寫分離集群中的Master節點,不使用MyCat托管MySQL主從切換 -->
    <!--
    <dataHost name="dtHost1" maxCon="500" minCon="20" balance="0"
        writeType="0" dbType="mysql" dbDriver="native" switchType="1" slaveThreshold="100">
        <heartbeat>select user()</heartbeat>
        <writeHost host="hostM1" url="192.168.1.205:3306" user="root" password="www.roncoo.com" />
    </dataHost>
    -->

    <!-- 使用MyCat托管MySQL主從切換 -->
    <!-- 定義數據主機dtHost2,連接到MySQL讀寫分離集群,并配置了讀寫分離和主從切換 -->
    <dataHost name="dtHost2" maxCon="500" minCon="20" balance="1"
        writeType="0" dbType="mysql" dbDriver="native" switchType="2" slaveThreshold="100">
        <!-- 通過show slave status檢測主從狀態,當主宕機以后,發生切換,從變為主,原來的主變為從,這時候show slave 
            status就會發生錯誤,因為原來的主沒有開啟slave,不建議直接使用switch操作,而是在DB中做主從對調。 -->
        <heartbeat>show slave status</heartbeat>
        <!-- can have multi write hosts -->
        <writeHost host="hostM2" url="192.168.175.200:3306" user="root" password="huachao" />
        <writeHost host="hostS2" url="192.168.175.201:3306" user="root" password="huachao" />
    </dataHost>
    <!-- 參數balance決定了哪些MySQL服務器參與到讀SQL的負載均衡中 -->
    <!-- balance="0",為不開啟讀寫分離,所有讀操作都發送到當前可用的writeHost上-->
    <!-- balance="1",全部的readHost與stand by writeHost參與select語句的負載均衡-->
    <!-- balance="2",所有讀操作都隨機的在writeHost、readHost上分發-->
    <!-- MyCat1.4版本中,若想支持MySQL一主一從的標準配置,并且在主節點宕機的情況下,從節點還能讀取數據,
         則需要在MyCat里配置為兩個writeHost并設置balance="1" -->
    <!-- writeType="0",所有寫操作發送到配置的第一個writeHost,第一個掛了切到還生存的第二個writeHost-->
    <!-- writeType="1",僅僅對于galera for mysql集群這種多主多節點都能寫入的集群起效,此時Mycat會隨機選擇一個writeHost并寫入數據,
         對于非galera for mysql集群,請不要配置writeType=1,會導致數據庫不一致的嚴重問題 -->

</mycat:schema>

MyCat1.4 開始支持 MySQL 主從復制狀態綁定的讀寫分離機制,讓讀更加安全可靠,配置如下:
MyCat 心跳檢查語句配置為 show slave status , dataHost 上定義兩個新屬性: switchType="2"slaveThreshold="100",此時意味著開啟 MySQL 主從復制狀態綁定的讀寫分離與切換機制, MyCat 心跳機制通過檢測 show slave status 中的"Seconds_Behind_Master", "Slave_IO_Running", "Slave_SQL_Running" 三 個 字 段 來 確 定 當 前 主 從 同 步 的 狀 態 以 及Seconds_Behind_Master 主從復制時延,當 Seconds_Behind_Master 大于slaveThreshold時,讀寫分離篩選器會過濾掉此 Slave機器,防止讀到很久之前的舊數據,而當主節點宕機后,切換邏輯會檢查 Slave 上的 Seconds_Behind_Master 是否為 0,為 0 時則表示主從同步,可以安全切換,否則不會切換。

  1. 配置 server.xml
    server.xml 主要用于設置系統變量、 管理用戶、設置用戶權限等。
[wusc@edu-mycat-01 conf]$ vi server.xml
<?xml version="1.0" encoding="UTF-8"?>
<!-- - - Licensed under the Apache License, Version 2.0 (the "License"); 
    - you may not use this file except in compliance with the License. - You 
    may obtain a copy of the License at - - http://www.apache.org/licenses/LICENSE-2.0 
    - - Unless required by applicable law or agreed to in writing, software - 
    distributed under the License is distributed on an "AS IS" BASIS, - WITHOUT 
    WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied. - See the 
    License for the specific language governing permissions and - limitations 
    under the License. -->
<!DOCTYPE mycat:server SYSTEM "server.dtd">
<mycat:server xmlns:mycat="http://org.opencloudb/">
    <system>
    <property name="defaultSqlParser">druidparser</property>
    <property name="charset">utf8mb4</property>
      <!--  <property name="useCompression">1</property>--> <!--1為開啟mysql壓縮協議-->
    <!-- <property name="processorBufferChunk">40960</property> -->
    <!-- 
    <property name="processors">1</property> 
    <property name="processorExecutor">32</property> 
     -->
        <!--默認是65535 64K 用于sql解析時最大文本長度 -->
        <!--<property name="maxStringLiteralLength">65535</property>-->
        <!--<property name="sequnceHandlerType">0</property>-->
        <!--<property name="backSocketNoDelay">1</property>-->
        <!--<property name="frontSocketNoDelay">1</property>-->
        <!--<property name="processorExecutor">16</property>-->
        <!-- 
            <property name="mutiNodeLimitType">1</property> 0:開啟小數量級(默認) ;1:開啟億級數據排序
            <property name="mutiNodePatchSize">100</property> 億級數量排序批量
            <property name="processors">32</property> <property name="processorExecutor">32</property> 
            <property name="serverPort">8066</property> <property name="managerPort">9066</property> 
            <property name="idleTimeout">300000</property> <property name="bindIp">0.0.0.0</property> 
            <property name="frontWriteQueueSize">4096</property> <property name="processors">32</property> -->
    </system>

    <!-- 用戶1,對應的MyCat邏輯庫連接到的數據節點對應的主機為MySQL主從復制配置中的Master節點,
         沒實現讀寫分離,讀寫都在該Master節點中進行  -->
    <!--
    <user name="user1">
        <property name="password">roncoo.1</property>
        <property name="schemas">rc_schema1,pay_schema1</property>
    </user>
    -->
                            
    <!-- 用戶2,對應的MyCat邏輯庫連接到的數據節點對應的主機為主從復制集群,并通過MyCat實現了讀寫分離 -->
    <user name="user2">
        <property name="password">huachao.2</property>
        <property name="schemas">rc_schema2,pay_schema2</property>
    </user>
                            
    <!-- 用戶3,只讀權限-->
    <user name="user3">
        <property name="password">huachao.3</property>
        <property name="schemas">rc_schema2,pay_schema2</property>
        <property name="readOnly">true</property>
    </user>

</mycat:server>
  1. 防火墻中打開 8066 和 9066 端口
    MyCat 的默認數據端口為 8066, mycat 通過這個端口接收數據庫客戶端的訪問請求。管理端口為 9066, 用來接收 mycat 監控命令、查詢 mycat 運行狀況、重新加載配置文件等。
[root@edu-mycat-01 mycat]# vi /etc/sysconfig/iptables

增加:

## MyCat
-A INPUT -m state --state NEW -m tcp -p tcp --dport 8066 -j ACCEPT
-A INPUT -m state --state NEW -m tcp -p tcp --dport 9066 -j ACCEPT

重啟防火墻:

[root@edu-mycat-01 mycat]# service iptables restart
  1. 修改 log 日志級別為 debug,以便通過日志確認基于 MyCat 的 MySQL 數據庫集群讀寫分離的數據操作狀態(可以在正式上生產前改成 info 級別)
[mycat@edu-mycat-01 conf]$ vi /usr/local/mycat/conf/log4j.xml
image.png
  1. 啟動 MyCat
[mycat@edu-mycat-01 bin]$ cd /usr/local/mycat/bin/

(1) 控制臺啟動, 這種啟動方式在控制臺關閉后, MyCat 服務也將關閉,適合調試使用:

[mycat@edu-mycat-01 bin]$ ./mycat console

(2) 可以采用以下后臺啟動的方式:

[mycat@edu-mycat-01 bin]$ ./mycat start
Starting Mycat-server...

(對應的, 重啟: ./mycat restart , 關閉: ./mycat stop

MyCat 連接測試

(1) 如果本地 Windows 安裝有 MySQL, 可以使用已有的 mysql 客戶端遠程操作 MyCat



(2) 如果為了方便,需要在 MyCat 主機上對 MyCat 進行操作(把 MyCat 當是本地 MySQL 來操作),可以在 MyCat 節點主機上安裝 MySQL 客戶端:

[mycat@edu-mycat-01 bin]$ su root
[root@edu-mycat-01 bin]# yum install mysql

使用安裝好的 mysql 客戶端登錄 MyCat

[mycat@edu-mycat-01 bin]$ mysql -uuser2 -phuachao.2 -h192.168.175.202 -P8066
[root@edu-mycat-01 mycat]# vi /etc/my.cnf

增加:

[client]
default-character-set=utf8

保存后再查詢,亂碼問題解決, 如下:


(3) 使用第三方 MySQL 管理客戶端連接 MyCat 測試( navicat 支持, MySQL-Front 兼容性不太好),以 navicat 為例:

讀寫分離測試

(1) 監聽 MyCat 日志

[mycat@edu-mycat-01 ~]$ cd /usr/local/mycat/logs/
[mycat@edu-mycat-01 logs]$ tail -f mycat.log

(2) 讀測試

$ mysql -uuser2 -phuachao.2 -h192.168.175.202 -P8066

多次執行 select * from edu_user 語句, MyCat 打印出來的日志信息顯示讀操作請求都是路由到 Slave 節點( 192.168.175.201)。

(2) 寫測試

mysql> insert into edu_user (userName, pwd) values('吳水成', 'roncoo.com');

多次執行以上插入語句, 發現新增數據都是從 Master 節點( 192.168.175.200) 插進入的,并且 Slave 節點通過 Binlog 同步了 Master 節點中的數據。


綜上,基于 MyCat 的讀寫分離集群配置成功。

參考文檔

最后編輯于
?著作權歸作者所有,轉載或內容合作請聯系作者
平臺聲明:文章內容(如有圖片或視頻亦包括在內)由作者上傳并發布,文章內容僅代表作者本人觀點,簡書系信息發布平臺,僅提供信息存儲服務。
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市,隨后出現的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 228,030評論 6 531
  • 序言:濱河連續發生了三起死亡事件,死亡現場離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機,發現死者居然都...
    沈念sama閱讀 98,310評論 3 415
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事。” “怎么了?”我有些...
    開封第一講書人閱讀 175,951評論 0 373
  • 文/不壞的土叔 我叫張陵,是天一觀的道長。 經常有香客問我,道長,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 62,796評論 1 309
  • 正文 為了忘掉前任,我火速辦了婚禮,結果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當我...
    茶點故事閱讀 71,566評論 6 407
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發上,一...
    開封第一講書人閱讀 55,055評論 1 322
  • 那天,我揣著相機與錄音,去河邊找鬼。 笑死,一個胖子當著我的面吹牛,可吹牛的內容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 43,142評論 3 440
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 42,303評論 0 288
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后,有當地人在樹林里發現了一具尸體,經...
    沈念sama閱讀 48,799評論 1 333
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 40,683評論 3 354
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發現自己被綠了。 大學時的朋友給我發了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 42,899評論 1 369
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 38,409評論 5 358
  • 正文 年R本政府宣布,位于F島的核電站,受9級特大地震影響,放射性物質發生泄漏。R本人自食惡果不足惜,卻給世界環境...
    茶點故事閱讀 44,135評論 3 347
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 34,520評論 0 26
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至,卻和暖如春,著一層夾襖步出監牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 35,757評論 1 282
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個月前我還...
    沈念sama閱讀 51,528評論 3 390
  • 正文 我出身青樓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 47,844評論 2 372