環境
主節點
操作系統: CentOS-6.6-x86_64
JDK 版本: jdk1.7.0_45
MySQL 版本: mysql-5.6.26.tar.gz
IP: 192.168.175.200
主機名: huachao從節點
操作系統: CentOS-6.6-x86_64
JDK 版本: jdk1.7.0_45
MySQL 版本: mysql-5.6.26.tar.gz
IP: 192.168.175.201
主機名: mini1mycat節點
操作系統: CentOS-6.6-x86_64
MyCat 版本: Mycat-server-1.4-release-20151019230038-linux.tar.gz
JDK 版本: jdk1.7.0_45
IP: 192.168.175.202
主機名: mini2
MyCat 介紹
-
MyCat 官網
MyCat 的讀寫分離是基于后端 MySQL 集群的主從同步來實現的, 而 MyCat 提供語句的分發功能。 MyCat1.4 開始支持 MySQL 主從復制狀態綁定的讀寫分離機制,讓讀更加安全可靠。
MyCat 的安裝
- 設置 MyCat 的主機名和 IP 與主機名的映射
# vi /etc/sysconfig/network
NETWORKING=yes
HOSTNAME=mini2
# vi /etc/hosts
127.0.0.1 huachao
192.168.175.200 huachao
192.168.175.201 mini1
192.168.175.202 mini2
因為 MyCat 是用 Java 開發的,因此 MyCat 運行需要安裝 JDK(準確來說是 JRE 就夠了),并且需要 JDK1.7 或以上版本
創建 mycat 用戶并設置密碼(可選操作)
# useradd mycat
# passwd mycat
- 上傳安裝包
Mycat-server-1.4-release-20151019230038-linux.tar.gz
到 MyCat 服務器中的/home/mycat
目錄,并解壓并移動到/usr/local/mycat
目錄
$ tar -zxvf Mycat-server-1.4-release-20151019230038-linux.tar.gz
$ su root
Password:
# mv /home/mycat/mycat /usr/local/
# cd /usr/local/mycat/
# ll
- 設置 MyCat 的環境變量(可選操作)
# vi /etc/profile
## mycat env
export MYCAT_HOME=/usr/local/mycat
export PATH=$PATH:$MYCAT_HOME/bin
# source /etc/profile
配置 MyCat
在配置 MyCat 前,請確認 MySQL 的主從復制安裝配置已完成并正常運行。 MySQL 主從數據的同步在 MySQL 中配置, MyCat 不負責數據同步的問題。
補充:
??(1) MySQL 主從復制配置中,如果涉及到函數或存儲過程的同步復制,需要在/etc/my.cnf 中的[mysqld]段中增加配置log_bin_trust_function_creators=true
或在客戶端中設置set global
log_bin_trust_function_creators = 1;
??(2) 如果要做讀寫分離下的主從切換, 那么從節點也有可能會變為寫節點,因此從節點就不能設置為只讀 read_only=1 。
??(3) Linux 版本的 MySQL,需要設置為 MySQL 大小寫不敏感,否則可能會發生找不到表的問題。 可在/etc/my.cnf
的[mysqld]段中增加lower_case_table_names=1
配置 MyCat 的 schema.xml
schema.xml 是 MyCat 最重要的配置文件之一, 用于設置 MyCat 的邏輯庫、表、數據節點、dataHost 等內容,
[mycat@edu-mycat-01 conf]$ cd /usr/local/mycat/conf/
[mycat@edu-mycat-01 conf]$ vi schema.xml
<?xml version="1.0"?>
<!DOCTYPE mycat:schema SYSTEM "schema.dtd">
<mycat:schema xmlns:mycat="http://org.opencloudb/">
<!-- 定義MyCat的邏輯庫 -->
<!-- schema name="rc_schema1" checkSQLschema="false" sqlMaxLimit="100" dataNode="rc_dn1"></schema -->
<!-- schema name="pay_schema1" checkSQLschema="false" sqlMaxLimit="100" dataNode="pay_dn1"></schema -->
<schema name="rc_schema2" checkSQLschema="false" sqlMaxLimit="100" dataNode="rc_dn2"></schema>
<schema name="pay_schema2" checkSQLschema="false" sqlMaxLimit="100" dataNode="pay_dn2"></schema>
<!-- 定義MyCat的數據節點 -->
<!-- dataNode name="rc_dn1" dataHost="dtHost1" database="roncoo" / -->
<!-- dataNode name="pay_dn1" dataHost="dtHost1" database="edu_simple_pay" / -->
<dataNode name="rc_dn2" dataHost="dtHost2" database="huachao" />
<dataNode name="pay_dn2" dataHost="dtHost2" database="ron" />
<!-- 注意:schema中的每一個dataHost中的host屬性值必須唯一,否則會出現主從在所有dataHost中全部切換的現象。 -->
<!-- 定義數據主機dtHost1,只連接到MySQL讀寫分離集群中的Master節點,不使用MyCat托管MySQL主從切換 -->
<!--
<dataHost name="dtHost1" maxCon="500" minCon="20" balance="0"
writeType="0" dbType="mysql" dbDriver="native" switchType="1" slaveThreshold="100">
<heartbeat>select user()</heartbeat>
<writeHost host="hostM1" url="192.168.1.205:3306" user="root" password="www.roncoo.com" />
</dataHost>
-->
<!-- 使用MyCat托管MySQL主從切換 -->
<!-- 定義數據主機dtHost2,連接到MySQL讀寫分離集群,并配置了讀寫分離和主從切換 -->
<dataHost name="dtHost2" maxCon="500" minCon="20" balance="1"
writeType="0" dbType="mysql" dbDriver="native" switchType="2" slaveThreshold="100">
<!-- 通過show slave status檢測主從狀態,當主宕機以后,發生切換,從變為主,原來的主變為從,這時候show slave
status就會發生錯誤,因為原來的主沒有開啟slave,不建議直接使用switch操作,而是在DB中做主從對調。 -->
<heartbeat>show slave status</heartbeat>
<!-- can have multi write hosts -->
<writeHost host="hostM2" url="192.168.175.200:3306" user="root" password="huachao" />
<writeHost host="hostS2" url="192.168.175.201:3306" user="root" password="huachao" />
</dataHost>
<!-- 參數balance決定了哪些MySQL服務器參與到讀SQL的負載均衡中 -->
<!-- balance="0",為不開啟讀寫分離,所有讀操作都發送到當前可用的writeHost上-->
<!-- balance="1",全部的readHost與stand by writeHost參與select語句的負載均衡-->
<!-- balance="2",所有讀操作都隨機的在writeHost、readHost上分發-->
<!-- MyCat1.4版本中,若想支持MySQL一主一從的標準配置,并且在主節點宕機的情況下,從節點還能讀取數據,
則需要在MyCat里配置為兩個writeHost并設置balance="1" -->
<!-- writeType="0",所有寫操作發送到配置的第一個writeHost,第一個掛了切到還生存的第二個writeHost-->
<!-- writeType="1",僅僅對于galera for mysql集群這種多主多節點都能寫入的集群起效,此時Mycat會隨機選擇一個writeHost并寫入數據,
對于非galera for mysql集群,請不要配置writeType=1,會導致數據庫不一致的嚴重問題 -->
</mycat:schema>
MyCat1.4 開始支持 MySQL 主從復制狀態綁定的讀寫分離機制,讓讀更加安全可靠,配置如下:
MyCat 心跳檢查語句配置為 show slave status , dataHost
上定義兩個新屬性: switchType="2"
與slaveThreshold="100"
,此時意味著開啟 MySQL 主從復制狀態綁定的讀寫分離與切換機制, MyCat 心跳機制通過檢測 show slave status
中的"Seconds_Behind_Master", "Slave_IO_Running", "Slave_SQL_Running"
三 個 字 段 來 確 定 當 前 主 從 同 步 的 狀 態 以 及Seconds_Behind_Master
主從復制時延,當 Seconds_Behind_Master
大于slaveThreshold
時,讀寫分離篩選器會過濾掉此 Slave機器,防止讀到很久之前的舊數據,而當主節點宕機后,切換邏輯會檢查 Slave 上的 Seconds_Behind_Master
是否為 0,為 0 時則表示主從同步,可以安全切換,否則不會切換。
- 配置 server.xml
server.xml 主要用于設置系統變量、 管理用戶、設置用戶權限等。
[wusc@edu-mycat-01 conf]$ vi server.xml
<?xml version="1.0" encoding="UTF-8"?>
<!-- - - Licensed under the Apache License, Version 2.0 (the "License");
- you may not use this file except in compliance with the License. - You
may obtain a copy of the License at - - http://www.apache.org/licenses/LICENSE-2.0
- - Unless required by applicable law or agreed to in writing, software -
distributed under the License is distributed on an "AS IS" BASIS, - WITHOUT
WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied. - See the
License for the specific language governing permissions and - limitations
under the License. -->
<!DOCTYPE mycat:server SYSTEM "server.dtd">
<mycat:server xmlns:mycat="http://org.opencloudb/">
<system>
<property name="defaultSqlParser">druidparser</property>
<property name="charset">utf8mb4</property>
<!-- <property name="useCompression">1</property>--> <!--1為開啟mysql壓縮協議-->
<!-- <property name="processorBufferChunk">40960</property> -->
<!--
<property name="processors">1</property>
<property name="processorExecutor">32</property>
-->
<!--默認是65535 64K 用于sql解析時最大文本長度 -->
<!--<property name="maxStringLiteralLength">65535</property>-->
<!--<property name="sequnceHandlerType">0</property>-->
<!--<property name="backSocketNoDelay">1</property>-->
<!--<property name="frontSocketNoDelay">1</property>-->
<!--<property name="processorExecutor">16</property>-->
<!--
<property name="mutiNodeLimitType">1</property> 0:開啟小數量級(默認) ;1:開啟億級數據排序
<property name="mutiNodePatchSize">100</property> 億級數量排序批量
<property name="processors">32</property> <property name="processorExecutor">32</property>
<property name="serverPort">8066</property> <property name="managerPort">9066</property>
<property name="idleTimeout">300000</property> <property name="bindIp">0.0.0.0</property>
<property name="frontWriteQueueSize">4096</property> <property name="processors">32</property> -->
</system>
<!-- 用戶1,對應的MyCat邏輯庫連接到的數據節點對應的主機為MySQL主從復制配置中的Master節點,
沒實現讀寫分離,讀寫都在該Master節點中進行 -->
<!--
<user name="user1">
<property name="password">roncoo.1</property>
<property name="schemas">rc_schema1,pay_schema1</property>
</user>
-->
<!-- 用戶2,對應的MyCat邏輯庫連接到的數據節點對應的主機為主從復制集群,并通過MyCat實現了讀寫分離 -->
<user name="user2">
<property name="password">huachao.2</property>
<property name="schemas">rc_schema2,pay_schema2</property>
</user>
<!-- 用戶3,只讀權限-->
<user name="user3">
<property name="password">huachao.3</property>
<property name="schemas">rc_schema2,pay_schema2</property>
<property name="readOnly">true</property>
</user>
</mycat:server>
- 防火墻中打開 8066 和 9066 端口
MyCat 的默認數據端口為 8066, mycat 通過這個端口接收數據庫客戶端的訪問請求。管理端口為 9066, 用來接收 mycat 監控命令、查詢 mycat 運行狀況、重新加載配置文件等。
[root@edu-mycat-01 mycat]# vi /etc/sysconfig/iptables
增加:
## MyCat
-A INPUT -m state --state NEW -m tcp -p tcp --dport 8066 -j ACCEPT
-A INPUT -m state --state NEW -m tcp -p tcp --dport 9066 -j ACCEPT
重啟防火墻:
[root@edu-mycat-01 mycat]# service iptables restart
- 修改 log 日志級別為 debug,以便通過日志確認基于 MyCat 的 MySQL 數據庫集群讀寫分離的數據操作狀態(可以在正式上生產前改成 info 級別)
[mycat@edu-mycat-01 conf]$ vi /usr/local/mycat/conf/log4j.xml
- 啟動 MyCat
[mycat@edu-mycat-01 bin]$ cd /usr/local/mycat/bin/
(1) 控制臺啟動, 這種啟動方式在控制臺關閉后, MyCat 服務也將關閉,適合調試使用:
[mycat@edu-mycat-01 bin]$ ./mycat console
(2) 可以采用以下后臺啟動的方式:
[mycat@edu-mycat-01 bin]$ ./mycat start
Starting Mycat-server...
(對應的, 重啟: ./mycat restart , 關閉: ./mycat stop )
MyCat 連接測試
(1) 如果本地 Windows 安裝有 MySQL, 可以使用已有的 mysql 客戶端遠程操作 MyCat
(2) 如果為了方便,需要在 MyCat 主機上對 MyCat 進行操作(把 MyCat 當是本地 MySQL 來操作),可以在 MyCat 節點主機上安裝 MySQL 客戶端:
[mycat@edu-mycat-01 bin]$ su root
[root@edu-mycat-01 bin]# yum install mysql
使用安裝好的 mysql 客戶端登錄 MyCat
[mycat@edu-mycat-01 bin]$ mysql -uuser2 -phuachao.2 -h192.168.175.202 -P8066
[root@edu-mycat-01 mycat]# vi /etc/my.cnf
增加:
[client]
default-character-set=utf8
保存后再查詢,亂碼問題解決, 如下:
(3) 使用第三方 MySQL 管理客戶端連接 MyCat 測試( navicat 支持, MySQL-Front 兼容性不太好),以 navicat 為例:
讀寫分離測試
(1) 監聽 MyCat 日志
[mycat@edu-mycat-01 ~]$ cd /usr/local/mycat/logs/
[mycat@edu-mycat-01 logs]$ tail -f mycat.log
(2) 讀測試
$ mysql -uuser2 -phuachao.2 -h192.168.175.202 -P8066
多次執行 select * from edu_user 語句, MyCat 打印出來的日志信息顯示讀操作請求都是路由到 Slave 節點( 192.168.175.201)。
(2) 寫測試
mysql> insert into edu_user (userName, pwd) values('吳水成', 'roncoo.com');
多次執行以上插入語句, 發現新增數據都是從 Master 節點( 192.168.175.200) 插進入的,并且 Slave 節點通過 Binlog 同步了 Master 節點中的數據。
綜上,基于 MyCat 的讀寫分離集群配置成功。