mycat學習02--摸打滾爬之mycat主從復制于讀寫分離（線上經(jīng)驗）

上一篇文章講到了mycat的安裝和配置，相信驗證過的朋友已經(jīng)知道了，上一篇的做法已經(jīng)實現(xiàn)了主從復制與讀寫分離的效果，這里給大家詳細說以下讀寫分離部分：

創(chuàng)新互聯(lián)建站長期為千余家客戶提供的網(wǎng)站建設服務，團隊從業(yè)經(jīng)驗10年，關注不同地域、不同群體，并針對不同對象提供差異化的產(chǎn)品和服務；打造開放共贏平臺，與合作伙伴共同營造健康的互聯(lián)網(wǎng)生態(tài)環(huán)境。為江海企業(yè)提供專業(yè)的成都網(wǎng)站設計、成都網(wǎng)站制作，江海網(wǎng)站改版等技術(shù)服務。擁有十多年豐富建站經(jīng)驗和眾多成功案例,為您定制開發(fā)。

我的架構(gòu)還是雙主雙從架構(gòu)：（試驗環(huán)境1主一從）效果一樣，就是加幾個配置的事情，和上一篇一樣希望讀完整篇文擋，中間出現(xiàn)的錯誤點后邊有說明：

服務器IP說明
Mycat192.168.0.2mycat服務器，連接數(shù)據(jù)庫時，連接此服務器
database1192.168.0.3物理數(shù)據(jù)庫1，真正存儲數(shù)據(jù)的數(shù)據(jù)庫
database2192.168.0.4物理數(shù)據(jù)庫2，真正存儲數(shù)據(jù)的數(shù)據(jù)庫

Mycat作為主數(shù)據(jù)庫中間件，肯定是與代碼弱關聯(lián)的，所以代碼是不用修改的，使用Mycat后，連接數(shù)據(jù)庫是不變的，默認端口是8066。連接方式和普通數(shù)據(jù)庫一樣，如：jdbc:MySQL://192.168.0.2:8066/

server.xml

示例

<user name="test">
        <property name="password">test</property>  
        <property name="schemas">lunch</property>  
        <property name="readOnly">false</property>  
        
        <!-- 表級 DML 權(quán)限設置 -->
        <!--                <privileges check="false">            <schema name="TESTDB" dml="0110" >                <table name="tb01" dml="0000"></table>                <table name="tb02" dml="1111"></table>            </schema>        </privileges>                -->
    </user>

重點關注下面這段，其他默認即可。

參數(shù)說明
user用戶配置節(jié)點
--name登錄的用戶名，也就是連接Mycat的用戶名
--password登錄的密碼，也就是連接Mycat的密碼
--schemas數(shù)據(jù)庫名，這里會和schema.xml中的配置關聯(lián)，多個用逗號分開，例如需要這個用戶需要管理兩個數(shù)據(jù)庫db1,db2，則配置db1,dbs
--privileges配置用戶針對表的增刪改查的權(quán)限，具體見文檔吧

我這里配置了一個賬號test 密碼也是test,針對數(shù)據(jù)庫lunch,讀寫權(quán)限都有，沒有針對表做任何特殊的權(quán)限。

schema.xml
schema.xml是最主要的配置項，首先看我的配置文件。

<?xml version="1.0"?><!DOCTYPE mycat:schema SYSTEM "schema.dtd"><mycat:schema xmlns:mycat="http://io.mycat/"><!-- 數(shù)據(jù)庫配置，與server.xml中的數(shù)據(jù)庫對應 -->
    <schema name="lunch" checkSQLschema="false" sqlMaxLimit="100">
        <table name="lunchmenu" dataNode="dn1"  />
        <table name="restaurant" dataNode="dn1"  />
        <table name="userlunch" dataNode="dn1"  />
        <table name="users" dataNode="dn1"  />
        <table name="dictionary" primaryKey="id" autoIncrement="true" dataNode="dn1,dn2"  rule="mod-long" />

        
    </schema><!-- 分片配置 -->
    <dataNode name="dn1" dataHost="test1" database="lunch" />
    <dataNode name="dn2" dataHost="test2" database="lunch" /><!-- 物理數(shù)據(jù)庫配置 -->
    <dataHost name="test1" maxCon="1000" minCon="10" balance="0"  writeType="0" dbType="mysql" dbDriver="native">
        <heartbeat>select user();</heartbeat>
        <writeHost host="hostM1" url="192.168.0.2:3306" user="root" password="123456">  
        </writeHost>
    </dataHost>

    <dataHost name="test2" maxCon="1000" minCon="10" balance="0" writeType="0" dbType="mysql" dbDriver="native">
        <heartbeat>select user();</heartbeat>
        <writeHost host="hostS1" url="192.168.0.3:3306" user="root" password="123456">  
        </writeHost>
    </dataHost></mycat:schema>
參數(shù)說明
schema數(shù)據(jù)庫設置，此數(shù)據(jù)庫為邏輯數(shù)據(jù)庫，name與server.xml中schema對應
dataNode分片信息，也就是分庫相關配置
dataHost物理數(shù)據(jù)庫，真正存儲數(shù)據(jù)的數(shù)據(jù)庫

每個節(jié)點的屬性逐一說明：

schema:

屬性說明
name邏輯數(shù)據(jù)庫名，與server.xml中的schema對應
checkSQLschema數(shù)據(jù)庫前綴相關設置，建議看文檔，這里暫時設為folse
sqlMaxLimitselect 時默認的limit，避免查詢?nèi)?/td>

table:

屬性說明
name表名，物理數(shù)據(jù)庫中表名
dataNode表存儲到哪些節(jié)點，多個節(jié)點用逗號分隔。節(jié)點為下文dataNode設置的name
primaryKey主鍵字段名，自動生成主鍵時需要設置
autoIncrement是否自增
rule分片規(guī)則名，具體規(guī)則下文rule詳細介紹

dataNode

屬性說明
name節(jié)點名，與table中dataNode對應
datahost物理數(shù)據(jù)庫名，與datahost中name對應
database物理數(shù)據(jù)庫中數(shù)據(jù)庫名

dataHost

屬性說明
name物理數(shù)據(jù)庫名，與dataNode中dataHost對應
balance均衡負載的方式
writeType寫入方式
dbType數(shù)據(jù)庫類型
heartbeat心跳檢測語句，注意語句結(jié)尾的分號要加。

應用場景

數(shù)據(jù)庫分表分庫

配置如下：

<?xml version="1.0"?><!DOCTYPE mycat:schema SYSTEM "schema.dtd"><mycat:schema xmlns:mycat="http://io.mycat/"><!-- 數(shù)據(jù)庫配置，與server.xml中的數(shù)據(jù)庫對應 -->
    <schema name="lunch" checkSQLschema="false" sqlMaxLimit="100">
        <table name="lunchmenu" dataNode="dn1"  />
        <table name="restaurant" dataNode="dn1"  />
        <table name="userlunch" dataNode="dn1"  />
        <table name="users" dataNode="dn1"  />
        <table name="dictionary" primaryKey="id" autoIncrement="true" dataNode="dn1,dn2"  rule="mod-long" />

        
    </schema><!-- 分片配置 -->
    <dataNode name="dn1" dataHost="test1" database="lunch" />
    <dataNode name="dn2" dataHost="test2" database="lunch" /><!-- 物理數(shù)據(jù)庫配置 -->
    <dataHost name="test1" maxCon="1000" minCon="10" balance="0"  writeType="0" dbType="mysql" dbDriver="native">
        <heartbeat>select user();</heartbeat>
        <writeHost host="hostM1" url="192.168.0.2:3306" user="root" password="123456">  
        </writeHost>
    </dataHost>

    <dataHost name="test2" maxCon="1000" minCon="10" balance="0" writeType="0" dbType="mysql" dbDriver="native">
        <heartbeat>select user();</heartbeat>
        <writeHost host="hostS1" url="192.168.0.3:3306" user="root" password="123456">  
        </writeHost>
    </dataHost></mycat:schema>

我在192.168.0.2、192.168.0.3均有數(shù)據(jù)庫lunch。
lunchmenu、restaurant、userlunch、users這些表都只寫入節(jié)點dn1，也就是192.168.0.2這個服務，而dictionary寫入了dn1、dn2兩個節(jié)點，也就是192.168.0.2、192.168.0.3這兩臺服務器。分片的規(guī)則為：mod-long。
主要關注rule屬性，rule屬性的內(nèi)容來源于rule.xml這個文件，Mycat支持10種分表分庫的規(guī)則，基本能滿足你所需要的要求，這個必須贊一個，其他數(shù)據(jù)庫中間件好像都沒有這么多。
table中的rule屬性對應的就是rule.xml文件中tableRule的name,具體有哪些分表和分庫的實現(xiàn)，建議還是看下文檔。我這里選擇的mod-long就是將數(shù)據(jù)平均拆分。因為我后端是兩臺物理庫，所以rule.xml中mod-long對應的function count為2，見下面部分代碼：

<tableRule name="mod-long">
        <rule>
            <columns>id</columns>
            <algorithm>mod-long</algorithm>
        </rule>
    </tableRule>
    <function name="mod-long" class="io.mycat.route.function.PartitionByMod">
        <!-- how many data nodes -->
        <property name="count">2</property>
    </function>

數(shù)據(jù)庫讀寫分離

配置如下：

<?xml version="1.0"?><!DOCTYPE mycat:schema SYSTEM "schema.dtd"><mycat:schema xmlns:mycat="http://io.mycat/"><!-- 數(shù)據(jù)庫配置，與server.xml中的數(shù)據(jù)庫對應 -->
    <schema name="lunch" checkSQLschema="false" sqlMaxLimit="100">
        <table name="lunchmenu" dataNode="dn1"  />
        <table name="restaurant" dataNode="dn1"  />
        <table name="userlunch" dataNode="dn1"  />
        <table name="users" dataNode="dn1"  />
        <table name="dictionary" primaryKey="id" autoIncrement="true" dataNode="dn1"  />

        
    </schema><!-- 分片配置 -->
    <dataNode name="dn1" dataHost="test1" database="lunch" /><!-- 物理數(shù)據(jù)庫配置 -->
    <dataHost name="test1" maxCon="1000" minCon="10" balance="1"  writeType="0" dbType="mysql" dbDriver="native">
        <heartbeat>select user();</heartbeat>
        <writeHost host="hostM1" url="192.168.0.2:3306" user="root" password="123456">  
        <readHost host="hostM1" url="192.168.0.3:3306" user="root" password="123456">   
        </readHost>
        </writeHost>
    </dataHost></mycat:schema>

這樣的配置與前一個示例配置改動如下：
刪除了table分配的規(guī)則,以及datanode只有一個
datahost也只有一臺，但是writehost總添加了readhost,balance改為1，表示讀寫分離。
以上配置達到的效果就是102.168.0.2為主庫，192.168.0.3為從庫。

注意：Mycat主從分離只是在讀的時候做了處理，寫入數(shù)據(jù)的時候，只會寫入到writehost，需要通過mycat的主從復制將數(shù)據(jù)復制到readhost，這個問題當時候我糾結(jié)了好久，數(shù)據(jù)寫入writehost后，readhost一直沒有數(shù)據(jù)，以為是自己配置的問題，后面才發(fā)現(xiàn)Mycat就沒有實現(xiàn)主從復制的功能，畢竟數(shù)據(jù)庫本身自帶的這個功能才是最高效穩(wěn)定的。

至于其他的場景，如同時主從和分表分庫也是支持的了，只要了解這個實現(xiàn)以后再去修改配置，都是可以實現(xiàn)的。而熱備及故障專業(yè)官方推薦使用haproxy配合一起使用，大家可以試試。

使用

Mycat的啟動也很簡單，啟動命令在Bin目錄：

##啟動mycat start##停止mycat stop##重啟mycat restart

如果在啟動時發(fā)現(xiàn)異常，在logs目錄中查看日志。

  • wrapper.log 為程序啟動的日志，啟動時的問題看這個

  • mycat.log 為腳本執(zhí)行時的日志，SQL腳本執(zhí)行報錯后的具體錯誤內(nèi)容,查看這個文件。mycat.log是最新的錯誤日志，歷史日志會根據(jù)時間生成目錄保存。

mycat啟動后，執(zhí)行命令不成功，可能實際上配置有錯誤，導致后面的命令沒有很好的執(zhí)行。

Mycat帶來的最大好處就是使用是完全不用修改原有代碼的，在mycat通過命令啟動后，你只需要將數(shù)據(jù)庫連接切換到Mycat的地址就可以了。如下面就可以進行連接了：

 mysql -h292.168.0.1 -P8806 -uroot -p123456

連接成功后可以執(zhí)行sql腳本了。
所以，可以直接通過sql管理工具（如：navicat、datagrip）連接，執(zhí)行腳本。我一直用datagrip來進行日常簡單的管理，這個很方便。

Mycat還有一個管理的連接，端口號是9906.

 mysql -h292.168.0.1 -P9906 -uroot -p123456

連接后可以根據(jù)管理命令查看Mycat的運行情況，當然，喜歡UI管理方式的人，可以安裝一個Mycat-Web來進行管理，有興趣自行搜索。

簡而言之，開發(fā)中使用Mycat和直接使用Mysql機會沒有差別。

常見問題

使用Mycat后總會遇到一些坑，我將自己遇到的一些問題在這里列一下，希望能與大家有共鳴：

  • Mycat是不是配置以后，就能完全解決分表分庫和讀寫分離問題？
    Mycat配合數(shù)據(jù)庫本身的復制功能，可以解決讀寫分離的問題，但是針對分表分庫的問題，不是完美的解決?；蛘哒f，至今為止，業(yè)界沒有完美的解決方案。
    分表分庫寫入能完美解決，但是，不能完美解決主要是聯(lián)表查詢的問題，Mycat支持兩個表聯(lián)表的查詢，多余兩個表的查詢不支持。 其實，很多數(shù)據(jù)庫中間件關于分表分庫后查詢的問題，都是需要自己實現(xiàn)的，而且節(jié)本都不支持聯(lián)表查詢，Mycat已經(jīng)算做地非常先進了。
    分表分庫的后聯(lián)表查詢問題，大家通過合理數(shù)據(jù)庫設計來避免。

  • Mycat支持哪些數(shù)據(jù)庫，其他平臺如 .net、PHP能用嗎？
    官方說了，支持的數(shù)據(jù)庫包括MySQL、SQL Server、Oracle、DB2、PostgreSQL 等主流數(shù)據(jù)庫，很贊。
    盡量用Mysql,我試過SQL Server，會有些小問題，因為部分語法有點差異。

  • Mycat 非JAVA平臺如 .net、PHP能用嗎？
    可以用。這一點MyCat做的也很棒。

當前標題：mycat學習02--摸打滾爬之mycat主從復制于讀寫分離（線上經(jīng)驗）
網(wǎng)站路徑：http://muchs.cn/article24/ghecje.html

成都網(wǎng)站建設公司_創(chuàng)新互聯(lián)，為您提供網(wǎng)站營銷、網(wǎng)站內(nèi)鏈、Google、網(wǎng)站收錄、品牌網(wǎng)站設計、外貿(mào)建站

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請盡快告知，我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時需注明來源： 創(chuàng)新互聯(lián)

網(wǎng)站優(yōu)化排名