zoukankan      html  css  js  c++  java
  • mysql读写分离

    什么是读写分离

      在数据库集群架构中,让主库负责处理事务性查询,而从库只负责处理select查询,让两者分工明确达到提高数据库整体读写性能。当然,主数据库另外一个功能就是负责将事务性查询导致的数据变更同步到从库中,也就是写操作。

    读写分离的好处

       1)分摊服务器压力,提高机器的系统处理效率

            读写分离适用于读远比写的场景,如果有一台服务器,当select很多时,update和delete会被这些select访问中的数据堵塞,等待select结束,并发性能并不高,而主从只负责各自的写和读,极大程度的缓解X锁和S锁争用;

           假如我们有1主3从,不考虑上述1中提到的从库单方面设置,假设现在1分钟内有10条写入,150条读取。那么,1主3从相当于共计40条写入,而读取总数没变,因此平均下来每台服务器承担了10条写入和50条读取(主库不承担读取操作)。因此,虽然写入没变,但是读取大大分摊了,提高了系统性能。另外,当读取被分摊后,又间接提高了写入的性能。所以,总体性能提高了,说白了就是拿机器和带宽换性能;

        2)增加冗余,提高服务可用性,当一台数据库服务器宕机后可以调整另外一台从库以最快速度恢复服务

    什么是  Mycat

      是一个开源的分布式数据库系统,但是因为数据库一般都有自己的数据库引擎,而Mycat并没有属于自己的独有数据库引擎,所有严格意义上说并不能算是一个完整的数据库系统,只能说是一个在应用和数据库之间起桥梁作用的中间件。

      在Mycat中间件出现之前,MySQL主从复制集群,如果要实现读写分离,一般是在程序段实现,这样就带来了一个问题,即数据段和程序的耦合度太高,如果数据库的地址发生了改变,那么我的程序也要进行相应的修改,如果数据库不小心挂掉了,则同时也意味着程序的不可用,而对于很多应用来说,并不能接受;

      引入Mycat中间件能很好地对程序和数据库进行解耦,这样,程序只需关注数据库中间件的地址,而无需知晓底层数据库是如何提供服务的,大量的通用数据聚合、事务、数据源切换等工作都由中间件来处理;

      Mycat中间件的原理是对数据进行分片处理,从原有的一个库,被切分为多个分片数据库,所有的分片数据库集群构成完成的数据库存储,有点类似磁盘阵列中的RAID0.

    实现读写分离

      准备工作

        步骤一:创建数据库

    #创建数据库
    CREATE DATABASE weibo_simple

        步骤二:创建用户表

    CREATE TABLE `t_users` (
      `user_id` varchar(64) NOT NULL COMMENT '注册用户ID',
      `user_email` varchar(64) NOT NULL COMMENT '注册用户邮箱',
      `user_password` varchar(64) NOT NULL COMMENT '注册用户密码',
      `user_nikename` varchar(64) NOT NULL COMMENT '注册用户昵称',
      `user_creatime` datetime NOT NULL COMMENT '注册时间',
      `user_status` tinyint(1) NOT NULL COMMENT '验证状态  1:已验证  0:未验证',
      `user_deleteflag` tinyint(1) NOT NULL COMMENT '删除标记  1:已删除 0:未删除',
      PRIMARY KEY (`user_id`)
    ) ENGINE=InnoDB DEFAULT CHARSET=utf8;

        步骤三:创建微博表

    CREATE TABLE `t_message` (
      `messages_id` varchar(64) NOT NULL COMMENT '微博ID',
      `user_id` varchar(64) NOT NULL COMMENT '发表用户',
      `messages_info` varchar(255) DEFAULT NULL COMMENT '微博内容',
      `messages_time` datetime DEFAULT NULL COMMENT '发布时间',
      `messages_commentnum` int(12) DEFAULT NULL COMMENT '评论次数',
      `message_deleteflag` tinyint(1) NOT NULL COMMENT '删除标记 1:已删除 0:未删除',
      `message_viewnum` int(12) DEFAULT NULL COMMENT '被浏览量',
      PRIMARY KEY (`messages_id`),
      KEY `user_id` (`user_id`),
      CONSTRAINT `t_message_ibfk_1` FOREIGN KEY (`user_id`) REFERENCES `t_users` (`user_id`)
    ) ENGINE=InnoDB DEFAULT CHARSET=utf8;

      安装mycat

        步骤一:解压mycat,不要放在有中文目录的文件夹下

          

         步骤二:修改mycat目录下的conf文件夹中的server.xml文件,配置账户      

    <!DOCTYPE mycat:server SYSTEM "server.dtd">
    <mycat:server xmlns:mycat="http://org.opencloudb/">
                <!-- 添加user -->
               <user name="mycat_master">
                <property name="password">mycat_master</property>
                <property name="schemas">mycat</property>
               </user>
                
                <!-- 添加user -->
               <user name="mycat_slave">
                <property name="password">mycat_slave</property>
                <property name="schemas">mycat</property>
                <property name="readOnly">true</property>
               </user>
    
    </mycat:server>

        步骤三:配置schema.xml文件

    <?xml version="1.0"?>
    <!DOCTYPE mycat:schema SYSTEM "schema.dtd">
    <mycat:schema xmlns:mycat="http://org.opencloudb/">
                <schema name="mycat" checkSQLschema="true" sqlMaxLimit="100">
                    <table name="t_users" primaryKey="user_id" dataNode="dn1" rule="rule1"/>
                    <table name="t_message" type="global" primaryKey="messages_id" dataNode="dn1" />
                </schema>
                <dataNode name="dn1" dataHost="jdbchost" database="weibo_simple" />
               
                <dataHost name="jdbchost" maxCon="1000" minCon="10" balance="1"
                            writeType="0" dbType="mysql" dbDriver="native" switchType="1"
                            slaveThreshold="100">
                    <heartbeat>select user()</heartbeat>  
                    <writeHost host="hostMaster" url="192.168.138.187:3306" user="root" password="root">
                    </writeHost>
                    <writeHost host="hostSlave" url="192.168.138.188:3306" user="root" password="root"/>
                </dataHost>
    </mycat:schema>

        步骤四:配置rule.xml文件

    <!DOCTYPE mycat:rule SYSTEM "rule.dtd">
    <mycat:rule xmlns:mycat="http://org.opencloudb/">
        <tableRule name="rule1">
                    <rule>
                        <columns>user_id</columns>
                        <algorithm>func1</algorithm>
                    </rule>
                </tableRule>
                <function name="func1" class="org.opencloudb.route.function.AutoPartitionByLong">
                <property name="mapFile">autopartition-long.txt</property>
                </function>
    </mycat:rule>

        步骤五:配置启动日志文件log4j.xml

      <root>
        <level value="debug" />
        <appender-ref ref="FILE" />
         <!--<appender-ref ref="FILE" />-->
      </root>

        步骤六:启动mycat,默认端口为8066

          master

            

            master机器上可以进行读写操作

            

          slave

            

            slave机器上可以进行读操作,进行写操作时会报错

            

     注意注意注意特别注意

      1.在使用mycat连接SQLyog时,SQLyog版本不能太低,版本不能太低,不能太低,需要高版本!!!

      2.在双击启动mycat时,如果控制台一闪而过,参考方案如下

        修改startup_nowrap.bat启动文件,内容如下

    "%JAVA_CMD%" -server -Xms512M -Xmx600M -XX:MaxPermSize=64M  -XX:+AggressiveOpts -XX:MaxDirectMemorySize=1G -DMYCAT_HOME=%MYCAT_HOME% -cp "..conf;..lib*" org.opencloudb.MycatStartup
  • 相关阅读:
    python中xlrd模块
    2021, 8, 26模拟赛
    2021, 8,24 模拟赛
    每天挂 0 的小技巧
    2021,8,23 模拟赛
    异常处理
    64位 windows10,MYSQL8.0.13重置密码(忘记密码或者无法登录)
    Android仓库
    学习笔记索引
    「学习笔记」各类容斥反演总结
  • 原文地址:https://www.cnblogs.com/wnwn/p/12343136.html
Copyright © 2011-2022 走看看