电商六十九、按主键范围分片规则。按一致性哈希分片规则。

①分片规则有很多种。这里只讲两种比较常见的分片规则。

②其中一种为:按主键范围分片的规则。

<schema name="PINYOUGOUDB" checkSQLschema="false" sqlMaxLimit="100">
    
        <table name="tb_test" dataNode="dn1,dn2,dn3" rule="auto-sharding-long" />
                
    </schema>

mycat的逻辑数据库PINYOUGOUDB和逻辑表tb_test,分片规则rule="auto-sharding-long",就是按主键范围分片。

在哪里找到规则定义呢?在rule.xml文件中。

<tableRule name="auto-sharding-long">

名字与之前的auto-sharding-long对应,可以重命名和复制

        <rule>
            <columns>id</columns>

指明表中的列,以列id为标准,因为我们的表中主键名为id,所以此处写id,如果主键名不是id,则需要更该一下。


            <algorithm>rang-long</algorithm>

rang-long表示具体的规则,后面再function标签有定义。


        </rule>
    </tableRule>

<function name="rang-long"
        class="org.opencloudb.route.function.AutoPartitionByLong">
        <property name="mapFile">autopartition-long.txt</property>
    </function>

文件autopartition-long.txt可以在conf文件夹中找到。

# range start-end ,data node index
# K=1000,M=10000.
0-500M=0
500M-1000M=1
1000M-1500M=2

表示主键,在0-500万,存第一个分片

主键在500万-1000万,存第二个分片

主键在1000万-1500万,存第三个分片

此文件可以重命名和复制。

③另外一种规则是:按一致性哈希分片规则。

比如说:有的表的id不是连续的,且可能是很长的一段数字。

如:

这个时候用按主键范围分片的规则就不再适用了。可能远远超过定义的范围,且不连续。这个时候,把逻辑数据库平均分就可以了。这里我们有三分物理数据库,就平均分成三份。算法就是:一致性哈希算法。

在rule.xml文件中找到function为murmur的标签


    <function name="murmur"
        class="org.opencloudb.route.function.PartitionByMurmurHash">
        <property name="seed">0</property><!-- 默认是0 -->
        <property name="count">3</property><!-- 要分片的数据库节点数量,必须指定,否则没法分片 ,我们做测试,改成3-->
        <property name="virtualBucketTimes">160</property><!-- 一个实际的数据库节点被映射为这么多虚拟节点,默认是160倍,也就是虚拟节点数是物理节点数的160倍 -->
        <!-- <property name="weightMapFile">weightMapFile</property> 节点的权重,没有指定权重的节点默认是1。以properties文件的格式填写,以从0开始到count-1的整数值也就是节点索引为key,以节点权重值为值。所有权重值必须是正整数,否则以1代替 -->
        <!-- <property name="bucketMapPath">/etc/mycat/bucketMapPath</property> 
            用于测试时观察各物理节点与虚拟节点的分布情况,如果指定了这个属性,会把虚拟节点的murmur hash值与物理节点的映射按行输出到这个文件,没有默认值,如果不指定,就不会输出任何东西 -->
    </function>

可以对function标签进行复制,达到按多个(2、3、4、5等等)分片的目的。数字可以不同。

<tableRule name="sharding-by-murmur">
        <rule>
            <columns>id</columns>

这个主键名字可以更改,根据实际情况更改。可以对这个tableRule标签进行复制,达到多个不同名字主键使用按一致性哈希分片的规则。


            <algorithm>murmur</algorithm>
        </rule>
    </tableRule>

更改schema.xml的配置信息。

    <table name="tb_pay_log" dataNode="dn1,dn2,dn3" rule="sharding-by-murmur-order" />

不要忘记重启mycat

./mycat restart

做测试:

DROP TABLE IF EXISTS `tb_pay_log`;

CREATE TABLE `tb_pay_log` (
  `out_trade_no` VARCHAR(30) NOT NULL COMMENT '支付订单号',
  `create_time` DATETIME DEFAULT NULL COMMENT '创建日期',
  `pay_time` DATETIME DEFAULT NULL COMMENT '支付完成时间',
  `total_fee` BIGINT(20) DEFAULT NULL COMMENT '支付金额(分)',
  `user_id` VARCHAR(50) DEFAULT NULL COMMENT '用户ID',
  `transaction_id` VARCHAR(30) DEFAULT NULL COMMENT '交易号码',
  `trade_state` VARCHAR(1) DEFAULT NULL COMMENT '交易状态',
  `order_list` VARCHAR(200) DEFAULT NULL COMMENT '订单编号列表',
  `pay_type` VARCHAR(1) DEFAULT NULL COMMENT '支付类型',
  PRIMARY KEY (`out_trade_no`)
) ENGINE=INNODB DEFAULT CHARSET=utf8;
 

然后insert

INSERT  INTO `TB_PAY_LOG`(`out_trade_no`,`create_time`,`pay_time`,`total_fee`,`user_id`,`transaction_id`,`trade_state`,`order_list`,`pay_type`) VALUES ('201708261157265358046058','2017-08-26 11:57:26',NULL,1,'lijialong',NULL,'0','34','1'),('201708261221397410698125','2017-08-26 12:21:39',NULL,1,'lijialong',NULL,'0','35','1'),('201708261234474784646997','2017-08-26 12:34:47',NULL,1,'lijialong',NULL,'0','36','1'),('201708261247443132289031','2017-08-26 12:47:44','2017-08-26 12:48:22',3,'lijialong','4009852001201708268336481082','1','37,38','1');
要把表名改为大写。

使用mycat进行分片,最好把mysql的表定义成大写,以免后期更改。

查看mysql数据库,发现大致平均分开存储数据。

发布了122 篇原创文章 · 获赞 1 · 访问量 3562

猜你喜欢

转载自blog.csdn.net/lbh19630726/article/details/103626412