锐客网

  1. 首页 > 睿知 > it技术 > >

mysql分表怎么用 mysql分表实践( 四 )

IT技术数据库


垂直分表：把大表分成多个小表 ， 如热点数据和非热点数据分开，提高查询速度 。
2、水平区分
水平分表：同一业务如数据量大了以后，根据一定的规则分为不同的表进行存储 。
水平分库：如订单分成多个库存储，分解服务器压力 。
以上一般来说 ， 垂直分库和水平分表用的会多些 。
三、分库分表的原理分析
分库分表常用的方案：Hash取模方案和range范围方案；
路由算法为最主要的算法，指得是把路由的Key按照指定的算法进行存放；
1、Hash取模方案
根据取余分配到不同的表里 。要根据实际情况确认模的大小 。此方案由于平均分配，不存在热点问题，但数据迁移很复杂 。
2、Range范围方案
range根据范围进行划分，如日期，大小 。此方案不存在数据迁移 ， 但存在热点问题 。
四、分库分表的技术选型
1、技术选型
解决方案主要分为4种：MySQL的分区技术、NoSql、NewSQL、MySQL的分库分表 。
（1）mysql分区技术：把一张表存放在不同存储文件 。由于无法负载 ， 使用较少 。
（2）NoSQL（如MongoDB）：如是订单等比较重要数据，强关联关系，需约束一致性 ， 不太适应 。
（3）NewSql(具有NoSQL对海量数据的存储管理能力，还保持了传统数据库支持ACID和SQL等特性):如TiDB可满足需求 。
（4）MySQL的分库分表：如使用mysql,此种方案为主流方式 。
2、中间件
解决此类问题的中间件主要为：Proxy模式、Client模式 。
（1）Proxy模式
（2）Client模式
把分库分表相关逻辑存放在客户端，一版客户端的应用会引用一个jar，然后再jar中处理SQL组合、数据库路由、执行结果合并等相关功能 。
（3）中间件的比较
由于Client模式少了一层，运维方便，相对来说容易些 。
五、分库分表的实践
根据容量（当前容量和增长量）评估分库或分表个数 - 选key（均匀）- 分表规则（hash或range等）- 执行（一般双写）- 扩容问题（尽量减少数据的移动） 。
在这里我们选用中间件share-jdbc 。
1、引入maven依赖
2、spring boot规则配置
行表达式标识符可以使用${...}或$-{...} ， 但前者与Spring本身的属性文件占位符冲突，因此在Spring环境中使用行表达式标识符建议使用$-{...} 。
3、创建DataSource
通过ShardingDataSourceFactory工厂和规则配置对象获取ShardingDataSource，ShardingDataSource实现自JDBC的标准接口DataSource 。然后即可通过DataSource选择使用原生JDBC开发，或者使用JPA, MyBatis等ORM工具 。
mysql怎么做merge分表mysql merge分表操作
三个分表：
CREATE TABLE `test_1` (
id INT(11) NOT NULL DEFAULT '0',
email varchar(50) NOT NULL ,
PRIMARY KEY(`id`)
) ENGINE=MyISAM DEFAULT CHARSET=UTF8;
CREATE TABLE `test_2` (
id INT(11) NOT NULL DEFAULT '0',
email varchar(50) NOT NULL ,
PRIMARY KEY(`id`)
) ENGINE=MyISAM DEFAULT CHARSET=UTF8;
CREATE TABLE `test_3` (
id INT(11) NOT NULL DEFAULT '0',
email varchar(50) NOT NULL ,
PRIMARY KEY(`id`)
) ENGINE=MyISAM DEFAULT CHARSET=UTF8;
一个总表：
CREATE TABLE `test` (
`id` INT(11) NOT NULL DEFAULT '0'
email varchar(50) NOT NULL
key `i_id` (`id`),
) ENGINE=MRG_MyISAMUNION=(test_1,test_2,test_3)DEFAULT CHARSET=UTF8;
在总表test上面select *的话，会取出三个分表中的数据 。
在插入数据的时候根据对象的hash code 取模运算，如果余数为 3 那么就插入 test_3 这个表中 。
mysql数据库分表横向分表：例如将创建时间在05年之前的数据放在一个分区上，将05年到08年之间的数据放到另一个分区上，以此类推 。

推荐阅读


上一篇：显卡怎么没有屏蔽罩，显卡没挡板怎么固定

下一篇：泰州家庭教育技巧直播视频，家庭教育专栏视频