数据库水平拆分和垂直拆分
MySQL数据库中的列拆分技术是一种强大的表技术,它可以将表中的列数据拆分成多个表,从而有效提高处理速度和读取效率,降低数据库内存与 CPU 占用率,延长整个数据库的生命周期。MySQL 数据库的表拆分可以按照一定的要求进行拆分,以便在存储和读取过程中提高数据库的访问性能,减少访问时间。
MySQL 数据库中的表拆分技术有三种,分别是水平拆分,垂直拆分和混合拆分,具体特征如下:
1、水平拆分:即将某表按照行拆分为多个表,可以有效的将查找的时间节约到最低,也能细粒度的将行拆分,使得查询过程高效;
2、垂直拆分:即将某表按照列进行拆分,这种拆分方式可以把不常需要的数据降价存储,减少存储容量,从而可以提高存取效率;
3、混合拆分:既可以按行拆分又可以按列拆分,可以使数据具有一定的可分拆性,从而提高查询优化和运行效率。
要使用 MySQL 数据库中的表拆分技术,需要先编写拆分 SQL 语句来完成数据拆分,具体语句如下:
–水平分表
SELECT * INTO new_table1 FROM old_table WHERE condition1
SELECT * INTO new_table2 FROM old_table WHERE condition2
–垂直拆分
SELECT col1, col2 INTO new_table1 FROM old_table
SELECT col3, col4 INTO new_table2 FROM old_table
–混合拆分
SELECT col1, col2 INTO new_table1 FROM old_table WHERE condition1
SELECT col3, col4 INTO new_table2 FROM old_table WHERE condition2
以上就是MySQL数据库中的表拆分技术的简要介绍,可以通过表拆分技术来提高MySQL数据库的查询效率,以及一次查询多个表的操作,提高存储空间及存取效率,实现更为快速、安全、稳定的数据处理。
B. 数据库水平拆分和垂直拆分 怎么实现
垂直拆分
垂直拆分是指数据表列的拆分,把一张列比较多的表拆分为多张表
通常我们按以下原则进行垂直拆分:
把不常用的字段单独放在一张表;
把text,blob等大字段拆分出来放在附表中;
经常组合查询的列放在一张表中;垂直拆分更多时候就应该在数据表设计之初就执行的步骤,然后查询的时候用join关键起来即可;
水平拆分
水平拆分是指数据表行的拆分,表的行数超过200万行时,就会变慢,这时可以把一张的表的数据拆成多张表来存放。
水平拆分的一些技巧
1. 拆分原则
通常情况下,我们使用取模的方式来进行表的拆分;比如一张有400W的用户表users,为提高其查询效率我们把其分成4张表
users1,users2,users3,users4
通过用ID取模的方法把数据分散到四张表内Id%4+1 = [1,2,3,4]
这里是个小哈希,然后查询,更新,删除也是通过取模的方法来查询
$_GET['id'] = 17,
17%4 + 1 = 2,
$tableName = 'users'.'2'
Select * from users2 where id = 17;
在insert时还需要一张临时表uid_temp来提供自增的ID,该表的唯一用处就是提供自增的ID;
insert into uid_temp values(null);
得到自增的ID后,又通过取模法进行分表插入;
注意,进行水平拆分后的表,字段的列和类型和原表应该是相同的,但是要记得去掉auto_increment自增长
另外
部分业务逻辑也可以通过地区,年份等字段来进行归档拆分;
进行拆分后的表,只能满足部分查询的高效查询需求,这时我们就要在产品策划上,从界面上约束用户查询行为。比如我们是按年来进行归档拆分的,这个时候在页面设计上就约束用户必须要先选择年,然后才能进行查询;
在做分析或者统计时,由于是自己人的需求,多点等待其实是没关系的,并且并发很低,这个时候可以用union把所有表都组合成一张视图来进行查询,然后再进行查询;
Create view users as select from users1 union select from users2 union.........