首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

mysql水平拆分与垂直拆分的详细介绍 原

垂直拆分 垂直拆分是指数据表列的拆分,把一张列比较多的表拆分为多张表 通常我们按以下原则进行垂直拆分: 把不常用的字段单独放在一张表; 把text,blob等大字段拆分出来放在附表中; 经常组合查询的列放在一张表中...; 垂直拆分更多时候就应该在数据表设计之初就执行的步骤,然后查询的时候用jion关键起来即可; 水平拆分 水平拆分是指数据表行的拆分,表的行数超过200万行时,就会变慢,这时可以把一张的表的数据拆成多张表来存放...uid_temp来提供自增的ID,该表的唯一用处就是提供自增的ID; insert into uid_temp values(null); 得到自增的ID后,又通过取模法进行分表插入; 注意,进行水平拆分后的表...,字段的列和类型和原表应该是相同的,但是要记得去掉auto_increment自增长 另外 部分业务逻辑也可以通过地区,年份等字段来进行归档拆分; 进行拆分后的表,只能满足部分查询的高效查询需求,这时我们就要在产品策划上...比如我们是按年来进行归档拆分的,这个时候在页面设计上就约束用户必须要先选择年,然后才能进行查询; 在做分析或者统计时,由于是自己人的需求,多点等待其实是没关系的,并且并发很低,这个时候可以用union

2K30

MySQL在Square的拆分实践

现在所有的交易相关信息存储在MySQL中。这种电商类的网站,整体规模及也有一些值得学习的地方。 下面一起看看Square在MySQL方面的经验。...因为Square有MySQL主从结构更多的是在多IDC之间部署,考虑到机房之间IDC的可用性问题,并没有把业务过度的依赖的其它从库,而且把所有的业务尽量压在了主节点上。...整体结构如下: 标准化每个集群,做到多IDC中可用,这个可用,实质上是多IDC提供容灾能力,其它IDC不提供写能力。 3. 备份上使用percona的xtrabackup备份。...Square在使用MySQL方面的建议: 1. 考虑到所有节点都有可能会失败 2. 每个进程都要考虑到管理 3. MySQL的Replcaiton是一个不错的架构 4....把MySQL当成队例或是Cache来用 9. HA环境,生产中要进行定期测试 10. 从应用层考虑拆分 11. 限制每个应用拆分的DB大小在1TB以内 12. 保持较小的集群, 拒绝大实例 13.

1.2K30
您找到你想要的搜索结果了吗?
是的
没有找到

MySQL字段内容拆分及合并

数据拆分及合并 需求: 使用一条SQL获得tb_user表中每个人持有的剑名(剑名用“|”分隔),即得到如下结果 拆解需求: 1) 先将tb_user表中的c_no按逗号拆分 2)将拆分后c_no中的各个...id与tb_sword中的id关联,获取剑名 3) 最后将每一个user对应的剑名合并成一个字段 分段SQL如下: 步骤1: 每一个user的c_no按逗号拆分为对应的c_id,此方法需借助于mysql.help_topic...SUBSTRING_INDEX( SUBSTRING_INDEX( a.c_no, ',', b.help_topic_id + 1 ), ',',- 1 ) c_id FROM tb_user a JOIN mysql.help_topic...SUBSTRING_INDEX( SUBSTRING_INDEX( a.c_no, ',', b.help_topic_id + 1 ), ',',- 1 ) c_id FROM tb_user a JOIN mysql.help_topic...SUBSTRING_INDEX( SUBSTRING_INDEX( a.c_no, ',', b.help_topic_id + 1 ), ',',- 1 ) c_id FROM tb_user a JOIN mysql.help_topic

3.5K30

MySQL在Square的拆分实践

现在所有的交易相关信息都存储在MySQL中。这种电商类的网站,整体规模也有一些值得学习的地方。 下面一起看看Square在MySQL方面的经验。...因为Square有MySQL主从结构更多的是在多IDC之间部署,考虑到机房之间IDC的可用性问题,并没有把业务过度的依赖的其它从库,而且把所有的业务尽量压在了主节点上。...整体结构如下: 标准化每个集群,做到多IDC可用,这个可用,实质上是多IDC提供容灾能力,其它IDC不提供写能力。 备份上使用percona的xtrabackup备份。...Square在使用MySQL方面的建议: 1. 考虑到所有节点都有可能会失败 2. 每个进程都要考虑到管理 3. MySQL的Replcaiton是一个不错的架构 4....把MySQL当成队例或是Cache来用 9. HA环境,生产中要进行定期测试 10. 从应用层考虑拆分 11. 限制每个应用拆分的DB大小在1TB以内 12. 保持较小的集群, 拒绝大实例 13.

74930

MySQL字符串的合并及拆分

按照指定字符进行合并或拆分是经常碰到的场景,MySQL在合并的写法上比较简单,但是按指定字符拆分相对比较麻烦一点(也就是要多写一些字符)。本文将举例演示如何进行按照指定字符合并及拆分。...(Tips:Oracle数据库中可以使用listagg或wm_concat等多种方式实现,也比较简单,可以自行测试) 02 拆分 按指定字符拆分字符串,也是比较常见的场景。...但是MySQL数据库中字符串的拆分没有其他数据库那么方便(其他数据库直接有拆分函数),且需要借助mysql库中的mysql.help_topic表来辅助实现。...OK, 2 rows affected (0.01 sec) Records: 2 Duplicates: 0 Warnings: 0 按照逗号拆分 mysql> SELECT a.id, substring_index...03 结语 本文介绍了MySQL常用的合并及拆分方法,对于擅长写SQL的同学也可以使用其他方式实现,以便解决权限不足(例如拆分时需要使用mysql库的help_topic表的权限)等情况下的需求。

6.3K10

【说站】mysql垂直拆分是什么意思

mysql垂直拆分是什么意思 概念 1、指数据列的分割,将列多的表分割成多个表。表格的记录虽然不多,但字段长,表格占有空间大。 搜索表格时需要大量IO,性能大幅度降低。...可以使得行数据变小,一个数据块( Block )就能存放更多的数据,在查询时就会减少 I/O 次数 可以达到化利用 Cache 的目的,具体在垂直拆分的时候可以将不常变的字段放一起,将经常改变的放一起...主键出现冗余,需要管理冗余列 会引起表连接JOIN操作,可以通过在业务服务器上进行join来减少数据库压力 依然存在单表数据量过大的问题 事务处理复杂 以上就是mysql垂直拆分的介绍,希望对大家有所帮助...更多mysql学习指路:MySQL 推荐操作系统:windows7系统、mysql5.8、DELL G3电脑

1.5K20

Mysql存储结构

索引是一种加快查询速度的数据结构,常用索引结构有hash、B-Tree和B+Tree。本节通过分析三者的数据结构来说明为啥Mysql选择用B+Tree数据结构。 数据结构 Hash ?...: B+Tree 非叶子节点不存放数据 叶子节点存储关键字和数据,非叶子节点的关键字也会沉到叶子节点,并且排序 叶子节点两两指针相互连接,形成一个双向环形链表(符合磁盘的预读特性),顺序查询性能更高 Mysql...Mysql官网文档中写到InnoDB索引用的是 B-tree,但是底层用的是B+Tree。Mysql存储数据是以页为单位,默认一个页可以存放16K数据。...MySQL查询过程是按页加载数据的,每加载一页就是一次IO操作,B+Tree进行三次IO可以查询6700W数据量。从这里也可以知道Mysql一般设置三层深度就足够了。

85820

MySQL【四】---案例实战{拆分多表、外键创建等}

拆分为多个表(商品分类表) 所有数据都在一个表中会导致修改麻烦, create table if not exists goods_cates( id int unsigned primary key...goods as g inner join goods_cates as c on g.cate_name=c.name set g.cate_name=c.id; 关联修改成功:  3.3 修改表结构...brand_id int unsigned not null; 写:int unsigned  保证表结构相同都是 int类型且数值范围相同,  设置外键 关联cate_id和表goods_cate...update goods as g inner join goods_brands as b on g.brand_name=b.name set g.brand_name=b.id;  修改表结构...foreign key 外键名称; 外键名称 alter table goods drop foreign key goods_ibfk_1; 在实际开发中,很少使用外键约束,会极大的降低表更新效率; mysql

1K10

mysql查看表的数据结构_mysql查找表结构

MySQL 查看表结构 mysql查看表结构命令,如下: desc 表名; show columns from 表名; describe 表名; show create table 表名; use information_s...… mysql查看表结构命令 mysql查看表结构命令 mysql查看表结构命令,如下: desc 表名;show columns from 表名;describe 表名;show create table...表名; use inf … mysql查看表结构,字段等命令 mysql查看表结构命令,如下: desc 表名; show columns from 表名; describe 表名; show create...’\G; mysql> show table status like ‘x’\G; . row … mysql 查看表结构方法 留给自己备查: mysql 导出为 csv 文件时如果直接使用导出命令是无法导出表结构的..., 因此我们需要能够查询表结构的方法: 方法如下: 1.desc(描述)命令 desc tablename;de … MySQL查看表结构及查看建表语句 查看表结构:desc 表名 mysql> use

5.7K20

mysql体系结构

mysql8.0体系结构 image.png 图上看mysql服务是一个c/s架构 它是用c和c++开发的 Connectors 端 可以通过,各种各样的客户端,链接mysql服务器 如mysql命令...和磁盘打交道的类似于linux的文件系统 image.png innodb存储引擎分为内存结构和磁盘结构...存储的宏观结构mysql中一个数据库,就在系统中就是一个目录 在mysql中一个表 对应操作系统中的一个.ibd文件(8.0) 在操作系统可以通过ibd2sdi 文件名 可以查看文件 表中记录的...总体) 文件 Online DDL 的时候会更加快速 8.0新特性了解 metdata 结构变化 5.7版本问题 两套数据字典信息server层 .frm innodb数据字典 DDL无法原子化...mysql实例 mysqld守护进程 + Master Threa + Worker Threads + 预分配的内存 mysql的内存结构 global buffers(全局) innodb_buffer_pool

1K41

MySQL动态hash结构

MySQL动态hash结构 1.常用的实现方式 前一段时间一直在研究mysql中的hash结构,大概搞清楚了这种no empty slot的hash结构,读了几篇关于mysql中的hash结构文章...,发现很多文章对于这种动态hash的关键点解释不够清楚,特此把这些天看mysql中hash的这段代码的体会写一下。...mysql中的hash结构不同于一般的那种用链表解决冲突的hash结构,链表解决冲突的hash结构用在memcached,jdk中,最常见的hash结构如下图: ?...2.无空闲空间的动态hash结构 mysql中的hash结构的特点就是没有浪费的空闲空间,数组是动态分配的,任何时刻,这个数组所开辟的空间总是和当前hash结构中元素的个数相同。...参考文章: mysql hash 源码分析 MySQL数据结构分析--HASH

1.9K70

MySQL的内存结构与物理结构

“从MySQL的物理结构和内存结构开始了解MySQL的运行机制” ?...MySQL的数据存储结构主要分两个方面:物理存储结构与内存存储结构,作为数据库,所有的数据最后一定要落到磁盘上,才能完成持久化的存储。...内存结构为了实现提升数据库整体性能,主要用于存储临时数据和日志的缓冲。本文主要讲MySQL的物理结构,以及MySQL的内存结构,对于存储引擎也主要以InnoDB为主。 ?...01 — MySQL的物理结构 上图的 On-Disk Structures 主要是InnoDB存储引擎的磁盘结构,对于MySQL数据库来说,还包括一些文件、日志、表结构存储结构等。...参数文件指的是MySQL实例启动时,会先去读取的参数配置文件,配置内容包含各种文件的位置,一些初始化参数,这些参数定义了某种内存结构的大小设置,还包括一些其他配置,如:主从配置等。

7.9K20
领券