首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

MySQL-在线处理大数据 & 在线修改结构

这里我们列举几个例子,来看下如何具体的优化SQL ---- 示例 大数据的分批处理 分批处理大的数据,特别是主从复制的MySQL集群, 每处理一批最好留一点时间,给主从同步复制留一点时间。...举个例子 有个大 1千万数据,我们要修改其中的100万, 那么最好分多个批次来更新,每次5000或者1万,根据自己服务器的性能合理的调整。 存过如下, 根据自己的业务调整。...SELECT ROW_COUNT() INTO v_rows; SELECT SLEEP(5); END WHILE; END$$ DELIMITER; ---- 修改结构...当一个中的数据量很大的时候,我们对表中的列的字段类型进行修改,比如改变字段的宽度时会锁,从而影响业务。...其二 无法解决主从数据库延迟的问题 方案一 : 从修改,主从切换 现在从服务器上修改,然后主从切换。 切换完以后在此修改新的从服务器。

3.5K50

gh-ost:在线DDL修改MySQL结构工具

工具,gh-ost 是 gitHub,s Online Schema Transmogrifier/Transfigurator/Transformer/Thingy 的缩写,意思是 GitHub 的在线定义转换器...,用异步方式把这修改内容应用到临时中去。...gh-ost 希望二进制文件使用基于行的日志格式,但这并不表示如果主库上使用的是基于语句的日志格式,就不能用它来在线修改定义了。...它不需要考虑被修改上的并发操作和竞争等,这些在二进制日志中都被序列化了,gh-ost 只操作临时,完全与原始不相干。...对于我们生产环境地每一张,小到空,大到几百 GB,都会通过修改存储引擎的方式来进行修改(engine=innodb),这样并不会真正修改结构。

6.3K80
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    MySQL在线DDL修改结构的简单经验分享

    摘 要 在线DDL修改生产环境的大一直是运维、DBA一个很头痛的问题,本文分享一些相关经验,希望对还在头痛的同学能有所帮助,当然更希望路过的大神,如果有更靠谱的方案能够指点一二,不吝赐教。...pt-osc 工具的工作流程: 检查更改是否有主键或唯一索引,是否有触发器 检查修改结构,创建一个临时,在新上执行 ALTER TABLE 语句 在源上创建三个触发器分别对于 INSERT...UPDATE DELETE 操作 从源拷贝数据到临时,在拷贝过程中,对源的更新操作会写入到新建中 将临时和源 rename(需要元数据修改锁,需要短时间锁) 删除源和触发器,完成结构的修改...四、小结 对于 MySQL 在线 DDL 修改,gh-ost 和 pt-osc 都是很不错的选择,前提是不能有坑爹的触发器和外键!当然,实在是遇上了也没什么办法,只能硬扛!...以上,就是我在 MySQL 在线 DDL 修改结构的一些经验分享,希望路过的大神如果有更好的方案能指点一二,不吝赐教。

    3.3K70

    怎么修改mysql名称_mysql怎么修改名?「建议收藏」

    本篇文章将和大家讲述如何快速修改mysql名,有同样需要的朋友学习一下吧,希望你看后能有所帮助。...mysql修改名的方法: 具体步骤:打开cmd->输入“mysql -u root -p”->输入密码,进入mysql->输入“alter table rename to/as new_tablename...;” 下面的代码包括了创建的过程:#创建结构.这样的建方式,不仅仅是的结构,连带着索引也会同时创建. mysql> create table ts01 like ti_o_sms; Query...OK, 0 rows affected (0.02 sec) #修改名的语法:alter table old_tablename rename to/as new_tablename; mysql>...alter table ts01 rename to ts01_new; Query OK, 0 rows affected (0.00 sec) mysql> show tables; +——————

    15.9K20

    MySQL修改的字段

    MySQL修改的字段 MySQL 修改表字段的方法有两种: ALTER TABLE MODIFY COLUMN。...1、ALTER TABLE 方法 ALTER TABLE 方法用于修改结构,包括增加、删除和修改表字段。...其语法如下: ALTER TABLE 名 MODIFY COLUMN 字段名 字段类型; 其中,名 表示要修改名,字段名 表示要修改的字段名,字段类型 表示修改后的字段类型。...例如,修改 users 的字段 username 的类型为 VARCHAR(50),可以使用以下 SQL 语句: ALTER TABLE users MODIFY COLUMN username VARCHAR...其语法如下: ALTER TABLE 名 MODIFY COLUMN 字段名 字段类型 [属性]; 其中,名 表示要修改名,字段名 表示要修改的字段名,字段类型 表示修改后的字段类型,属性 表示修改后的字段属性

    5.4K10

    修改名列名mysql_怎么修改mysql名和列名?

    mysql中,可以通过“ALTER TABLE 旧表名 RENAME 新名;”语句来修改名,通过“ALTER TABLE 名 CHANGE 旧字段名/列名 新字段名/列名 新数据类型;”语句来修改列名...修改mysqlMySQL 通过 ALTER TABLE 语句来实现名的修改,语法规则如下:ALTER TABLE RENAME [TO] ; 其中,TO 为可选参数,使用与否均不影响结果。...,因此修改名称后的修改名称前的的结构是相同的。...用户可以使用 DESC 命令查看修改后的结构, 修改mysql的列名(字段名) MySQL 数据是由行和列构成的,通常把的“列”称为字段(Field),把的“行”称为记录(Record)。...MySQL修改表字段名的语法规则如下:ALTER TABLE CHANGE ; 其中:旧字段名:指修改前的字段名; 新字段名:指修改后的字段名; 新数据类型:指修改后的数据类型,如果不需要修改字段的数据类型

    11.4K20

    亿级大如何修改结构【MySQL

    三、原直接修改 对于用户访问量少的时间段进行结构修改或者类似12306这种,凌晨11点-6点进行数据维护,直接停服修改结构。...简单的来说,就是新建一张,然后将你需要修改结构先添加上去,因为是空,所以可以瞬间完成修改。后面再通过数据同步工具,将原的数据导入到新中。...当数据导入差不多的时候,将原修改为原_copy,新修改为原的名称,这一步也叫做表切换。...4.3 切换数据丢失问题 切换名这一步,数据库层面做不了限制,首先MYSQL不支持在锁住的情况下,再去修改名。...五、总结 直接修改结构既然有这么多问题,那为什么大多数企业都选择直接修改结构呢,而不是copy替换原的形式呢。

    4.8K10

    pt-online-schema-change在线修改结构

    一、工具简介 pt-osc模仿MySQL内部的改方式进行改,但整个改过程是通过对原始的拷贝来完成的,即在改过程中原始不会被锁定,并不影响对该的读写操作。...首先,osc创建与原始表相同的不包含数据的新并按照需求进行结构的修改,然后将原始中的数据按chunk大小逐步拷贝到新中,当拷贝完成后,会自动同时修改原始和新的名字并默认将原始删除。...5、修改外键相关的子表,根据修改后的数据,修改外键关联的子表。 6、rename源数据为old,把新rename为源名,并将old删除。 7、删除触发器。...触发器 因为整个过程是在线的,为了将改过程中对原始的更新同时更新到新上,会创建相应的触发器,每当发生针对原始的增删改操作,就会触发对新的相应的操作。...另外,因为在MySQL中alter table比外部拷贝数据的速率快很多,所以拷贝速率是按照--chunk-size-limit来决定的 因为MySQL的限制,外键在改前后的名字会不一样,改后新中的外键名前会加一个下划线

    1.3K30

    MySQL中的结构修改方法

    阅读目录 目的 结构修改的基础语法 进阶操作 注意事项 目的 在日常的测试工作中,无论测试项目准备阶段还是测试执行阶段,团队成员经常会需要使用SQL语句进行测试数据的制作和准备,比较常用的就是增删查改等一些基础操作...,但偶尔也会涉及到修改结构的极端情况。...结构修改的基础语法 如有一张"tb_user_info"结构为: +--------+----------+------+-----+---------+-------+ | Field | Type...30) | YES | | NULL | | +--------+----------+------+-----+---------+-------+ 下面就先做一些基础的结构修改操作...drop default; 【字段无默认值的情况下,直接定义默认值即可】 alter table tb_user_info alter login_name set default 'BBB'; 修改

    4.3K10

    linux mysql 修改名_Linux下mysql怎么设置名?「建议收藏」

    Linux下mysql可以通过“ALTER TABLE 旧表名 RENAME [TO] 新名;”语句来修改名;还可以通过配置my.cnf文件,修改“lower_case_table_names”选项的值为...Linux下mysql设置名 在 MySQL 中,可以使用 ALTER TABLE 语句来实现名的修改。...TABLES; +——————+ | Tables_in_test | +——————+ | tb_students_info | +——————+ 1 row in set (0.00 sec) 提示:修改名并不修改的结构...,因此修改名称后的修改名称前的的结构是相同的。...用户可以使用 DESC 命令查看修改后的结构, Linux下Mysql设置名不区分大小写 Linux下的MySQL默认是区分名大小写的 通过如下设置,可以让MySQL不区分名大小写: 1、用root

    8.9K10
    领券