核心军规 尽量不在数据库做运算 控制单表数据量 纯INT不超过10M条，含Char不超过5M条 保持表身段苗条 平衡范式和冗余 拒绝大SQL，复杂事务，大批量任务 字段类军规 用好数值字段，尽量简化字段位数...把字符转化为数字 优先使用Enum或Set 避免使用Null字段 少用并拆封Text/Blob 不在数据库中存图片 索引类军规 谨慎合理添加索引 字符字段必须建立前缀索引?...数据库的字符集，要用 utf8mb4，而不是utf8。...因为MySQL的utf8不是真正的UTF-8，只支持最多三个字节的字符。真正的UTF-8可能会出现四个字节的字符。...MySQL 从来没有修复这个 Bug，而是使用另外的解决方法：真正的UTF-8字符集用 utf8mb4的名字提供。
一、一台服务器最大能打开的文件数 1、限制参数 我们知道在Linux中一切皆文件，那么一台服务器最大能打开多少个文件呢？...只能在Linux上配置一次，不能针对不同用户配置不同的值 fs.nr_open（进程级别参数）：限制单个进程上可以打开的最大文件数。...那么一台服务器最大能建立多少条连接呢？...当他向MySQL请求数据的时候，他又变成了客户端。...2、一台服务端机器最大究竟能支持多少条连接 因为这里要考虑的是最大数，因此先不考虑连接上的数据收发和处理，仅考虑ESTABLISH状态的空连接。那么一台服务端机器上最大可以支持多少条TCP连接？
mysql的varchar到底能存多少个字符 结论 (65535字节-其他列所占用的子节-varchar列长度-null标识占用字节数)/3,向下取整....注意 4.0版本及以下，MySQL中varchar长度单位是字节，如varchar(20)，指的是20字节； 5.0版本及以上，MySQL中varchar长度单位是字符。...测试环境 mysql5.7,存储引擎innodb,utf8字符集 GBK编码： 一个英文字符占一个字节，中文2字节，单字符最大可占用2个字节。
想进大厂，Mysql 不会那可不行，来接受 Mysql 面试挑战吧，看看你能坚持到哪里？ 1. 能说下myisam 和 innodb的区别吗？...覆盖索引指的是在一次查询中，如果一个索引包含或者说覆盖所有需要查询的字段的值，我们就称之为覆盖索引，而不再需要回表查询。...一致性指的是数据库总是从一个一致性的状态转换到另外一个一致性的状态。比如A转账给B100块钱，假设中间sql执行过程中系统崩溃A也不会损失100块，因为事务没有提交，修改也就不会保存到数据库。...create_version3 or delete_version is null); 所以小明最后查询到的id=1的名字还是'张三'，并且id=2的记录也能查询到...小红开启事务current_version=7插入一条数据，结果是这样： id Name create_version delete_version 1 张三 1 2 李四 2 3 王五 7 小明执行插入名字
前言 程序员平时和mysql打交道一定不少，可以说每天都有接触到，但是mysql一张表到底能存多少数据呢？计算根据是什么呢？...同样的在MySQL中为了提高吞吐率，数据也是分页的，不过MySQL的数据页大小是16KB。（确切的说是InnoDB数据页大小16KB）。详细学习可以参考官网 我们可以用如下命令查询到。...mysql> SHOW GLOBAL STATUS LIKE 'innodb_page_size'; +------------------+-------+ | Variable_name |...了解了节点的概念和每个节点的大小为16kb之后，咱们计算mysql能存储多少数据就容易很多了 具体计算方法 根节点计算 首先咱们只看根节点 比如我们设置的数据类型是bigint，大小为8b ?...16 = 21902400 (千万级条) 其实计算结果与我们平时的工作经验也是相符的，一般mysql一张表的数据超过了千万也是得进行分表操作了。
但是如果保存的文件太大，用文本文件就不太现实了，毕竟打开都是个问题，这个时候我们需要用到数据库。提到数据库，相信大部分人都不会陌生，今天我们要学的就是数据库中小编自认为最棒的Mysql数据库了。...一、下载导入模块 为了让Python与Mysql 交互，这里我们需要用到Pymsql模块才行。...，可以看下连接成功的打印信息： 可以看到我们打印了Mysql的版本和Host信息。...db.commit() finally: cur.close() db.close() 7.执行删除操作 有时候一些数据如果对于我们来说没有任何作用了的话了，我们就可以将它删除了，不过这里是删除数据表中的一条记录...，Python也能轻松帮我们搞定。
一、前言 我们在操作大型数据表或者日志文件的时候经常会需要写入数据到数据库，那么最合适的方案就是数据库的批量插入。只是我们在执行批量操作的时候，一次插入多少数据才合适呢？...二、批量插入前准备 博主本地原本是循环查出来的数据，然后每1000条插入一次，直至完成插入操作。但是为什么要设置1000条呢，实不相瞒，这是因为项目里的其他批量插入都是一次插1000条。。...一次到底插入多少才合适呢？ 三、批量插入数据测试 开始测试，但是一开始插入多少是合适的呢，是否有上限？查询mysql手册，我们知道sql语句是有大小限制的。...10条最快，，我觉得一次插的有点少，咱们试试 这个博主测试后，认为一次插10条是性能最快的，他的每条记录是3kb，相当于我的59行数据，取个整数60，那么对于这个博主是插入10条，对我来说插入：600，...插入数据量多，减少了循环的次数，也就是在数据库链接部分的耗时有所减少，只是这个8W并不是极限数据，具体一次插入多少条，还有待参考。
来自：www.slideshare.net/mysqlops/mysql-9838563 来自一线的实战经验，主要针对DBA和后端开发人员，总是在灾难发生后，才想起容灾的重要性；总是在吃过亏后，才记得曾经有人提醒过...核心军规 尽量不在数据库做运算 控制单表数据量 纯INT不超过10M条，含Char不超过5M条 保持表身段苗条 平衡范式和冗余 拒绝大SQL，复杂事务，大批量任务 字段类军规 用好数值字段，尽量简化字段位数...把字符转化为数字 优先使用Enum或Set 避免使用Null字段 少用并拆封Text/Blob 不在数据库中存图片 索引类军规 谨慎合理添加索引 字符字段必须建立前缀索引?
MySQL数据库开发的 36 条军规 标签:数据库 核心军规（5个） 尽量不在数据库做运算。 控制单表数量：行不超过500W条，超出分表；列不超过50个，超过拆表。...2147483648,2147483647][0,4,294,967,295]BIGINT8byte[-9223372036854775808,9223372036854775807][0,18446744073709551615] 能转数字的尽量转数字...NULL(NULL字段很难查询优化、NULL字段的索引需要额外空间、NULL字段的复合索引无效) 尽量少用text/blob类型（尽量使用varchar代替text字段），需要的时候请拆表 不在数据库存图片...pinyin`(8)), 不在列上做运算 Innodb主键推荐使用自增列（主键建立聚簇索引，主键不应该被修改，字符串不应该做主键） 不用外键（由程序保证约束） SQL类军规（16个） SQL语句尽可能简单（一条SQL...只能在一个cpu运算，大语句拆小语句，减少锁时间，一条大SQL可以堵死整个库） 简单的事务（事务时间尽可能短，坏的代码案例：上传图片事务） 避免使用trigger/func（触发器、函数不用，由客户端程序取而代之
1 恢复步骤概要 备份frm、ibd文件 如果mysql版本发生变化，安装回原本的mysql版本 创建和原本库名一致新库，字符集都要保持一样 通过frm获取到原先的表结构，通过的得到的表结构创建一个和原先结构一样的空表...使用“ALTER TABLE DISCARD TABLESPACE;”命令卸载掉表空间 将原先的ibd拷贝到mysql的仓库下 添加用户权限 “chown . .ibd”,如果是操作和mysql的使用权限一致可以跳过...IMPORT TABLESPACE;”命令恢复表空间 完成 2 实际操作 1）备份文件 mkdir /usr/local/backup cp * /usr/local/backup 2）安装原本版本的数据库...DISCARD TABLESPACE; ALTER TABLE teacher DISCARD TABLESPACE; 6）拷贝原本的ibd，到新的库中 确定新数据库的数据存放位置 在mysql中执行命令...show variables like 'datadir'; 进入对应文件夹中，会有一个和需要恢复的数据库名完全一样的文件夹，进入文件夹 将ibd文件复制过来 cp命令直接复制过来就行了 7）命令恢复表空间
版权声明：本文内容由互联网用户自发贡献，该文观点仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内...
一、前言 我们在操作大型数据表或者日志文件的时候经常会需要写入数据到数据库，那么最合适的方案就是数据库的批量插入。只是我们在执行批量操作的时候，一次插入多少数据才合适呢？...二、批量插入前准备 博主本地原本是循环查出来的数据，然后每1000条插入一次，直至完成插入操作。但是为什么要设置1000条呢，实不相瞒，这是因为项目里的其他批量插入都是一次插1000条。。...一次到底插入多少才合适呢？ 三、批量插入数据测试 开始测试，但是一开始插入多少是合适的呢，是否有上限？查询mysql手册，我们知道sql语句是有大小限制的。...10条最快，，我觉得一次插的有点少，咱们试试 参考：https://www.cnblogs.com/aicro/p/3851434.html 这个博主测试后，认为一次插10条是性能最快的，他的每条记录是...插入数据量多，减少了循环的次数，也就是在数据库链接部分的耗时有所减少，只是这个8W并不是极限数据，具体一次插入多少条，还有待参考。
用一个公式来描述整个过程，就是 QphH@Size. 2018 年，惠普使用 microsoft sql server on linux 作为测试对象，向 TPC 组织， 提交了一次TPC-H性能报告。...这就要自己准备了，到微软的官方网站下载180天的试用版，即可 3）复现 Power Test 由于这次模拟的是 SQL Server TPC-H 测试标准，所以在 HammerDB 中，我们需要预先配置： 第一次打开...，HammerDB会自动报告，数据装载是否完成： image 由于装载时间非常长，所以一旦数据库建立成功，我们就要对它进行备份: image 接下来，我们就要试着运行一次 Power Test: 首先配置...当同时有10个用户访问数据库时，假设他们同时执行1条 SELECT 语句。此时，并发数是10，Throughput 也是10，但你能不能说数据库并发度不够呢？不能。...因为此时这并发的10个用户，都对速度感到满意，说明完全可以再容纳更多的人来数据库查询。 于是，增加了100个人来，还是运行 一条SELECT语句。
背景 相信大家的项目都是使用主从模式的数据库吧，我们在开发中可能要维护主从的情况比较少，只需要写增删改查就够了。但是最近自己经历一次主从异常的恢复。也算是有一份不一样的收获吧。...由于项目使用MySQL主从备份模式，在某一天因为数据异常导致数据库主从断开，钉钉也开始报警; 从钉钉告警可以知道，从库的SQL线程断了，原因在于从库没有该条数据，但是现在需要从库更新这条数据，导致的报错...Worker 1 failed executing transaction '2c81fd96-5d38-11e9-99fa-005056af5ff7:108617672' at master log mysql-bin...record in 'rmp_equip_info', Error_code: 1032; handler error HA_ERR_KEY_NOT_FOUND; the event's master log mysql-bin...因此我准备重新来一次完整的同步。
核心军规 1、不在数据库做运算 cpu计算务必移至业务层 2、控制单表数据量 int型不超过1000w，含char则不超过500w； 合理分表； 限制单库表数量在300以内； 3、控制列数量...good case： 'age' int not null default 0 10、少用text/blob varchar的性能会比text高很多； 实在避免不了blob，请拆表； 11、不在数据库里存图片...只能在一个cpu运算； 大语句拆小语句，减少锁时间； 一条大sql可以堵死整个库； 18、简单的事务 事务时间尽可能短； 19、避免使用trig/func 触发器、函数不用； 客户端程序取而代之；...where phone=’159′ or phone=’136′; => select id from t where phone in (’159′, ’136′); 22、OR改写为UNION mysql...少用连接join 28、少用group by 分组； 自动排序； 29、请使用同类型比较 30、使用load data导数据 load data比insert快约20倍； 31、打散批量更新 32、新能分析工具
前言 程序员平时和mysql打交道一定不少，可以说每天都有接触到，但是mysql一张表到底能存多少数据呢？计算根据是什么呢？...接下来咱们逐一探讨，除了小编总结的面试题以外，小编还整理了一份MySQL的实战学习笔记，分享给正在阅读的小伙伴们。...同样的在MySQL中为了提高吞吐率，数据也是分页的，不过MySQL的数据页大小是16KB。（确切的说是InnoDB数据页大小16KB）。详细学习可以参考官网 我们可以用如下命令查询到。...了解了节点的概念和每个节点的大小为16kb之后，咱们计算mysql能存储多少数据就容易很多了 具体计算方法 根节点计算 首先咱们只看根节点 比如我们设置的数据类型是bigint，大小为8b [1612869840279...16 = 21902400 (千万级条) 其实计算结果与我们平时的工作经验也是相符的，一般mysql一张表的数据超过了千万也是得进行分表操作了。
DELIMITER $$ CREATE PROCEDURE addColumn () BEGIN -- 定义表名变量 DECLARE s_tablename VARCHAR ( 100 ); /*显示表的数据库中的所有表...cur_table_structure CURSOR FOR SELECT table_name FROM INFORMATION_SCHEMA.TABLES -- databasename = 数据库名称...WHERE table_schema = '数据库名称' AND table_name NOT IN ( SELECT t.table_name FROM (...information_schema.COLUMNS WHERE table_name IN ( SELECT table_name FROM INFORMATION_SCHEMA.TABLES WHERE table_schema = '数据库名称
例如，Oracle支持的“关系——对象”数据库模型 现在所有的数据库都支持容器迁移 关系数据库可以在前面做一个redis非关系数据库 就像cpu与硬盘之间的内存一样 二、Mysql数据库的介绍 MySQL...由于它的体积小、速度快、成本低、最重要的是开放源码，所以中小型的公司都喜欢使用它作为网站数据库 1、MySQL数据库的特点 （1）MySQL数据库是用C和C++语言编写的，并且使用了多种编辑器进行测试，...Python语言等 （5）MySQL优化了SQL算法，有效的提高了查询速度 （6）MySQL内提供了用于管理，检查以及优化数据库操作的管理工具 （7）它能够作为一个单独的应用程序应用在客户端服务器网络环境中...的全局变量 使其能运行在每个bashshell环境中 echo 'PATH=/usr/local/mysql/bin:/usr/local/mysql/lib:$PATH' >> /etc/profile...root -p 登录到mysql数据库
记一次数据库服务器cpu暴涨100%的线上事故。 在公司监控大盘上看到了我负责的项目的数据库服务器CPU达到100%了, 于是紧急排查问题。...于是下去找运维要一份数据库的慢sql，但是运维还没看到有慢sql(这点不清楚运维的慢sql是怎么记录日志的，按道理是应该有慢sql)。...于是通过show processlist查询到了大概4，5条正在执行的查询。...让运维帮忙kill掉查询语句后，数据库cpu恢复正常。 通过这次事故，也暴露出了几个不足：1. 不应该在业务数据库上执行过于复杂的查询，特别是复杂join查询这种容易嵌套循环查询的语句。...2. yearning查询用户的权限给的过高，应该设置如果超出3秒的查询应及时中断，不应该影响到业务数据库的性能指标。
MySQL作为关系型数据库的典型代表，在国内环境里经历风雨磨砺，不断地精进，已经在开发和运维方面，成型了一套的规范。...这些规范让了解和使用MySQL更加得心应手，并对后期的一些问题起到了很好的预防作用。 结合个人经验，下面具体讲解十个“合规检查”： 1. 数据库大表信息查看 统计某库下各表大小，不要存在过大的表信息。...做好上线数据库设计方面的合规检查，是必不可少的流程。...擅长MySQL、Redis、MongoDB数据库高可用设计和运维故障处理、备份恢复、升级迁移、性能优化。自学通过了MySQL OCP 5.6和MySQL OCP 5.7认证。...2年多开发经验，10年数据库运维工作经验，其中专职做MySQL工作8年；曾经担任过项目经理、数据库经理、数据仓库架构师、MySQL技术专家、DBA等职务；涉及行业：金融（银行、理财）、物流、游戏、医疗、
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
