本文首发于个人公众号 Java 技术大杂烩,欢迎关注 前言 在系统运行的过程中,DBA需要经常的对数据库进行一些检查,如数据库磁盘的占用量,缓存的命中率,内存的分配等;由于有个客户需要对系统的数据库进行检查...shell 脚本中连接数据库执行mysql 命令 在 shell 脚本中,去链接数据库,并执行相关的命令的步骤如下: 首先使用 touch 命令创建个文件, 使用 chmod 赋给这个文件执行权限 在文件中输入如下.../bin/bash host="127.0.0.1" #数据库IP port="3306" #数据库端口 userName="root" #用户名 password="root" #密码 dbname.../bin/mysql -h${host} -u${userName} -p${password} ${dbname} -P${port} -e "${cmd}") 各项巡检命令 mysql 的数据文件存放的位置...3.整个mysql server 所有数据库的磁盘用量 select table_schema, sum((data_length+index_length)/1024/1024) M from information_schema.tables
除此之外,还需要关注日志类信息,例如: 1/var/log/messages 2/var/log/dmesg MySQL本身 MySQL本身的监控应该包含重点参数的检查,MySQL状态的检查,除此以外还应该包含自增...id的使用情况(小心因为自增id使用满了 不能insert写入从而引发报警哦),及主从健康状态的巡检。...首先,查看mysql状态 1mysql> show full processlis;2mysql> show global status;3mysql> show engine innodb status...MySQL主从检测 #主从状态 mysql> show slave status\G #主从是否延迟 Master_Log_File == Relay_Master_Log_File && Read_Master_Log_Pos...中间件的巡检 mycat && proxysql 这些中间件的巡检,首先参考系统巡检,再看一下中间件本身的日志类和状态类信息,网络延迟或丢包的检查,也是必须要做工作。
我想这也是我主导业务巡检这个事情的初衷:让业务看得懂的巡检。 ? 至于MySQL层面的巡检,按照我们之前的思路,其实主要是偏系统层面的,比如监控,报警检查,主从复制检查,备份检查等。...这些对于业务来说,他们都是不关心的,他们关心什么呢,偏向于业务层面的信息,他们能够直观感受到的就是数据库,表和索引,当然还有最重要的一个对象:SQL....表和索引,SQL,数据库,至于系统层面的检查,我放到了最后,在打分的部分会考虑到,主要作为内部问题来处理,对接业务的主要是上面三个层面。 ?...大家知道MySQL 5.7里面的sys schema还是很不错的一个选择,所以有些亮点的巡检项是打算使用sys schema来完成的。...所以从巡检结果的设计层面考虑,我是打算按照周期表的方式来执行巡检任务,把生成的巡检数据已接口化的方式存储起来,在需要提取的时候可以直接查取。
今天距农历新年还有9天,3306π社区提前给大家拜年啦~ 一、操作系统巡检 如果有zabbix或者其他监控类型的工具,就方便很多。...二、MySQL本身巡检 MySQL本身的监控应该包含重点参数的检查,MySQL状态的检查,除此以外还应该包含自增id的使用情况(小心因为自增id使用满了 不能insert写入从而引发报警哦),及主从健康状态的巡检...,仅巡检MySQL的状态和参数配置(因为客户的环境不能直连linux但可以直连MySQL,不支持系统层面,系统层面使用zabbix等即可),有兴趣的小伙伴可以看看。...的日志,提前发现潜在风险: MySQL error log MySQL 慢查询日志 三、高可用巡检 3.1 MHA && keepalived 观察日志看是否有频繁主从切换,如果有的话就分析一下是什么原因导致频繁切换...3.2 中间件的巡检 mycat && proxysql 这些中间件的巡检,首先参考系统巡检,再看一下中间件本身的日志类和状态类信息,网络延迟或丢包的检查,也是必须要做工作。
问题描述 该巡检项会检查 MySQL 实例的到期情况,若腾讯云数据库的付费类型为包年包月,未配置自动续费且即将到期,则会触发该隐患的通知。实例过期后可能会导致业务访问受损。
云顾问解决方案 因为数据库在金融客户的数据存储以及调用业务中是非常重要的,且金融客户的重点业务对稳定性需求极高,要求产品在使用过程中得到提前预警和定期优化,所以云顾问对云数据库(MySQL)主从延迟也是重点监控...主从延迟过高,很大程度上是因为数据库无主键或二级索引、有大事务处理、DDL操作或实例规格过小等原因,在分析客户的数据库表操作过程中,发现由于源实例存在无主键表,同时存在不定期的truncate操作,导致源和目标数据产生不一致的情况...大客户售后经理配合客户优化数据库的过程中,依赖云顾问定期对数据库进行巡检,数据库的风险项逐项排除,很好的避免了主从延迟以及库不可用的情况。
作者:王向 爱可生 DBA 团队成员,负责公司 DMP 产品的运维和客户 MySQL 问题的处理。擅长数据库故障处理。对数据库技术和 python 有着浓厚的兴趣。...---- MySQL巡检 操作系统层面 cpu 内存 I/O 磁盘 系统基础信息 操作系统日志 MySQL 重点参数 MySQL的状态 库表情况 MySQL主从检测 高可用层面 中间件的巡检 操作系统层面...巡检嘛没啥特别的,就直奔主题把。...操作系统日志 除此之外,还需要关注日志类信息,例如: tail 200 /var/log/messages dmesg | tail 200 MySQL MySQL重点参数的检查,及主从健康状态的巡检...中间件的巡检 mycat && proxysql 这些中间件的巡检,首先参考系统巡检,再看一下中间件本身的日志类和状态类信息,网络延迟或丢包的检查,也是必须要做工作。 ----
问题描述 检查腾讯云数据库 MySQL 主从延迟的情况,若延迟过高,可能会导致数据库 RO 实例被剔除,主从 HA 切换时间过长或者失败等风险。
作者:陈俊聪 中移信息平台能力中心数据库团队成员,主要负责 MySQL、TiDB、Redis、clickhouse 等开源数据库的维护工作。...接触 MySQL 数据库 7 年了,专职做 MySQL 数据库运维工作也有 6 个年头了,这 6 年来呆了三家公司,做过很多次数据库巡检工作,从一开始是网上下载个巡检模板应付工作,草草了事,到后来使用公司专门的数据库巡检模板做巡检...上去服务器执行 df -h 、mysql -u 等命令检查服务器、数据库的运行状况,查看监控(zabbix、Prometheus 等)来分析。...而作为运维,主要关注的是数据库可用性,所以节前巡检的检查核心如下: 系统层面 CPU RAM 磁盘空间 应用层面( MySQL 实例) 实例状态 高可用状态 复制状态 监控状态 VIP 状态 这里我展开说明一下...以上就是我个人对 MySQL 数据库巡检需要做什么的总结,欢迎指正。
问题描述 如果云数据库 MySQL 中只存在 root 账号,而没有其他应用/业务账号,说明业务在访问数据库的时候可能存在权限过大的问题,可以访问业务数据之外的其他数据,如果出现误操作或恶意操作降回严重影响数据的安全...进入控制台的数据库管理页面,选择账号管理。 [账号管理] 创建业务账号。 [创建账号] 对账号授予权限。
除此之外,还需要关注日志类信息,例如: /var/log/messages /var/log/dmesg 二、MySQL 本身巡检 MySQL 本身的监控应该包含重点参数的检查,MySQL 状态的检查,...首先,查看mysql状态 mysql> show full processlis; mysql> show global status; mysql> show engine innodb status...的日志,提前发现潜在风险: MySQL error log MySQL 慢查询日志 三、高可用巡检 3.1 MHA && keepalived 观察日志看是否有频繁主从切换,如果有的话就分析一下是什么原因导致频繁切换...3.2 中间件的巡检 mycat && pproxysql 这些中间件的巡检,首先参考系统巡检,再看一下中间件本身的日志类和状态类信息,网络延迟或丢包的检查,也是必须要做工作。...四、总结 关于巡检来说,每个环境都是不一样的,所以巡检的侧重点也是不一样的,但基本的巡检步骤是避免不了的,如果有其他的巡检姿势也欢迎一起讨论。
/usr/bin/env python # -*- coding: utf-8 -*- import os import time from datetime import datetime # 数据库连接信息...if __name__ == '__main__': while True: check_db() # 执行巡检 time.sleep(60*5) # 每...5分钟执行一次 可以通过/etc/system/systemd下注册py巡检任务,以daemon服务的方式启动
问题描述 检查腾讯云数据库 MySQL 实例的运行线程数,这个指标反应当前正在数据库中执行的查询数。如果运行线程数大量超过实例 CPU 核心数,代表当前配置的数据库负载偏高。...解决方案 可以进入 DBBrain 的实时会话页面,通过 kill 会话的功能临时解决问题,后续需要进一步分析查询堆积在数据库中的原因,彻底根除这个隐患。
问题描述 腾讯云数据库 MySQL 提供了灾备实例的功能,如果一个实例未配置灾备实例,当实例的主备节点同时,或者实例所在的地域出现严重故障时,业务受影响的时间可能会超过预期。
本文介绍了美团MySQL数据库巡检系统的框架和巡检内容,希望能够帮助大家了解什么是数据库巡检,美团的巡检系统架构是如何设计的,以及巡检系统是如何保障MySQL服务稳定运行的。...图1 数据库运维保障核心功能组件 其中,数据库巡检作为运维保障体系最重要的环节之一,能够帮助我们发现数据库存在的隐患,提前治理,做到防患于未然。...三、系统架构 美团MySQL数据库巡检系统架构图设计如下所示。接下来,我们按照架构图从下到上的顺序来对巡检系统主要模块进行简单的介绍。 ? 图2 美团MySQL数据库巡检系统架构图 1....巡检目标:除了对生产数据库进行巡检以外,还会对高可用组件、中间件等数据库周边产品进行巡检,尽可能覆盖所有会引发数据库故障的风险点。 2. 存储层 巡检数据库:主要用来保存巡检相关数据。...下面,我们通过列举几个巡检任务来对巡检项做简单的说明: ? 五、成果 美团MySQL巡检系统已稳定运行近一年时间,基于新巡检体系上线的巡检项49个。
背景说明 某医疗企业线上APP采用MYSQL数据库,该库只设置了一个RO实例,并没有设置RO组多实例,客户的信息调度全部依赖此库。...云顾问解决方案 为了不让其他客户再遇到类似的情况,避免对客户的业务造成损失,云顾问增加了对RO单点的巡检项,旨在帮助客户提前发现问题,规避问题发生,更好的帮助客户在腾讯云上运行各项业务。...从产品使用上,创建了RO组后,不仅适用于读写分离和一主多从应用场景,也可显著提高用户数据库的读负载能力。RO组可以设置负载均衡和延迟剔除,这样配置同一个RO组内的多个只读实例就可起到容灾的作用。...该客户通过云顾问巡检到有此类风险场景的所有实例,在后来的工作中配置了RO组多实例,到目前为止,没有再出现同样问题。
问题描述 检查腾讯云数据库 MySQL 实例的 RO 组是否存在单点只读实例,当 RO 组 中只有一个实例时,该实例故障会导致整个 RO 组不可用。
问题描述 检查腾讯云数据库 MySQL 是否在使用基础网络。 解决方案 基础网络是腾讯云上所有用户的公共网络资源池,私有网络是一块逻辑隔离的网络空间。私有网络相对更加稳定和安全,建议使用私有网络。...[选择 VPC 网络] 注意事项 转换网络类型之后,调整数据库地址需要重启业务。
1、巡检脚本简介 该套数据库巡检脚本多数为纯SQL脚本开发,如下所示: 目前一共包含16个脚本,若脚本的扩展名为“.sql”则表示该脚本为sql脚本;若脚本的扩展名为“.pl”则表示该脚本为perl...脚本DB_MySQL_HC_lhr_v7.0.0.sql是MySQL脚本,执行后会产生MySQL的健康检查html报告,该脚本为只读脚本。...2、巡检脚本特点 1、可以巡检Oracle、MySQL、SQL Server、PostgreSQL、Greenplum、OceanBase、TiDB、openGauss、DB2和国产达梦等10个数据库,...)、mysql(MySQL、TiDB、OceanBase)、MSSQL客户端(SSMS、Navicat皆可)、psql(PG、Greenplum、openGauss)、gisql(国产达梦)、gsql(...针对每种数据库,只有1个SQL脚本,不存在嵌套调用脚本等其它问题 13、最终生成html文件格式的健康检查结果 14、Oracle数据库对巡检结果进行过滤,列出了数据库有问题的内容 15、对OS的信息提供了收集
更多的文章请关注作者微信公众号 微信公众号二维码.jpg 目录 目录 2 1 巡检说明 6 2 查看集群硬件相关信息 6 2.1 查看集群当前系统时间 6 2.2 查看操作系统版本 7 2.3 查看内核版本...28 4.11 查看ctid的值 28 5 集群巡检过程详细信息 29 5.1 检查大小超过1GB的表倾斜情况 29 5.1.1 查看超过1GB倾斜率的表 29 5.1.2 查看表在segment上占用大小及倾斜率...51 5.15.4 检查pg_class与pg_attribute是否不一致 51 5.16 表活跃度监控 52 5.16.1 IO活跃度的表 52 5.16.2 表的访问活跃度 53 1 巡检说明 作为上线的数据库必须经常做一下巡检...,就像人的身体要经常做检查一样,敲代码的说不定 哪一天就挂了,巡检发现问题,并及时排除问题,让 greenplum 数据库健康运行,它没有问题,我们也放心、、、、 2 查看集群硬件相关信息 创建集群所有主机的映射文件...5 集群巡检过程详细信息 5.1 检查大小超过1GB的表倾斜情况 问题描述:GPDB 为分布式数据库,所有表数据应该均匀分布到所有segment 实例中存储,才能发挥数据库最佳的性能。
领取专属 10元无门槛券
手把手带您无忧上云