挺多朋友问我宝塔面板的二进制日志怎么关闭，其实前面介绍过宝塔的二进制日志，因为最开始买的服务器硬盘不够，二进制日志文件生成的文件比较占空间，还导致mysql服务启动不了，最后因此关掉了宝塔的二进制日志，具体可以参见关闭二进制日志文件解决宝塔面板mysql服务无法启动。
当对做过不完全恢复时，联机重做文件中最近的 redo 记录没有被应用，resetlogs 选项在打开数据库之前，把这些未应用的 redo 记录从重做文件中清除掉。
backup log dbNamewith NO_LOG backup log dbNamewith TRUNCATE_ONLY DBCC SHRINKDATABASE(dbName)
在Oracle数据库中，日志文件是用于数据恢复和事务重演的，这个日志文件对于Oracle数据库的作用是致命的，从这个角度来说，此日志完全不同于其他其他软件层面理解上的日志。 很多Oracle的数据库灾难发生于日志文件的误操作，有人误删除、误清空、误覆盖，此类错误层出不穷，引发了一次又一次的故障。 对于生产系统，出现在线日志覆盖的情况，可能是灾难性的，最近遇到了几起和日志有关的故障，感触刻骨铭心。 所以，我曾经建议Oracle，将日志文件的缺省后缀改掉，舍log而取dbf,也将日志文件的名字改为日志数据文件，
三、查看日志 在 ThinkPHP 中，可以通过访问指定的 URL 来查看日志文件。默认情况下，访问的 URL 为 http://yourdomain.com/index.php?s=/log/ind
与任何IT系统一样，为了保证HAWQ集群的高可用和高性能，需要进行一系列监控与维护活动。本篇讨论HAWQ推荐的运维与监控活动。 一、推荐的监控与维护任务 表1至表5是H
需要软件： SQLsever2005pro 本站提供下载 将服务器端解压缩到D：盘 D:\Sagasevr下有6个文件夹 1：database SQL数据库文件夹 2：LoginServer 帐号登陆管理器 3：WorldServer 服务器数据管理器 4：GameServer1 游戏数据管理器 4：GameServer2 游戏数据管理器 5：GameServer3 游戏数据管理器 6：GameServer4 游戏数据管理器
在系统设计阶段考虑全面很难，有许多人倾向于把整个设计分成若干阶段，在迭代中完成整个设计，这本身是非常好的，但是，就如同 “先做出来，以后再优化” 这样的经典谎言一样，本身并无错，只是许多程序员都不习惯于真正的迭代设计和迭代优化。举例来说，有一个日益复杂的类，每个人都修改一点点，一直到最后都没有人愿意去做重构，大家的心态都是一样的：“我只修改了一点点，为什么要我去动那么大的刀，于我没有任何好处”。我不在这里谈论这一问题的解决办法，我倒是想说，在开始阶段考虑清楚问题在多数情况下还是很有好处的，设计考虑得越是清楚，在后续阶段代码可以承受越多的变更而不腐朽。
初次接触二阶段提交，源于想以事务的方式实现对 MongoDB 中多个集合数据的修改，而 MongoDB 本身不支持事务，官方推荐的方案就是使用二阶段提交。
一产品最近频繁无响应，登录云服务器发现磁盘空间从50GB到现在只剩下十几kb了，考虑到服务器只是安装了SQLServer2008数据库及一个web应用程序。估计是数据库的日志文件太大了。
今天查看两个月前上线的小项目，发现运行非常慢，而且增删改查失效了（吓我一大跳），急急忙忙的就开始了我的线上问题排查之路。
es的索引搜索是以lucene为底层的，但是lucene是没有实现分布式,lucene提供了核心的索引和搜索引擎，ES则提供分布式和高可用。
一次意外让我有幸了解了binlog，我无意间将某个库的数据都清空了，当时差点没喘过气来，然后经过一晚上的抢救，把这个经验留下。
系统数据库master、model、msdb因为被修改地比较少，且对数据库系统影响较大，所以每次修改后应该及时备份；
有时会碰到同事误删或误更新了某些数据，现在把恢复数据的方法之一：备份日志尾部，简单记录一下。
大家当年在学MySQL的时候，为了能够迅速就业，一般是学习一下MySQL的基本语法，差不多就出山找工作了。水平稍微好一点的童鞋呢还会懂一点存储过程的编写，又或者是懂一点索引的创建和使用。但是呢，基本上大家都忽略了对底层知识的学习。为什么呢？因为工作中很少用到嘛。然后呢，市面上流传的大部分这种底层的知识，又比较偏运维，研发懂这么多意义也不是太大，很多知识可能这辈子都不会用到。 因此，我整理了一部分相关的知识，希望大家有所收获。
许多年前，一个名叫Shay Banon的开发者，带着新婚妻子去伦敦生活，在得知妻子想从事厨师工作后，准备利用自己所学为妻子开发一个食谱搜索引擎，他开始使用Lucene的一个早期版本。但是尝试之后，他发现直接使用Lucene给没有任何开发经验的妻子而言是非常困难的，因此Shay 开始对Lucene进行封装。不久他发布了他的第一个基于Lucene的用java编写的开源项目 Compass。后来Shay找到了一份跟高性能和分布式有关的工作，然后发现这份工作对实时、分布式搜索引擎的需求尤为突出，于是他决定重写Compass，把它变为一个独立的服务并取名Elasticsearch，再到后来Elasticsearch发布了第一个公开版本，从此以后，Elasticsearch已经成为了 Github 上最活跃的开源项目之一。据说，Shay的妻子还在等着她的食谱搜索引擎，而他已经在大公司忙的“一发不可收拾”…
爱可生交付服务部团队 DBA 擅长日志分析、问题排查等；主要负责处理 MySQL 与我司自研数据库自动化管理平台 DMP 的日常运维问题，对数据库及周边技术有浓厚的学习兴趣。
--=========================================
修改/etc/my.cnf 添加一项代码 sql-mode=”STRICT_ALL_TABLES,ERROR_FOR_DIVISION_BY_ZERO,NO_ZERO_DATE,NO_ZERO_IN_DATE,NO_AUTO_CREATE_USER” 重启服务 systemctl restart mysqld
SQL Server 数据库采取预先分配空间的方法来建立数据库的数据文件或者日志文件，比如数据文件的空间分配了300MB，而实际上只占用了20MB空间，这样就会造成磁盘存储空间的浪费。可以通过数据库收缩技术对数据库中的每个文件进行收缩，删除已经分配但没有使用的页。从而节省服务器的存储的成本。
在任何一种数据库中，都会有各种各样的日志，记录着数据库工作的方方面面，以帮助数据库管理
MySQL的二进制日志binlog可以说是MySQL最重要的日志，它记录了所有的DDL和DML语句（除了数据查询语句select），以事件形式记录，还包含语句所执行的消耗的时间，MySQL的二进制日志是事务安全型的。一般来说开启binlog日志大概会有1%的性能损耗。
一、访问控制 1. 应及时删除或停用多余的、过期的账户，避免共享账户的存在 查看当前已有账户，询问管理员是否存在多余过期账户 2. 应授予管理用户所需的最小权限，实现管理用户的权限分离 这个管理用户的权限分离，像安全设备那种的三权分立用户，个人认为数据库层面不太好实现，一般不符合，要不就询问客户取证。 3. 应由授权主体配置访问控制策略，访问控制策略规定主体对客体的访问规则 确认各用户的操作权限，例如：赋予zfy角色所有表的查询权限 然后查询这个用户对应表的权限，就均拥有了select权限。 这里
描述：建议logfile xxx访问权限为600 在适当的位置创建 logs目录，然后创建redis.log日志文件，redis默认不写日志文件。例如我mac创建的目录为 /REDIS_HOME/logs 日志文件名称为 redis.log。
redis持久化的意义，在于 故障恢复 。 如果没有对数据进行持久化，那么如果redis遇到灾难性的故障，就会丢失所有的数据。 如果通过redis的持久化机制将数据持久化到硬盘上面去，然后在定期将磁盘上的文件备份到一起其他的服务器上面(比如:云服务器),这样就可以保证即使redis遇到了灾难事故，也可以使用提前备份的文件对数据进行回复，之后丢失最近的一部分数据，而不会全部丢失数据。
因为POSTGRESQL 备份的方式很多，所以在众多的备份方式和软件中，也只能“半网打进”。
MySQL备份一般采用全库备份加日志备份的方式，根据业务的需要，可以采用每周日凌晨1点进行完全备份以及每小时进行一次增量备份，这样在MySQL故障后可以使用完全备份和日志备份尽可能的去恢复最完整的数据。 一、binlog日志恢复 MySQL的二进制日志记录着该数据库所有增删改的操作日志（前提是需要自己开启binlog），还包括了这些操作的执行时间，binlog的使用场景无外乎就是主从同步以及恢复数据库。开启binlog功能，需要编辑MySQL的主配置文件，如下： 1、查看二进制功能是否开启（如下，值为OFF，则表示未开启）：
我们常常听人说，只要你愿意，MySQL 可以恢复至半个月甚至一个月以内的任何一个状态。网上也有很多删库跑路的段子。。。
本文主要是介绍在centos上搭建mysql的主从服务器。如果没有搭建过的，可以查看我以前的博客，里面有详细的安装centos和在centos上安装mysql的说明。
出现这个问题感觉还是挺疑惑的，因为测试环境已经稳定运行了几个月的时间，一直没有出现过mysql事务锁的问题，于是开始着手查问题。
https://segmentfault.com/a/1190000041758784
Innodb存储引擎是以页为单位来管理存储空间的。在真正访问页面之前，需要把在磁盘上的页缓存到内存中的Buffer Pool之后才可以访问。所有的变更都必须先更新缓冲池中的数据，然后缓冲池中的脏页会以一定的频率被刷入磁盘(Check Point机制)，通过缓冲池来优化CPU和磁盘之间的鸿沟，这样就可以保证整体的性能不会下降太快。
近段时间一直在研究mysql的日志系统,在网上看了N多mysql日志操作的文章，但都过于零乱，为了让自己以后不再搞忘，特作出以下总结：
ES无非就是写/查数据,你如果不明白你发起写入/搜索请求后,ES做了什么,那你该劝退了.
max_connections：允许客户端并发连接的最大数量，默认值是151，一般将该参数设置为500-2000 max_connect_errors：如果客户端尝试连接的错误数量超过这个参数设置的值，则服务器不再接受新的客户端连接。可以通过清空主机的缓存来解除服务器的这种阻止新连接的状态，通过FLUSH HOSTS或MySQLadmin flush-hosts命令来清空缓存。这个参数的默认值是100，一般将该参数设置为100000。
使用数据库的时候，我们每个操作都十分小心，尤其是不能直接在数据库上执行 update、delete 等操作，否则万一忘记加全 where 条件，可能就会造成无法挽回的结果。 有一句十分流行的调侃 — “从删库到跑路”就很形象的说明了误操作后的结果，那么如果你真的不小心执行了删库操作，真的就无法挽回了吗？ 当然不会了，通常对于线上数据库，我们都会定时冷备，dump 导出数据库的全量备份，并且保留一段时间内的所有修改日志，进而实现在必要时回滚到这段时间内的任何一秒。 这里提到的“日志”指的就是 binlog，那么究竟什么是 binlog 呢？本文我们就来详细介绍一下。
今天就来说一下其中的统计服务：目的主要是为了实现 H5 页面的分渠道统计(其实不仅仅是分渠道统计，核心是想做一个自定义事件统计服务，只是目前有分渠道统计的需求)，查看每个渠道具体的 PV 情况。(具体会在 url 上面体现，会带上页面名称、id、渠道类型等)
MySQL主从介绍 MySQL主从又叫做Replication、AB复制。简单讲就是A和B两台机器做主从后，在A上写数据，另外一台B也会跟着写数据，两者数据实时同步的 MySQL主从是基于binlog的，主上须开启binlog才能进行主从。 主从过程大致有3个步骤 1）主将更改操作记录到binlog里 2）从将主的binlog事件(sql语句)同步到从本机上并记录在relaylog里 3）从根据relaylog里面的sql语句按顺序执行 主上有一个log dump线程，用来和从的I/O线程传递b
在 MySQL 系统中，有着诸多不同类型的日志。各种日志都有着自己的用途，通过分析日志，我们可以优化数据库性能，排除故障，甚至能够还原数据。这些不同类型的日志有助于我们更清晰的了解数据库，在日常学习及运维过程中也会和这些日志打交道。本节内容将带你了解 MySQL 数据库中几种常用日志的作用及管理方法。
用于建立客户端与服务器之间的网络连接。 监听器运行在服务器端，属于一种网络服务，用于监听客户端向数据库发出的连接请求。
MySQL是一个广泛使用的开源关系型数据库管理系统，它提供了许多强大的功能，如事务、存储过程、触发器、视图、全文索引等。但是，MySQL也有一些不足之处，比如数据的安全性和可靠性。如果数据库发生故障或损坏，如何恢复数据？如果数据库需要进行主从复制或读写分离，如何保证数据的一致性？这些问题都需要借助一个特殊的机制来解决，那就是binlog。
说明1：客户端配置好参数后，直接就获取了MySQL服务器执行SQL后的结果，很方便。
虽然他搞java开发好几年了，也一直使用的是MySQL数据库，但是面对这个问题依然是一脸懵逼，还以为面试官要问索引、慢查询、性能优化之类的（因为这些都是网上找点面试题背过了）。
a)应启用安全审计功能，审计覆盖到每个用户，对重要的用户行为和重要安全事件进行审计；
1、数据库文件类型： ①数据文件 主要数据文件：后缀 .mdf ，有且只有一个，默认已创建，包含启动信息、数据对象 次要数据文件：后缀 .ndf ，可有任意个，默认无 文件流数据：存储图片、音频等文件 ②事务日志文件：后缀 .ldf ，至少一个，默认已创建一个，记录所有事务的SQL语句，用于恢复数据库 2、创建和扩展数据库 文件大小：有一个初始大小，可扩展，最小单位1MB 增长方式：①按百分比②按MB 可限制数据大小：方式：①限制大小②不限制大小 3、收缩数据库：释放不使用的空间 方式：①手动收缩 收缩数据
主从复制的原理： 分为同步复制和异步复制，实际复制架构中大部分为异步复制。 复制的基本过程如下： 1).Slave上面的IO进程连接上Master，并请求从指定日志文件的指定位置（或者从最开始的日志）之后的日志内容； 2).Master接收到来自Slave的IO进程的请求后，通过负责复制的IO进程根据请求信息读取制定日志指定位置之后的日志信息，返回给Slave 的IO进程。返回信息中除了日志所包含的信息之外，还包括本次返回的信息已经到Master端的bin-log文件的名称以及bin-log的位置； 3).
1).Slave上面的IO进程连接上Master，并请求从指定日志文件的指定位置（或者从最开始的日志）之后的日志内容；
请读者注意：本文基于 GreatSQL 8.0.25 & MySQL 5.7.7-RC版本，在 MySQL8.0.30 Redo 发生变化，详情见： MySQL 8.0.30动态redo log初探
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
