首页
学习
活动
专区
工具
TVP
发布

Laoqi's Linux运维专列

一线运维开发工作者的经验分享;“‘取之开源,分享之开源’”
专栏作者
361
文章
761731
阅读量
115
订阅数
Xtrabackup定时备份mysql数据库脚本
定时备份MySQL数据库 脚本内容: #!/bin/bash ## 备份计划任务 ## ## 每天凌晨1:30一次全量备份 ## 每天间隔1小时一次增量备份 ## 30 1 * * * backup.sh full ## 00 * * * * backup.sh inc ## ## 恢复数据步骤: ## (1)、查看备份日志,找到全量备份和增量备份的关系(注意增量备份的顺序) ## ## cat ${BACKUP_BASE_DIR}/${INC_BASE_LIST} ## (2)、全量备份 ##
老七Linux
2018-05-31
6.2K1
MySQL“延迟”主从复制
世界上没有卖后悔药的,一旦做错了,后悔莫及。我们作为运维,尤其是不小心误删除数据库里的数据时,那更是损失巨大。对于MySQL来说,这里有一种方法,可以避免这种悲剧的发生。 这儿所谓的延迟,并不是经常说的网络延迟,而是我们故意把从库复制的步伐放慢,比如让从库比主库慢30分钟。这样,如果在半小时内发现数据有问题,还能补救。 MySQL 5.6 已经支持延迟复制, 可设置备节点的延迟时间, 延迟复制是有意义的,例如防止主节点数据误删,查看数据库历史状态等。 配置也不难,做完主从后,再加上这句: CHANGE MA
老七Linux
2018-05-31
7730
再讲Mysql主从延迟(外赠MySQL异地多活的数据双向复制经验.pdf)
数据库的集群架构都不陌生了,最熟悉也是应用最广泛的就是咱们熟知的主从,今天大概的回味下: 主从复制 MySQL复制基于主服务器在二进制日志中跟踪所有对数据库的更改(更新、删除等等)。因此,要进行复制,
老七Linux
2018-05-31
1.2K0
使用xhprof + graphviz 性能追踪php站点
我们晓得一旦站点慢下来之后有很多原因,假如站点是LNMP结构,我们可以从Nginx,PHP,Mysql三部分去找原因(当然排除负载和外部设备问题),在PHP这块我们有个慢日志,终究可视化度没有那么高,如何快速追踪到瓶颈呢? xhprof是facebook开源出来的一个php轻量级的性能分析工具,跟Xdebug类似,但性能开销更低,还可以用在生产环境中,也可以由程序开 关来控制是否进行profile。 Graphviz由一种被称为DOT语言的图形描述语言,可以根据提供的节点以及线生成图形。 xhprof 是可
老七Linux
2018-05-31
1.5K0
MySQL高可用架构之MHA
简介: MHA(Master High Availability)目前在MySQL高可用方面是一个相对成熟的解决方案,它由日本DeNA公司youshimaton(现就职于Facebook公司)开发,是一套优秀的作为MySQL高可用性环境下故障切换和主从提升的高可用软件。在MySQL故障切换过程中,MHA能做到在0~30秒之内自动完成数据库的故障切换操作,并且在进行故障切换的过程中,MHA能在最大程度上保证数据的一致性,以达到真正意义上的高可用。 该软件由两部分组成:MHA Manager(管理节点)和MHA
老七Linux
2018-05-31
2.4K0
文件的遍历
for循环 文件遍历 遍历循环文件的模式如下几种: r:以读方式打开 w :以写方式打开 a :以追加模式 --------------------------- r+ :以读写模式打开 w+:以读写模式打开 (参见 w ) a+:以读写模式打开 (参见 a ) ---------------------------- rb:以二进制读模式打开 wb:以二进制写模式打开 (参见 w ) ab:以二进制追加模式打开 (参见 a ) ------------------------------------- r
老七Linux
2018-05-31
8630
LVS+Keepalived+Nginx+DRBD+Zabbix集群架构
一、准备工作: 1.1 6台模拟服务器: 主机名 IP 地址 角色 zhdy01 192.168.96.129 Master LVS + Keepalived zhdy02 192.168.96.130 Slave LVS + Keepalived LVS+Keepalived 192.168.96.200 vip zhdy03 192.168.96.131 Nginx server1 zhdy04 192.168.96.132 Nginx server2 zhdy05 192.168.96.133 Mas
老七Linux
2018-05-31
1.5K0
4种备份MySQL数据库(基本备份方面问题不大了)
我们试着想一想, 在生产环境中什么最重要?如果我们服务器的硬件坏了可以维修或者换新, 软件问题可以修复或重新安装, 但是如果数据没了呢?这可能是最恐怖的事情了吧, 我感觉在生产环境中应该没有什么比数据跟更为重要. 那么我们该如何保证数据不丢失、或者丢失后可以快速恢复呢?只要看完这篇, 大家应该就能对MySQL中实现数据备份和恢复能有一定的了解。 为什么需要备份数据? 其实在前言中也大概说明了为什么要备份数据, 但是我们还是应该具体了解一下为什么要备份数据 在生产环境中我们数据库可能会遭遇各种各样的不测从而
老七Linux
2018-05-31
3.5K0
关于安装jumpserver跳板机报错的问题解决
故障重现:(之前安装所需的步骤在此不一一详述) [root@localhost install]# python install.py 开始写入配置文件 开始安装Jumpserver … 开始更新jumpserver Creating tables … Traceback (most recent call last): …….. 出现如下错误: django.db.utils.OperationalError: (1366, "Incorrect string value: '\\xE6\\x9C\\xB
老七Linux
2018-05-31
3.6K0
Memcached基础了解
什么是NoSQL? 关系型数据库代表MySQL。 非关系型数据库就是NoSQL。 对于关系型数据库来说,是需要把数据存储到库、表、行、字段里,查询的时候根据条件一行一行地去匹配,当量非常大的时候就很耗费时间和资源,尤其是数据是需要从磁盘里去检索。 NoSQL非关系型数据库存储原理非常简单(典型的数据类型为k-v)(key-value),不存在繁杂的关系链,比如mysql查询的时候,需要找到对应的库、表(通常是多个表)以及字段。 NoSQL数据可以存储在内存里,查询速度非常快。 NoSQL在性能表现上虽然能优
老七Linux
2018-05-31
4580
初识 MongoDB 服务
一、了解 MongoDB 之前认识了两种相同类型的缓存技术(关系型数据库)memcached 和 Redis, MongoDB是与之前两款完全不同的一个类型的缓存技术!称之为:文档型数据库! 提到文档,一个新概念JSON,MongoDB的文档类似于JSON对象! JSON:JavaScript 对象表示法(JavaScript Object Notation)。 JSON 是存储和交换文本信息的语法。类似 XML。 JSON 比 XML 更小、更快,更易解析。 来看一下JSON文档: { "employee
老七Linux
2018-05-31
6680
Mongodb 副本集安装配置
一、基础了解 早期版本使用master-slave,一主一从和MySQL类似,但slave在此架构中为只读,当主库宕机后,从库不能自动切换为主。 目前已经淘汰master-slave模式,改为副本集,这种模式下有一个主(primary),和多个从(secondary),只读。支持给它们设置权重,当主宕掉后,权重最高的从切换为主。 在此架构中还可以建立一个仲裁(arbiter)的角色,它只负责裁决,而不存储数据。 再此架构中读写数据都是在主上,要想实现负载均衡的目的需要手动指定读库的目标server。 来看一
老七Linux
2018-05-31
6100
SQLAlchemy总结+
Review: 一、Mysql 操作 创建一个test库 create database test; 授权一个用户 grant all privileges on *.* to 'asd'@'%' identified by 'awerfsdf123'; 创建表 create table student(id int not null); 查询 select * from tabel_name where 条件1 and 条件2 增加 insert into table_name (id, name
老七Linux
2018-05-31
2.2K0
Python访问数据库Mysql
安装MySQL驱动 由于MySQL服务器以独立的进程运行,并通过网络对外服务,所以,需要支持Python的MySQL驱动来连接到MySQL服务器。 Python3以后好像是不支持MySQLdb了,可以是用pymysql包,可以直接通过pymysql进行使用。 pip install pymysql MySQLdb 只适用于python2.x,发现pip装不上。它在py3的替代品是: import pymysql Mysql的事物 在 MySQL 命令行的默认设置下,事务都是自动提交的,即执行 SQL 语句后
老七Linux
2018-05-09
5.8K0
Mongodb 分片集群搭建
一、MongoDB分片介绍 一般的像小型企业和业务量不是太大的集群架构,我们使用MongoDB分片就可以足够满足业务需求,或者随着业务的不断增长我们多做些副本集也是可以解决问题,多搞几个主从就可以了。还有一种情况是,类似于腾讯或者阿里有着庞大的集群以及业务量和数据量,不可能一个库分成多个库,其实MongoDB也有这种功能叫做分片,也就是今天所用到的!如下: 分片就是将数据库进行拆分,将大型集合分隔到不同服务器上。比如,本来100G的数据,可以分割成10份存储到10台服务器上,这样每台机器只有10G的数据。
老七Linux
2018-05-09
1.7K0
使用mysql-proxy配置mysql读写分离
简介 对于很多大型网站(pv值百万、千万)来说,在所处理的业务中,其中有70%的业务是查询(select)相关的业务操作(新闻网站,插入一条新闻。查询操作),剩下的则是写(insert、update、delete,只要能对MySQL的数据造成更改的操作都叫写操作)操作。在使用负载均衡集群之后,可以很大程度的提升网站的整体性能,但是最终的数据处理的压力还是会落到MySQL数据库上,所有很有必要使用一些技术来提升MySQL的负载能力。(读写分离) 写操作专门交给写服务器处理(一般网站来说写是比较少的 读写比 4
老七Linux
2018-05-09
1.4K0
MySQL调优
MySQL调优可以从几个方面来做: 1. 架构层: 做从库,实现读写分离; 2. 系统层次: 增加内存; 给磁盘做raid0或者raid5以增加磁盘的读写速度;可以重新挂载磁盘,并加上noatime参数,这样可以减少磁盘的i/o; 3. MySQL本身调优: 如果未配置主从同步,可以把bin-log功能关闭,减少磁盘i/o 在my.cnf中加上skip-name-resolve,这样可以避免由于解析主机名延迟造成mysql执行慢 调整几个关键的buffer和cache。调整的依据,主要根据数据库的状态来调试
老七Linux
2018-05-09
1.1K0
CentOS下利用mysqlbinlog恢复MySQL数据库
如果不小心对数据库进行误操作,而又没有及时备份怎么办?这恐怕是广大的coder经常遇到的一类问题。 我今天就因为不小心删除了某个数据库,但最后的备份是1个礼拜前的,唯一能解决的办法就是通过mysqlbinlog来恢复了。解决方案如下: 如果MySQL服务器启用了二进制日志,你可以使用mysqlbinlog工具来恢复从指定的时间点开始(例如,从你最后一次备份)直到现在或另一个指定的时间点的数据。 要想从二进制日志恢复数据,你需要知道当前二进制日志文件的路径和文件名。 一般可以从配置文件(一般情况,Linux下
老七Linux
2018-05-09
4.7K0
vsftp 利用mysql 验证虚拟账户
1 安装vsftpd (1) yum install -y vsftpd (2)编辑vsftpd.conf 内容如下: listen=YES connect_from_port_20=YES pasv_enable=YES tcp_wrappers=YES local_enable=YES chroot_local_user=yes anonymous_enable=NO guest_enable=YES guest_username=vsftpdguest user_config_dir
老七Linux
2018-05-09
1.4K0
Mysql主从同步架构配置
一、mysql主从介绍: MySQL主从又叫做Replication、AB复制。简单讲就是A和B两台机器做主从后,在A上写数据,另外一台B也会跟着写数据,两者数据实时同步的。也就是说,当你在A机器写入一个表,再次查看B机器也会同步一个表。 1.1 MySQL主从是基于binlog的,主上须开启binlog才能进行主从。 主从过程大致有3个步骤: 主将更改操作记录到binlog里。 从将主的binlog事件(sql语句)同步到从本机上并记录在relaylog里。 从根据relaylog里面的sql语句按顺序执
老七Linux
2018-05-09
3.7K0
点击加载更多
社区活动
腾讯技术创作狂欢月
“码”上创作 21 天,分 10000 元奖品池!
Python精品学习库
代码在线跑,知识轻松学
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档