在工业监控里面,需要对每天的数据,进行记录,时间长了之后,MySQL数据库很容易撑爆。这时候,如果允许可以对之前的数据进行一次清除,只记录几个月内的数据。...repeat循环*/ UNTIL done END REPEAT; /*关闭游标*/ close g_cursor; select 'OK'; end $ delimiter; 在MySQL..., 且别的表并未受到影响。...在不能发后台包的情况下, 可以通过mysql定时任务和存储过程, 来实现定时删表操作。...*注: 以上操作,不推荐在MySQL中通过定时任务和存储过程来实现此功能,推荐通过后台定时任务执行删表操作。
MySQL快速生成时间维度表: MySQL里面生成一张时间维度表,用于ETL工具使用。...DAYNAME(@date) AS wd_name FROM T WHERE DATE_ADD(@date, INTERVAL 1 DAY) <= @d1 ORDER BY DATE ; 神秘的表T...,仅仅需要有多于你需要生成日期的记录数即可。...思路是从T表选择多行数据,同时生成对应的日期字段。
DataBaseName > $BackupDir/$sqltag #进行压缩并删除原文件 cd $BackupDir tar -czf $tartag $sqltag rm -rf $sqltag #定时清除文件...,以访长期堆积占用磁盘空间(删除5天以前带有tar.gz文件) find $BackupDir -mtime +5 -name '*.tar.gz' -exec rm -rf { } \; 每日自动备份
DataBaseName > $BackupDir/$sqltag #进行压缩并删除原文件 cd $BackupDir tar -czf $tartag $sqltag rm -rf $sqltag #定时清除文件...,以访长期堆积占用磁盘空间(删除5天以前带有tar.gz文件) find $BackupDir -mtime +5 -name '*.tar.gz' -exec rm -rf {} \; 每日自动备份【
每天定时备份Mysql数据库 备份方式使用mysqldump + crond 建立数据库备份的sh文件,如/root/sbin/db-backup.sh DATE=`date +%Y-%m-%d`.../usr/bin/mysqldump -uroot -p123456 mydatabase > /root/backup/mysql-backup.sql....$DATE 内容为备份数据库mydatabase中的全部表到mysql-backup.sql.DATE文件中,其中DATE为根据命令的执行时间动态获取的日期 如果要备份mysql的全部数据库则使用 /usr.../bin/mysqldump -uroot -p123456 --all-databases > /root/backup/mysql-backup.sql....$DATE 如果数据库中的表包含二进制字段如blod,则必须添加hex-blod的参数,如 /usr/bin/mysqldump -uroot -pqaywsx123 --hex-blod --all-databases
,当要将某一版本归档时,需要汇总的文档要求还是比较高的、各类文档齐全,包括项目架构、项目安装、接口等文档,而数据库表结构说明文档亦属于其一。...记得很早之前想找一个可以导出 MySQL 数据库表结构说明文档的工具,生态上的这种工具是有的、只不过并没有一个使我比较满足的。当然、看个人所需,我需要一个可以导出 markdown 文档的。...他只有一个功能、就是生成数据库表结构说明文档,格式为madkdown。...md2rtf md2openOffice md2Epub md2latex md2MediaWiki md2reStructureText md2textile md2OPML md2png 文档页面效果 生成的...MD文件 [MySQL 表结构生成 Markdown 文档] MD文件转PDF [MySQL 表结构生成 Markdown转PDF 文档]
、各类文档齐全,包括项目架构、项目安装、接口等文档,而数据库表结构说明文档亦属于其一。...记得很早之前想找一个可以导出 MySQL 数据库表结构说明文档的工具,生态上的这种工具是有的、只不过并没有一个使我比较满足的。当然、看个人所需,我需要一个可以导出 markdown 文档的。...他只有一个功能、就是生成数据库表结构说明文档,格式为madkdown。...md2rtf md2openOffice md2Epub md2latex md2MediaWiki md2reStructureText md2textile md2OPML md2png 文档页面效果 生成的...MySQL 表结构生成 Markdown 文档 MD文件转PDF ? MySQL 表结构生成 Markdown转PDF 文档
需求: Mysql用户信息表,每隔15天进行一次清理,只保留15天内的用户数据 1.表结构 class UserInfo(db.Model): __tablename__ = '用户信息表'...创建存储过程 mysql> delimiter $$ #将语句的结束符号从分号;临时改为两个$$(可以是自定义) mysql> CREATE PROCEDURE `del_data_count`(IN...TO_DAYS(NOW()) - TO_DAYS(FROM_UNIXTIME(unix_timestamp(create_time),'%Y%m%d'))) >=date_inter -> END$$ mysql...> delimiter ; #将语句的结束符号恢复为分号 6 查看已有定时事件任务 SHOW EVENTS; 7.事件的开启与关闭 开启某事件: ALTER EVENT del_tbl_expired_data
问题参考自: https://www.zhihu.com/question/440231149 ,mysql中,一张表里有3亿数据,未分表,要求是在这个大表里添加一列数据。...答案为个人原创 以前老版本 MySQL 添加一列的方式: ALTER TABLE 你的表 ADD COLUMN 新列 char(128); 会造成锁表,简易过程如下: 新建一个和 Table1 完全同构的...针对 MySQL 5.6(不包含)之前的版本,通过触发器将一个表的更新在另一个表上重复,并进行数据同步,当数据同步完成时,业务上修改表名为新表并发布。业务不会暂停。...UPDATE"; Replace into 新表 SELECT * from 原有表 where 新表.id = 原有表.id; END IF; end; MySQL 5.6(包含) 以后的版本引入了在线...参考文档: MySQL 5.6: https://dev.mysql.com/doc/refman/5.6/en/innodb-online-ddl-operations.html MySQL 5.7:
问题参考自:https://www.zhihu.com/question/440066129/answer/1685329456 ,mysql中,一张表里有3亿数据,未分表,其中一个字段是企业类型,企业类型是一般企业和个体户...答案为个人原创 假设表的引擎是 Innodb, MySQL 5.7+ 删除一条记录,首先锁住这条记录,数据原有的被废弃,记录头发生变化,主要是打上了删除标记。...由于 MySQL 是按页加载数据,这些存储碎片不仅大量增加了随机读取的次数,并且让页命中率降低,导致页交换增多。 由于产生了大量日志,我们可以看到这张表的占用空间大大增高。...begin set @x = "trigger UPDATE"; Replace into 新表 SELECT * from 原有表 where 新表.id = 原有表.id; END IF; end;...之后,将所有企业类型的数据,插入新表,同时如果已存在则证明发生了更新同步就不插入。个体户数据由于业务变化,并不在这个表上更新,所以这样通过了无表锁同步实现了大表的数据清理
不过不影响数据库的备份 3.设定定时任务(ubuntu的crontab) 执行命令: crontab-e,输入 1 4 * * * python /home/web/db_backup/db_backup.py
在实际工作中,一张表,我们可能需要在Mysql数据库中建表,又要在Oracle数据库中建表。表中每个字段的数据类型、中文注释、是否可为NULL 问题,非常影响我们建表的效率。...本篇文章,以Mysql数据库表为原表,通过PowerDesigner工具将其转化成Oracle数据库建表语句。 1、以 student(学生表)为例,Mysql数据库中建表语句如下所示。...需要注意的是,若要相对完美的将Mysql数据库表转换成Oracle数据库表,需要严格按照以下Mysql数据库表结构方式,标点符号都不能多、不能少。...由于我们是将Mysql数据库表转化成Oracle数据库表,在这里 “New 数据库管” 一行选择 “ORACLE Version 11g” 。...Mysql数据库表转成Oracle数据库表的SQL语句如下所示: /*==============================================================*/ /
在MySQL很多测试场景,需要人工生成一些测试数据来测试。本文提供一个构造MySQL大表存储过程,可以生成包含用户名,手机号码,出生日期等字段。也可以通过滤重来使得手机号码不重复,模拟现实场景。...一、生成脚本 生成说明: 以下使用存储过程批量生成包含用户名,手机号,出生日期等字段大表。 该存储过程使用基于uid作为主键,因此会生成少量重复手机号码,后面有滤重SQL脚本。...如果想一次性生成不重复手机号码,可以考虑修改以下脚本,去掉uid,基于mobile列作为主键 DROP TABLE IF EXISTS big_table; DROP PROCEDURE IF EXISTS
php $dbms='mysql'; //数据库类型 $host='localhost'; //数据库主机名 $dbName='joyous'; //使用的数据库 $user='test'...123456'; //对应的密码 $dsn="$dbms:host=$host;dbname=$dbName"; $table = array( 't_user' => '用户表'..., 't_user_info' => '用户扩展信息表', ); try { $dbh = new PDO($dsn, $user, $pass); //初始化一个PDO对象
#创建表时建立分区 DROP TABLE IF EXISTS `hc_lot_history`; CREATE TABLE `hc_lot_history` ( `id` int(11) NOT NULL...,应该创建同样的表结构同时创建分区,然后将原有数据导入新表。...p_time,'")))'); PREPARE stmt from @v_add; EXECUTE stmt; DEALLOCATE PREPARE stmt; END #查看定时状态...show variables like 'event_scheduler'; #将系统定时打开 SET GLOBAL event_scheduler = on; ?...#定时事件 CREATE DEFINER=`root`@`%` EVENT `event_day` ON SCHEDULE EVERY 1 DAY STARTS '2019-06-04 23:00:00
简介 在生产环境上,为了避免数据的丢失,通常情况下都会定时的对数据库进行备份。而Linux的crontab指令则可以帮助我们实现对数据库定时进行备份。...假如你需要在每天晚上8点整执行定时任务,那么可以这么写 0 8 * * * [command] 扩展: crontab -l 可以查看自己的定时任务 crontab -r 删除当前用户的所有定时任务...> show master status\G; 生成新的binlog文件,mysql的后续操作都会写入到新的binlog文件当中,一般在恢复数据都时候都会先执行这个命令。...恢复备份数据和binlog数据前建议先登录mysql后执行flush logs生成新的binlog日志,这样可以专注需要恢复数据的binlog文件。...总结 因为mysql定时备份是在生产环境上必须的任务。是很常用的。所以我就迫不及待的写博客。当然也很感谢我同事的帮助。这篇文章已经写了三天了,因为我也是在不断地试错,不断的更新文章。
tar zcvhf 备份文件名前缀_$date.tar.gz 备份文件名前缀_$date.sql; #压缩sql脚本 rm 备份文件名前缀_$date.sql #删除sql文件 现在我们将这个脚本添加到定时任务中去...,让每天都执行一次 使用crontab -l命令查看当前定时任务 使用crontab -e 命令编辑用户的定时任务,会使用vi编辑一个文本文件。
本片文章介绍的方案是利用Linux自身的crontab定时任务功能,定时执行备份数据库的脚本。...将备份的数据还原会将原来的数据中的表删了重建,再插入备份中的数据,这是恢复。 这一点需要注意,如果恢复之前的数据比备份的多,恢复后多的数据就没有了。...-l -crt $backup_path/*.tar.gz | awk '{print $9 }' | wc -l` if [ $number -gt $count ] then #删除最早生成的备份.../加脚本名称 chmod命令参数含义-- + 代表添加某些权限 x 代表可执行权限 定时任务crontab crontab是Linux自带的一个定时任务功能,我们可以利用它每天凌晨执行一次dump_mysql.sh...内容解释: 00 01 * * * /app/dump_mysql.sh 分两部分看, 第一部分00 01 * * * 是定时任务的周期,第二部分/app/dump_mysql.sh到时间做的事情。
使用过grpc的同学都知道,写proto文件比较繁琐,尤其是写message,对应很多字段,为此写了一个简单的从mysql直接读取表结构,生成proto文件的工具。...工具的使用很简单,需要简单的配置,即可运行生成proto文件。 项目地址:https://github.com/guyan0319/......准备 使用前需先安装依赖包go-sql-driver/mysql $ go get -u github.com/go-sql-driver/mysql 使用说明: func main() { /.../模板文件存放路径 tpl := "d:/gopath/src/mysql-to-proto/template/proto.go.tpl" //生成proto文件路径 file...charset=utf8mb4&parseTime=true") //Table names to be excluded //需要排除表,这里的表不会生成对应的proto文件
领取专属 10元无门槛券
手把手带您无忧上云