首页
学习
活动
专区
工具
TVP
发布

GO实现简单(命令行)工具:sftp,文檔压解,RDS备份,RDS备份下载

GO实现简单(命令行)工具:sftp,文檔压解,RDS备份,RDS备份下载 轉載請註明出處:https://www.cnblogs.com/funnyzpc/p/11721978.html 内容提要:...1.远程连接linux执行sftp文件下载 2.window下文件解压缩(tar、gz、zip) 3.window下文件解压缩及带密码解压(zip) 4.window下调用阿里雲RDS api查询备份并下载...github.com/pkg/sftp 与 golang.org/x/crypto/ssh,一个是执行sftp命令,一个是建立ssh连接的,因为sftp是建立在安全的ssh连接上的 样例中有我实现实现linux日志拉取的功能的完整代码...password) 將當前讀取到的文件及目錄寫入到local func writeFile(filePath string, f *zip.File) error {... 4.window下调用阿里雲RDS...api查询备份并下载 example: main1.go 其實這是對前幾個功能對一個綜合,我對目的是下載阿里雲的RDS的物理備份並解壓,當然你需要先參閱官方api文檔,在這裏DescribeBackups

2.7K20

MySQL技能完整学习列表11、日志备份——1、查看日志——2、数据备份和恢复(mysqldump, mysqlbinlog)

查看日志(Error Log, General Query Log, Slow Query Log) MySQL提供了多种日志功能,用于记录数据库运行时的各种信息,如错误日志、一般查询日志和慢查询日志等...查看方法 一般查询日志的开启和配置可以在MySQL配置文件中进行设置。...查看方法 慢查询日志的开启和配置可以在MySQL配置文件中进行设置。...使用文本编辑器或命令行工具打开指定的慢查询日志文件进行查看。...例如,在Linux系统中,可以使用以下命令查看慢查询日志: tail -f /var/log/mysql/slow.log 数据备份和恢复(mysqldump, mysqlbinlog) MySQL的数据备份和恢复是数据库管理中的重要任务

23410
您找到你想要的搜索结果了吗?
是的
没有找到

查看日志】教你查看日志的N种方式

目录 一、什么是日志 二、查看日志的N种方式 三、linux日志文件 四、历史文章指路 一、什么是日志 日志就是程序运行过程的记录,可以通过日志来检查程序运行的过程,检查错误发生的原因,日志对于定位问题是非常重要的...那么学会如何查看日志就是我们必须掌握的技能了。...区别在于应用名称,一个流程一般涉及到多个系统,因此需要切换到不同路径下进行日志查看,那么如何快速的查看日志呢?...可以通过编写脚本,将不同点即应用名称作为参数传入到脚本里面,通过脚本来实现切换目录,查看日志等动作,详情可查看我之前写的一篇【查看日志】一文详解cdlog 。 下面是一些查看日志的基本方式。...二、查看日志的N种方式 1、tail 命令格式: tail[必要参数][选择参数][文件] 查看最新10条日志 tail demo-log.log 实时查看日志(tailf等同于tail -f -n

3K31

nginx查看日志

nginx的log日志分为access log 和 error log 其中access log 记录了哪些用户,哪些页面以及用户浏览器、ip和其他的访问信息 error log 则是记录服务器错误日志...错误日志的形式如下: 10.1.1.1 - - [22/Aug/2014:16:48:14 +0800] "POST /ajax/MbpRequest.do HTTP/1.1" 200 367 "-"...Windows NT 6.1) AppleWebKit/537.11 (KHTML, like Gecko) Chrome/23.0.1271.97 Safari/537.11" 其实nginx access日志的格式不是一成不变的...在nginx的nginx.conf配置文件找到:log_format 这里就是日志的格式 看一下和上述日志匹配的log格式设置: #access日志格式配置,具体参数不再细说,上面都已经说过了,自己对应一下即可...,注意:access.log文件是可以按日期进行分割的,方便查看及处理 access_log  /usr/local/nginx/log/access.log  main; 相关说明解释  1.

7.8K60

GDB查看xtrabackup备份流程

xtrabackup备份原理其实到处都能找到, 也有很多源码解读的, 但是都不太直观, 所以本文使用GDB查看下xtrabacup的备份流程(仅全备流程) 写在前面 gdb的基础使用可以看前面的文章:...cloud.tencent.com/developer/article/2226040 新增如下gdb命令(可选) LWP lightweight process 就是线程 命令 解释 info threads 查看线程信息..., 使用step进入备份函数, 查看详情 图片 获取当前LSN 图片 创建新线程去拷贝日志 图片 可以使用thread 2 切换到2线程去, 看下这个线程的栈帧 图片 别忘了切回来 thread 1...拷贝myisam表 不锁表(--no-lock)的话,会停SQL_THREAD (STOP SLAVE SQL_THREAD) 图片 直接next了, 不去细看了 图片 获取最新的lsn 图片 停止日志拷贝线程..., (mysqldump是以备份开始的时间点作为恢复点的).

76140

tomcat日志配置——如何查看日志

问题: tomcat每次启动时,自动在logs目录下生产以下日志文件,且每天都会生成对应日期的一个文件,造成日志文件众多,而且不知道各个文件记录的信息大致内容。...05.txt catalina.2017-07-05.txt manager.2017-07-05.txt host-manager.2017-07-05.txt 目的 了解tomcat日志生成的原理和日志记录的大致内容...Tomcat日志设定 1、Tomcat 日志概述 Tomcat 日志信息分 为 两 类 : 一、是运行中的日志,它主要 记录 运行的一些信息,尤其是一些异常 错误 日志信息 。...2 Tomcat 日志配置 2.1 访问日志的配置 默认 tomcat 不记录访问日志,如下方法可以使 tomcat 记录访问日志 编辑 catalina/conf/server.xml文件.注:...3.1 日志类型与级别 Tomcat 日志分为下面5类: catalina 、 localhost 、 manager 、 admin 、 host-manager 每类日志的级别分为如下 7 种:

2.1K20

云数据备份 | CDN 日志备份最佳实践

CDN 按照小时粒度对全网访问日志进行打包,默认存储 30 天访问数据。COS 轻应用 -- CDN 日志备份,则是用户永久存储 CDN 访问日志的最佳选择。...COS 应用集成 - CDN 日志备份概述 CDN 日志备份是腾讯云对象存储(Cloud Object Storage,COS)基于云函数为用户提供的将 CDN 日志转存至 COS 的功能,可以协助用户将...用户一键配置指定存储桶配置日志备份规则后,云函数会按照一定的时间粒度获取 CDN 日志并转存至 COS 存储桶中(目前仅支持增量转储)。...; 3、点击“添加函数”,配置 CDN 日志备份规则,点击确认,自动创建云函数,详细配置说明请参考  CDN 日志备份; 4、通过加速域名访问存储桶资源,COS 提供多种方式访问存储桶资源,详情可见...工具概览(可选); 5、到备份规则中配置的 “关联存储桶” 文件列表,进入根目录或指定前缀,看到 CDN 日志已经转储到关联存储桶; 结语 通过 CDN 日志备份,可以有效的将 CDN 日志进行转存以便于进行访问行为分析

3K80

查看mysql慢日志_docker查看实时日志的命令

慢查询日志是否开启 show variables like ‘%slow_query_log%’; #如果结果中包含slow_query_log | OFF ,则说明慢日志已经关闭 #开启慢查询日志的方式...:set global slow_query_log=1; 慢查询sql的设置时间 查看慢查询sql的设置时间,默认10s,sql执行时间大于该时间的才是慢sql,才会记录到慢查询日志中 show variables...你用show variables like ‘long_query_time’查看是当前会话的变量值,结果还会是10s,你也可以不用重新连接会话,而是用show global variables like...log_output=’FILE’表示将日志存入文件,默认值是’FILE’。log_output=’TABLE’表示将日志存入数据库,这样日志信息就会被写入到mysql.slow_log表中。...日志记录到系统的专用日志表中,要比记录到文件耗费更多的系统资源,因此对于需要启用慢查询日志,又需要能够获得更高的系统性能,那么建议优先记录到文件.

3.2K40

系统各类日志查看

[TOC] 0x00 快速入门 包含了用户日志、服务进程日志、系统安全日志等(syslog); logrotate 命令 描述:用于对系统日志进行轮转、压缩和删除,也可以将日志发送到指定邮箱,防止linux...copytruncate — 用于还在向开放日志文件写信息的过程。该选择将活归档日志文件制成副本。 nocopytruncate — 把日志文件复制进备份,但该开放文件不会被裁剪。...mail address — 这个邮件日志文件是循环到一个地址,因此能有效从系统中清楚。 nomail 在邮件日志循环时,副本不邮寄。...olddir directory — 这个选项会将循环日志文件保持在特定目录。该目录必需与现有日志文件在同一文件系统。 noolddir — 循环的日志文件与现有文件处于相同目录。...postrotate/endscript — 可以在一个日志文件旋转时执行的命令。 daily — 每日旋转日志文件。 weekly — 每周旋转日志文件。 monthly — 每月旋转日志文件。

1.2K20

Linux查看日志方法

若是一旦出现问题,用户就可以通过查看日志来迅速定位,及时解决故障,所以学会查看日志文件也是在日常维护中很重要的操作。Linux系统日志的三种类型1、内核及系统日志。...使用该命令,系统管理员可以查看当前系统存在哪些不合法用户,从而对其进行审计和处理。who的默认输出包括用户名、终端类型、登录日期及远程主机。...查看日志常用命令tail:-n 是显示行号;相当于nl命令;例子如下:tail -100f test.log 实时监控100行日志tail -n 10 test.log 查询日志尾部最后10行的日志;tail...-n +10 test.log 查询10行之后的所有日志;head:跟tail是相反的,tail是看后多少行日志,而head是查看日志文件的头多少行,例子如下:head -n 10 test.log...查询日志文件中的头10行日志;head -n -10 test.log 查询日志文件除了最后10行的其他所有日志;cat:tac是倒序查看,是cat单词反写;例子如下:cat -n test.log |

8.2K110

实时查看容器日志

实时查看容器日志 介绍一款使用了几个月的开源小工具,Dozzle。它是一款轻量、简单的容器日志查看工具。 本篇将简单介绍如何使用它,包括搭配 Traefik,以及如何快速从源码构建它。...主要原因是,它不存储和处理日志,仅仅提供实时查看功能,类似我们日常使用 ps、top 一样,使用它可以减少我们在服务器上低效执行 docker logs 或者 docker-compose logs 等类似命令的执行...(容器网卡)内的容器的实时日志,以及已停止容器的历史运行日志了。...因为容器的盛行,许多时候我们需要同时查阅多个服务的日志状态,Dozzle 支持“分屏”查看,还是很方便的。 [Dozzle 日志分屏] 当然,还有常用的关键词搜索过滤、文本高亮。...[Dozzle 定制构建] 最后 希望本篇内容能解救不停登录服务器查看日志,或者耐着性子等云平台日志中心日志刷新的你。

1.3K00

实时查看容器日志

实时查看容器日志 介绍一款使用了几个月的开源小工具,Dozzle。它是一款轻量、简单的容器日志查看工具。 本篇将简单介绍如何使用它,包括搭配 Traefik,以及如何快速从源码构建它。...主要原因是,它不存储和处理日志,仅仅提供实时查看功能,类似我们日常使用 ps、top 一样,使用它可以减少我们在服务器上低效执行 docker logs 或者 docker-compose logs 等类似命令的执行...(容器网卡)内的容器的实时日志,以及已停止容器的历史运行日志了。...因为容器的盛行,许多时候我们需要同时查阅多个服务的日志状态,Dozzle 支持“分屏”查看,还是很方便的。 ? Dozzle 日志分屏 当然,还有常用的关键词搜索过滤、文本高亮。 ?...Dozzle 定制构建 最后 希望本篇内容能解救不停登录服务器查看日志,或者耐着性子等云平台日志中心日志刷新的你。 --EOF ---- 我现在有一个小小的折腾群,里面聚集了一些喜欢折腾的小伙伴。

78720
领券