当虚拟机服务器运行Docker久了后，发现Docker的文件越来越大，某天发现此台机上的数据库访问不了了，再重启数据库等日志，提示空间不足，查看磁盘空间： root分区满载啊，前段时间还有不少空间的...find / -xdev -size +100M -exec ls -l {} \; 最近用的docker越来越大 才导致磁盘满了。 那下面要么清理docker，要么扩展磁盘。...w --写入分区表 这样就把整个磁盘分成了一个区。
2.1 general 这里是一些通用的设置, 丢弃旧的构建 多次构建又不手动清除 会生成很多文件 ,占用磁盘空间 这里的丢弃旧的构建的配置大家按需配置即可 ? 2.2源码管理 ? ...版本控制这里使用的是git git的地址填进去 点击Add 添加 git的账号密码 然后在下拉框中选择刚刚新增的账号密码 ? ? ...时(0-23)、日(1-31)、月(1-12)、周(0-7, 0/7=周日) ## "M,N" 表示M和N；"M-N" 表示范围[M,N]；"M-N/X" 表示范围[M,N]内每隔X；"*/X" 表示整个范围内每隔...安装 yum install git 后去全局工具配置你配置好git的路径 2. jenkins部署失败 首先去看对应任务的日志 ? ? ? ...从日志中可以看出来这里jenkins 编译是成功的 但是在复制war的时候报错, 图中是因为不小心把空格敲成换行了 ?
使用Btrfs文件系统可以通过压缩减小磁盘空间的使用，但是需要注意的是，压缩会增加CPU的开销和IO延迟。 二、删除不需要的文件 删除不需要的文件可以释放磁盘空间并减少对磁盘的访问，提高系统性能。...但是随着软件包的安装，Apt缓存会越来越大，并占用磁盘空间。...清除Apt缓存可以释放磁盘空间，具体的命令如下： sudo apt-get clean 四、清除日志文件 日志文件是系统记录事件和活动的重要文件，但是随着时间推移，日志文件会越来越大并占用磁盘空间。...，daily表示每天轮换，compress表示压缩日志文件，missingok表示日志文件不存在时忽略错误，notifempty表示日志文件为空时不轮换。...六、设置Quota配额 使用Quota配额可以限制磁盘空间的使用，避免硬盘满的情况发生。在Linux系统下，需要安装quota工具并配置文件系统才能启用配额功能。
jenkins的安装这里就不做描述了,很简单的 百度搜索一下即可 这里安装的jenkins-2.39-1.1 wgethttp://pkg.jenkins-ci.org/redhat/jenkins-2.39...2.1 general 这里是一些通用的设置, 丢弃旧的构建 多次构建又不手动清除 会生成很多文件 ,占用磁盘空间 这里的丢弃旧的构建的配置大家按需配置即可 如果想学习Java工程化、高性能及分布式、深入浅出...版本控制这里使用的是git git的地址填进去 点击Add 添加 git的账号密码 然后在下拉框中选择刚刚新增的账号密码 ? ?...(0-59)、时(0-23)、日(1-31)、月(1-12)、周(0-7,0/7=周日)##"M,N"表示M和N；"M-N"表示范围[M,N]；"M-N/X"表示范围[M,N]内每隔X；"*/X"表示整个范围内每隔...2. jenkins部署失败 首先去看对应任务的日志 ? ? ? 从日志中可以看出来这里jenkins 编译是成功的 但是在复制war的时候报错, 图中是因为不小心把空格敲成换行了 ?
一、前言现在的企业很多都在用Jenkins做持续集成，各个业务端都依靠Jenkins，vivo Devops也是使用Jenkins来进行持续构建，部署Jenkins服务时如何保障服务的高可用变得尤为重要...Jenkins Workspace没有自动清理功能，会导致磁盘空间不足，任务执行不了的情况。...该系统需要达到如下的目的：提升整个构建服务可靠性时长。保证jenkins集群的高可用，解决目前master-slave的单点问题，保证整个构建服务的可靠性时长。降低灾难时服务恢复时长。...第二，设计并开发了一套用于管理Jenkins集群的调度系统。...API日志统一收集：类似于一个aspect切面，记录接口的进入和出去时的相关日志。数据处理：对请求的参数进行数据的转换处理。
在基于jenkins集成跑自动化测试时，由于每日构建上千次，每天会生成大量中间日志文件，如果在前期规划时，未能及时的自动清理掉这些中间日志文件，会导致jenkins所在服务的磁盘空间被大量占有，甚至耗尽...这个时候我们就需要手动清理掉这些job的中间日志文件了。 以部署在linux下的jenkins为例，默认情况下，jenkins中间日志文件记录在如下路径： ?...笔者一般是通过Python代码来做这个事，并做成一个定时任务，以周为单位，每周清理一次中间文件： 具体代码如下： ?...代码说明： 只有build了60次以上的job才会被清理 只有清理最近30次之前的日志记录 本质就是遍历/root/.jenkins/jobs目录，删除相关记录文件 硬干才是真理，不要怕搞死自己，搞死了
访问日志不记录静态文件 网站大多元素为静态文件，如图片、css、js等，这些元素可以不用记录 。...如果不去做限制，每个请求都包含很多图片，每个请求都会记录日志，日志会变得越来越大，不仅会消耗磁盘空间还会消耗磁盘IO。...img去掉，再去访问jpg图片，日志就会再次记录。...访问日志切割 日志一直记录总有一天会把整个磁盘占满，所以有必要让它自动切割，并删除老的日志文件 把虚拟主机配置文件修改CustomLog如下： DocumentRoot...重新加载配置文件 -t, graceful 查看logs目录，会出现新的日志，每天的凌晨都会生成一个新的日志（需要做一个任务计划，把超过一个月或者两个月的日志删除）： ls /usr/local/apache2.4
2、修改 Jenkins 主目录 Linux 下 Jenkins 默认安装目录为 /var/lib/jenkins/，这个目录磁盘空间有限，长时间使用会导致磁盘空间不够，建议修改为其他大磁盘空间目录。...3、配置优化减少磁盘空间占用 Jenkins 运行 Job 构建比较多时，如果没有配置好清理策略的话，会导致占用磁盘空间比较大，最终由于磁盘空间不够导致构建失败的问题。...这样的弊端就是当某次构建出现了错误或者要排查某次构建信息，除了按构建时间区间挨个去点开日志，别无他法，而该插件可以很好的解决该问题。...当然，我们还可以更高级的使用该插件，比如从文件中读取参数，使用表达式从构建日志中匹配 Key 值，这样功能将更加强大了。 ?...并注册到 Master 上，当运行完 Job 后，这个 Slave 会被注销并且 Docker Container 也会自动删除，恢复到最初状态。
1.系统要求 最低推荐配置: 256MB可用内存 1GB可用磁盘空间(作为一个Docker容器运行jenkins的话推荐10GB) 为小团队推荐的硬件配置: 1GB+可用内存 50...GB+ 可用磁盘空间 注意: 最初在linux 上安装的分盘空间较小，安装插件的时候会遇到各种错误，重新安装位置比较麻烦 2....2.2 docker 容器运行镜像 docker run # 第一个主机端口（浏览器访问端口）随便填，第二个容器端口 -p 9090:8080 \ # 将jenkinsci/blueocean...html> ${ENV,var="JOB_NAME"}-第${BUILD_NUMBER}次构建日志...> 构建日志
2.4.2 安装和配置插件 进入 Manage Jenkins -> Manage Plugins，搜索并安装 Publish Over SSH 和 Maven Integration 两个插件， Git...在General，勾选 Discard old builds，可以设置最多保留构建文件多少天，和最多保留多少个构建文件，不然每次构建生成的文件都会保留，占用磁盘空间。 ?...接下来就是设置 build 完之后，把 jar 包从 Jenkins 服务器拷贝到应用服务器上，并运行。 ? Name：选择之前创建的服务。...Source files：maven 打包后生成的 jar 包，即要拷贝到应用服务器运行的程序，可填多个，英文逗号分隔。...总结 其实整个流程不是很复杂，Jenkins 从远程代码库拉取代码 -> 调用 maven 指令将项目打包 -> Jenkins 将打包好的文件拷贝到远程应用服务器 -> 在远程应用服务器上执行 shell
“ 老板： 你会Jenkins？ 我会。 先加薪两千吧。...” ---《吴柯的运维笔记》 01 项目构建 Jenkins系统管理 --点击系统管理-->进入管理插件 --选择可选插件-->过滤Publish over SSH-->选中并点击直接安装 02 --点击系统管理...-->进入系统设置 --添加管理员邮箱 --Publish over SSH-->在Passphrase填写部署jenkins服务器的登录密码-->并增加新的远程服务器 在SSH Servers中添加以下参数...Name 名字自定义 Hostname 主机名填需要远程登录的服务器ip地址 Username 用户名填root Remote Directory 远程服务器目录填已存在的目录 添加完点击Test...）--> 待构建日志输出：Finished: SUCCESS（构建成功） 确保SSH：输出Transferred 1 file（s）：证明该服务jar包以正确发送至目标服务器 查看jar是否运行： Jenkins
#创建 ci 组 [root@localhost /]# useradd jenkins -g ci #创建用户jenkins并指定ci组 #创建文件夹存放jenkins工具，并且指定权限，jenkins...2>&1 & 日志位置设置 [root@localhost software]# nohup java -jar /data/software/jenkins.war --httpPort=8777...software]# ls jenkins.log jenkins.war 之后我们查看 jenkins.log ⇒cat jenkins.log,会发现日志的最下面出现了一串密码，这个密码很重要，...4.1 jdk配置 配置位置 ：系统管理 ⇒ 全局工具配置 ⇒ 新增jdk 不使用自动安装，因为我们linux中已经配置了jdk，我们只需要将jdk的路径填进去就可以了。...（如果填的路径不存在的话将会出现报错信息） 最后点击保存。这样就配置完成了，简简单单。
一、前言 随着每天业务的增长，Tomcat 的catalina.out日志 变得越来越大，占用磁盘空间不说。要查看某个时候的日志的时候，庞大的日志让你顿时无从下手，所以日志的切割的变得刻不容缓。...而且，切割后的日志，还可以定期清理掉久远的日志.........二、Tomcat 日志分割 我们采用日期形式切割catalina.out 日志，因此采用cronlog 软件切割： 1、安装 cronlog yum install -y cronolog httpd...tips：不能再用原来的catalina.out 来输出日志了哦，因为刚刚不是被我们注释掉了... ?...三、定时清理日志 想要写一个Shell脚本，定期清理掉久远的日志文件 ，避免磁盘不断被占用。
前言 随着每天业务的增长，Tomcat 的catalina.out日志 变得越来越大，占用磁盘空间不说。要查看某个时候的日志的时候，庞大的日志让你顿时无从下手，所以日志的切割的变得刻不容缓。...而且，切割后的日志，还可以定期清理掉久远的日志。 Tomcat 日志分割 我们采用日期形式切割catalina.out 日志，因此采用cronlog 软件切割。...tips：不能再用原来的catalina.out 来输出日志了哦，因为刚刚不是被我们注释掉了。 ? # 定时清理日志 想要写一个Shell脚本，定期清理掉久远的日志文件 ，避免磁盘不断被占用。
问题 2：“Argument list too long” 错误与解决方法 # crontab -e 编辑完后保存退出后，报错 no space left on device 根据上面的报错了解到是磁盘空间满了...接着通过命令 du –sh * 命令检查 / var 目录下面的所有文件或者目录的大小，发现 / var/spool/clientmqueue 目录占用了 / var 整个分区大小的 90%，那么 /...，于是首先查看磁盘空间使用情况 # df -h 从磁盘输出信息可知，所有的分区磁盘空间都还有剩余不少，而 Oracle 监听写日志的路径在 / var 分区下，/var 下分区空间足够。...在将数据对应的指针从 meta-data 中清除后，文件数据部分占用的空间就可以被覆盖并写入新的内容，之所以出现删除 access_log 文件后，空间还没有释放，就是因为 httpd 进程还在一直向这个文件写入内容...，磁盘空间不但可以马上释放，也可以保障进城继续向文件写入日志，这种方法经常用于在线清理 apache /tomcat/nginx 等 web 服务产生的日志文件。
故障可以理解为集群生命周期中的一个状态，而创建是整个生命周期的起点。同时，重置、重启都是非常快速地解决问题的方法，都涉及创建。 1.2 解决集群故障的思路 如上图所示，是我的集群故障修复思路。...kubectl logs 查看负载的日志。当 pod 处于 running，但是又无法正常提供服务时，logs 信息能够给出有用的提示。...有时无法查看 pod 中容器的日志，那么需要去 pod 所在的节点查看 docker 的日志。journal 通过 -u 参数指定服务，通过 -f 查看滚动的最新日志，也十分有用。...3.2 大量多分支流水线占满磁盘空间 多分支流水线扫描时，会将仓库拉取到 /var/jenkins_home/cache 中，查找 jenkinsfile 文件。...和 ks-jenkins 调度到一个节点进行验证。
这个密钥对的作用是用来登录目标服务器 代码最终要更新到此服务器中，WEB服务在此服务器中运行 Username 和 Password 必须手动指定，即为登录账号与密码 Description 可以不填，...只是为了识别 ID 可以不填，会自动生成 添加SSH远程主机 [HomePage]->[Manage Jenkins]->[Configure System]->[SSH remote hosts]->...服务端口的 DNAT 映射，无疑后者的网络环境要求要高一些，但是前者的系统开销要大一点，因为事件触发的响应式模型更加有效和节省系统资源 配置执行内容 Build 作为整个构建过程中最核心的一步，里面定义了所有要做的事情...提交变更触发发布 从本地 commit 完代码 push 到远程库后，远程仓库的代码版本就会发生变化 等每两分钟的 pollSCM 检查后，发现远程代码版本发生了变化，就会触发一次 build 的过程 日志输出...usage of workspace Finished Calculation of disk usage of workspace in 0 seconds Finished: SUCCESS 从日志中可以看到整个构建过程的详细输出与返回状态
流水线可以让项目发布流程更加清晰，docker可以大大减少Jenkins配置。 1、前言 数据卷挂载到 /var 磁盘目录下，因为该磁盘空间较大，后面需要挂载容器数据卷，以防内存吃紧。...- /usr/local/bin/docker-compose:/usr/local/bin/docker-compose 创建启停脚本文件： restart , start, stop, 并修改文件权限.../start 5、查看容器日志 docker logs 'ContainerId' 生成Jenkins登录初始密码，一会登录的时候要用 docker logs -f jenkins 查看实时日志...查看Jenkins状态 ps -ef | grep jenkins 6、宿主机访问jenkins主目录 # 容器内/var/jenkins_home挂载目录 /var/vol_dockers/...防火墙相关的可以参考掘金文章 本篇完，以后启停Jenkins服务可以直接执行上面配置的可执行文件即可，比较方便。后面接着开始创建jenkins用户，配置Jenkins。 ----
DevOps负责进行构建定义或部署架构的设计，生成Jenkins的pipeline job的配置文件；然后Jenkins根据这个配置文件创建并执行pipeline job；DevOps再通过Jenkins...目前我们DevOps中默认的是10分钟，如果超过这个时间构建就会自动终止，并自动提一个Bug。开发或管理人员可以跟踪日志定位构建超时的具体原因，优化内部实现或调整外部环境。...设置这个保留策略，主要是为了节省存储空间，因为每次构建都会生成一些构建日志和临时空间里的文件，通过保留策略可以优化Jenkins的磁盘空间使用效率。我们可以在构建历史中看到保留下来的那些构建记录。...首先是DevOps根据构建定义生成Jenkins pipeline job配置文件，并调用Jenkins API传递配置参数启动Jenkins pipeline job，然后，Jenkins根据配置参数创建...此外，在控制台信息里DevOps提供了整个构建过程的日志浏览，包括相关的上下文信息，我们也可以通过控制台信息来定位构建过程中的问题。 其次，我们可以查看代码质量情况。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
