专栏首页杨建荣的学习笔记我打算这么做巡检方向的事情

我打算这么做巡检方向的事情

这是学习笔记的第 1769篇文章

巡检的工作其实是比较枯燥和乏味的,在某种程度上,他的工作和监控是有很多交集的,其实在很多公司里面,巡检方向的落地情况其实不容乐观,采用脚本和被动触发的方式效率不高,同时巡检中发现的潜在业务问题和业务部门是隔离的,也就是你在做的事情,业务部门不知道,自然就没法给予充分理解了,所以在问题的处理效率和响应上会是一个黑盒的状态,我觉得这也就是运维方向比较苦逼的一个原因。

我想把巡检的事情改进一下,首先巡检要划分大类,监控巡检,系统巡检和数据库巡检三个维度,然后巡检的意义怎么体现,那就是让业务同学能够体验到,有所帮助,所以是推荐把巡检模块集成到公共平台的,开放给业务部门使用,巡检数据就透明化了,当然可以根据时间范围灵活提取;系统巡检信息和数据库巡检信息可以从业务角度出发,提出更符合业务特性的建议;在展现形式上,需要深度定制巡检报告,可以灵活提取,在问题处理和协作方式上有所改善。

当然我也想了另外几个新的主题方向,也是后续要着力去做的内容。

整体的计划和结构如下,欢迎大家提出建议。

巡检项目规划和设计方案

巡检项目对接监控巡检,系统巡检和数据库巡检三个部分,对于巡检任务会采用任务调度的触发方式。

监控巡检模块开发

开发监控巡检接口,对接MySQL和Redis的系统巡检信息,对于部分数据库巡检指标信息,可以根据时间范围来提取数据。

任务调度对接

完善已有的celery调度,能够通过API的方式对接批量的巡检任务,通过队列方式下发异步执行,提供队列中任务信息的管理

数据库巡检梳理集成

MySQL方向的sys schema模块进行梳理和信息定制

系统巡检模块集成

系统巡检信息梳理,对接SQL r巡检信息至监控系统,系统巡检涉及密码巡检,服务可用性巡检等

巡检报告定制

基于开源项目MySQL_Watcher项目,对于巡检报告进行定制和梳理,生成报告,提供邮件发送功能

对接公共平台提供自助化服务

对接公共平台系统,开放给研发团队,可以根据时间范围抽取信息,报告内日用已邮件形式发送

时间序列故障预测

基于时间序列的数据分析,能够根据历史沉淀数据和当前问题,对问题做同比和环比分析,能够根据数据变化趋势预测问题和问题周期

监控数据图模型分析

对于已发生的历史,抓取常见的场景,基于图模型进行问题的分析,能够得到根因,通过关联树形方式得到更清晰的结构

基于机器学习的故障自愈

对于已监控的问题,将解决问题和过程和方法进行沉淀,基于大量的案例分析进行方案的提取,基于已有的模型形成流程化的自动任务,能够对执行结果进行控制和建议

本文分享自微信公众号 - 杨建荣的学习笔记(jianrong-notes)

原文出处及转载信息见文内详细说明,如有侵权,请联系 yunjia_community@tencent.com 删除。

原始发表时间:2018-10-10

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

我来说两句

0 条评论
登录 后参与评论

相关文章

  • Django项目中使用celery做异步任务

    在写项目过程中经常会遇到一些耗时的任务, 比如:发送邮件、发送短信等等~。这些操作如果都同步执行耗时长对用户体验不友好,在这种情况下就可以把任务放在后台异步执行...

    程序员同行者
  • Github寻找敏感信息

    0x01 引子 先给不知道什么是Github的朋友们科普一下什么是Github Github是一个分布式的版本控制系统,目前拥有140多万开发者用户。随着越...

    周俊辉
  • 狙击小米+高通?余承东为首款7nm麒麟980打Call!

    又是一年德国 IFA,等待了整整 365 天之后,华为新一代 AI 芯片麒麟 980 准时亮相世人眼中。不过,此次为荣耀站台的并非荣耀总裁赵明,而是华为手机总裁...

    AI科技大本营
  • 什么是0day漏洞

    在计算机领域中,0day通常是指还没有补丁的漏洞。也就是说官方还没有发现或者是发现了还没有开发出安全补丁的漏洞,比如苹果的越狱插件都是利用0day漏洞的。所以越...

    周俊辉
  • 美国政府正采取措施整改备受困恼的 CVE 系统

    据外媒报道,美国政府正在采取措施修复近年来一直受到各种问题困扰的公共漏洞和暴露(CVE)系统。

    周俊辉
  • 这次简单多了,最新版 MongoDB 安装

    近期在 win10 系统的电脑上安装了 MongoDB 4.0.1 版本,发现比以前版本的安装简单很多了,基本上一路 next就可以使用了,不需要进行繁琐的设置...

    用户1737318
  • 文因互联鲍捷:深度解析知识图谱发展关键阶段及技术脉络 | 公开课笔记

    知识图谱是人工智能三大分支之一——符号主义——在新时期主要的落地技术方式。该技术虽然在 2012 年才得名,但它的历史渊源,却可以追溯到更早的语义网、描述逻辑、...

    AI科技大本营
  • 什么是搜索引擎索引和收录?有什么区别?

    昨天和一个做网站优化的朋友(SEO 新手)交流,说到了搜索引擎的索引、收录,子凡相信这也是很多入门 SEO 新手都比较容易混淆的两个点,所以我们就一起来看看搜索...

    周俊辉
  • 二次注入代码剖析

    本文针对二次注入进行讲解,并简单的绕过360脚本waf。。。。。 首先来看程序的注册页面代码:

    周俊辉
  • 京东金融副总裁曹鹏:不做“浮冰”,深挖AI技术和场景 | AI聚变

    典型的技术人士似乎都有一种“Talk is cheap, show me the code.”的气质,在与京东金融技术副总裁曹鹏交谈的过程中,当他一开始就说出“...

    AI科技大本营

扫码关注云+社区

领取腾讯云代金券