在业务的驱动下，美团点评DBA团队经历了从“人肉”运维到工具化、产品化、自助化、自动化的转型之旅，也开始了智能运维在数据库领域的思考和实践。...本文将介绍美团点评整个数据库平台的演进历史，以及我们当前的情况和面临的一些挑战，最后分享一下我们从自动化到智能化运维过渡时，所进行的思考、探索与实践。...还有一个就是专业的DBA越来越匮乏，越来越贵，关键是根本招聘不到人手。 在这种背景下，我们必须去思考：如何突破困局？如何朝着智能化转型？传统运维苦在哪里？智能化运维又能解决哪些问题？...但主动出击不一定是通过DBA去做，可能是系统或者机器人操作；第三，传统运维是由DBA发起和解决的，而智能运维是系统发起、RD自助；第四，传统运维属于“人肉救火”，而智能运维属于“智能决策执行”；最后一点...w=1340&h=672&f=png&s=274797] 上图是传统运维和智能运维的特点分析，左边属于传统运维，右边属于智能运维。
同时跟公司数据平台的同事有了交流，对数据仓库在智能运维的应用，有了初步的想法，并且开始尝试实践。...年：开始基于特定的业务，搭建智能运维的解决方案。...对完整的智能运维解决方案，开始有了自己独特的理解； 总结一下自己的认知过程 12.png 从不同的角度看智能运维，以质量保障为例 个人认为，智能运维是一套复杂的人工智能的解决方案。...从业务的角度看智能运维 首先，智能运维是建立在运维的基础之上的，只有了解了现有的运维的内容和技术体系，我们才能够合理的思考，智能运维在整个运维体系中的地位和作用。 ...，同时也可以为 智能运维 提供数据样本； • 故障管理平台 • 等等 数据分析 • 动态阈值检测服务：涵盖了 算法模型、样本管理、算法评估等
实际上很多企业都有想做一套数据库运维平台的想法，主要基于以下的一些原因 1 ORACLE 的淘汰，导致更换其他数据库后，数据库的台数和数量等都有上升，管理手段和方式在使用纯手工的方式进行大批量的数据库的管理...2 固定种类数据库运维监控种类的平台建立，这样的平台也是见得不少，都有自己的特性和卖点，并且有些产品是固化与某一种数据库产品或自研数据库产品所推出的，这些平台包含，自动搭建数据库，自动巡检数据库，自动运维故障处理...3 基于业务的数据库运维的平台，这点可能是商业数据库平台的一个无法触及的地方，目前经济环节的问题会导致针对成本核算的重视，而数据库成本的计算，尤其与业务方面有关的方面这是一个空白，比如数据库为什么要扩充容量...自研平台可以针对各种数据库的原理结合自身的业务特性，做出适合企业特有的数据库运维与工作性能监控，任务自动一体化的平台，通过平台的搭建，搭建者会成为数据库技术及公司业务的精通者，并且对于DEVOPS 软件平台的规划和功能模块的划分也会有深入的了解...从某种角度，如果深入到业务甚至可以通过平台的方式节省在数据库上的投入，转变被动管理方式，为主动管理，让数据库运维从花钱的角色，变为省钱的角色，乃至一个“赚钱”的部门。
随着智能化技术的发展，为了解决上述运维领域的问题，智能运维的呼声越来越高。...3、在大数据时代， 智能运维与数据、自动化运维之间的关系 智能运维的理想状态就是把运维工作的三大部分（监控、管理和故障定位），利用一些机器学习的方法有机结合起来。...目前能够把这三部分融合起来的办法就是利用人工智能的手段，最后达到一种智能运维的状态。 4、智能运维当下的状况及智能运维发展的预测 智能运维当下还是一个初步探索的阶段。...可以举几个时间数字，我所看到的一个和智能运维相关的开源项目是在 2013 年，第一个主动出来宣讲智能运维相关内容的国内企业是百度，时间是 2015 年，智能运维大量出现在宣讲上的时间是在 2016 年下半年...现在比较明确的是大家会朝着智能运维方向发展，并且智能运维的发展一定是一个长期演进的过程。 对于智能运维的发展预测，我的简单看法如下： 智能运维会首先体现出其在告警系统上的价值。
易电务作为国内智能配电运维系统整体解决方案提供商，为企业提供更好的应对不断变化的技术环境和业务模式。...微信图片_20210506133120.png 智能配电运维云平台是基于云计算、移动互联网、大数据等先进技术，为客户提供全面的配用电系统监视、管理以及运维等功能。...平台通过对用电网络和设备365*24远程集中监控，确保配用电系统安全可靠运行;通过专业丰富的能效管理功能，帮助用户实现节能降耗，经济用电;通过线上、线下打通的运维管理功能使得运维管理更加高效、便捷;通过丰富和友好的用户交互界面以及移动...智能电力运维云平台特点及优势： 安全：365*24远程集中监控，智能告警与事件记录，确保用电系统安全; 专业：一套平台集成监控、运维、能效、管理等功能，打通数据流和业务流。 ...微信图片_20210419101306.jpg 智能电力运维云平台客户价值： 1、运维新模式，服务更高效 7*24小时用能实时监测与报警，系统自动生成巡检计划，科学指导巡检，运维效率相对传统的模式提高
远程运维是工业互联网重要组成部分，没有工业互联网核心技术，远程运维不可能实现目标，设备远程运维平台运用了各种新技术，物联网实现数据接入，云计算实现存储、大数据实现分析， 人工智能实现状态检修与预警预报。...01设备远程运维平台设备远程运维平台通过智能终端对设备进行在线监测，将各种数据上传到云平台，存储、整理、分析，通过智能应用系统实现在线监控、记录、查询、统计、分析、修改、报警等操作，实现远程智能化管理。...04设备远程运维系统优势1、一物一码，快速全面掌握设备信息系统给每台设备配置唯一的二维码标识，扫一扫即可快速查看设备详情、服务记录、备件更换记录、设备使用帮助、知识库以及设备的实时运行数据，更加有利于客户对产品使用...3、连接用户更紧密，提高企业和客户的黏性通过智能化服务，随时为客户提供各种信息，保障客户设备良性运作和使用寿命。变被动服务为主动服务，增加客户配件在原厂家的购买率及新设备的复购率。...4、盘活数据资产价值，提升行业竞争优势把厂家多年辛苦积累的售出设备、客户、售后服务等数据进行可视化展示，让沉默的数据盘活成企业有价值的资产，向领导和顾客更好的展示公司的实力。05设备远程运维应用价值
📷 README.md #效果一 📷 #效果二 ---- 📷 #效果三 📷 传送门： https://github.com/x931890193/-EOMS
面对这些新形势下的挑战，IT 运维管理（ITOM）需要从原有的人工加被动响应，转变为更高效、更智能化的运维体系，为新形势下的IT系统保驾护航。...（来源：Turn Big Data Inward With ITAnalytics） 令IT运维团队感到欣慰的是，智能运维（AIOps）踏着人工智能的时代浪潮应运而生。...AIOps平台通过收集各类数据源（包括操作系统、系统软件、数据库、应用日志等），统一进行管理。...不同于以往每次仅可查看数量有限的几种日志，运维人员可通过智能运维平台所提供的关键字、统计函数、单条件、多条件、模糊查找等功能，在多个系统中快速定位故障信息，帮助运维人员从全局视角查看系统的运维数据信息。...AIOps与现有ITOM平台的关系具体如何呢？传统IT运维管理平台，即 ITOM 平台，往往是为完成单一管理任务而设计的，更偏向于管理某一细分专业领域。
10月20日，腾讯织云 Metis 智能运维学件平台正式对外开源。...Metis 是 AIOps（Algorithmic IT Operations），即智能运维领域的首个开源产品，它是聚焦在智能运维的应用实践集合，基于腾讯已有的运维数据，将机器学习领域的分类、聚类、回归...1、项目描述 “Metis”取名自希腊神话中的智慧女神墨提斯，全称为：腾讯织云 Metis 智能运维学件平台。“织云”指的是腾讯智能一体化运维平台，“学件”的概念由南京大学周志华教授提出。...如 Metis 的智能咨询机器人、舆情监控、集群智能负载均衡、数据库参数调优、容量预测。...5、Metis 智能运维学件未来开源计划 Metis 将打造一个开放的学件平台，陆续开源时间序列指标预测、主机异常智能分析、MySQL 异常智能分析、硬盘生命周期预测等其它智能运维学件，集合广大用户在智能运维领域的建设经验和实践
在接触一些不同的运维平台时不太清楚这些平台的侧重点以及主要功能在此做一个梳理规划NacosNacos主要是为了解决微服务架构中的服务注册、配置管理和服务发现等问题而设计的微服务架构将一个应用程序拆分成多个独立的服务...宝塔面板宝塔面板是一个用于管理和监控服务器的开源面板软件（Linux图形监控化）它提供了图形化界面，使用户可以轻松地管理网站、数据库、DNS、FTP等服务。...DockerDocker是一种容器化平台，它提供了创建、打包和分发应用程序的工具和环境。...Docker利用Linux内核的容器功能，实现了资源隔离和环境一致性，使应用程序可以在不同的主机上以相同的方式运行。...安全审计：Rancher提供了安全审计的功能，可以记录和跟踪用户对集群和应用程序的操作，以及集群中各个组件的状态变化，从而增强对系统的安全性和可追踪性。
比如下面的元数据部分就是平台后面要扩展支持的基础，这个部分花了一些时间做基础构建和实现。 ? 脚本管理的内容之前写过两篇，供参考。...平台设计中的脚本管理 web脚本编辑器ACE Editor 在这个阶段，也收获了一些经验，所以准备把这部分的内容做扎实一些，同时有些内容会延伸一下。 我会从脚本管理和工具管理两个大的维度来说。...Paramiko Ansible websocket 2）连接到数据库，不同的数据库，只要我输入指定的信息，就返回给我一个数据库连接。 ...3.数据库层 数据库层级的调用，比如SQL语句，举一个例子，比如查看数据库的基本信息，那么无论是shell,Python都是接入层的实现，我们在这里关注的是SQL层的逻辑。 ...这里主要是一些基本的操作，比如查看数据库的基本信息，得到DDL信息，得到从库的信息等等，都是通过脚本（这里的主要核心就是SQL逻辑）的方式来实现。
为了使DBA的工作轻松，有效率很多年前各大公司就开始自动化运维平台建设，在这方面我们属于比较晚的了。 今天介绍下最近开发的一个平台，自助DML。什么是DML，就是平常执行的增删改查数据库操作。...有人有疑问这不是程序访问的操作，为什么还要做一个平台操作这些呢，其实这种操作主要是开发需要线下修复数据的一种操作，不只是增删改，还有建表，建索引，添加字段等，这些操作开发一般会提给DBA协助操作数据库。...虽说现在的公司实例少点，但每天的工作量还是很大，关键这种工比较重复，枯燥，没有技术含量，所以迫切需要一个自助的服务平台开放出去来提高工作效率，解放DBA。...(5)celery rabbitmq 平台部分截图： 1) 提交任务需要满足两个条件：(1) 元数据平台(请参考之前的元数据平台博客)集群归属部门信息不能为空 (2)提交任务的人所在部门要跟集群归属部门一致...5)如果是库归属人提交的任务则需要同部门的另一人审核 (这些条件需要结合元数据平台，请参考之前的博客) 6)审核完事就可以点击执行了，执行权限只有DBA和提交人才能执行 7)
数据库运管平台发展趋势 为满足前文所谈的多样性、跨平台、异构化等趋势，数据库运维管理平台发展趋势包括以下几个方面： 云化趋势：随着云计算技术的迅速发展，云化趋势将成为数据库运维管理平台的主流发展趋势。...数据库运维管理平台将逐渐向基于云的SaaS平台发展，实现跨地域、跨云平台的资源监控和管理。 智能化趋势：数据库运维管理平台将更加注重应用人工智能、机器学习等技术，实现数据库管理自动化和智能化。...安全智防趋势：随着数据库安全事件频繁发生，数据库运维管理平台将更加注重数据库安全的智能防护。例如对不合法的SQL操作，恶意登录，数据泄漏等安全事件进行实时监控，及时发现并处理异常情况。...自动化趋势：数据库运维管理平台将更加注重自动化运维的发展，推进各项操作的自动化实现，减少人工操作的参与，提高运维效率和管理质量。...综上所述，数据库运维管理平台将逐渐实现云化、智能化、多模式化、安全化和自动化的发展趋势。作为一个专门用于进行数据库管理和运维的平台，将实现更高效的数据库管理，更保障企业数据的可靠性和安全性。
登场亮相 什么是智能运维机器人？我们所开发的智能运维机器人，就是采用了人工智能技术的，预设场景定位于日常运维咨询和操作需求的，面向开发和运维两类人群的，依托于企业IM工具的客服机器人。...另一方面，它不是一个单纯的客服，它还是一个面向运维同学自己的移动运维平台。 智能运维机器人的这样设计，自然是针对运维场景的特殊性而来。运维场景最典型的特点有以下三条： • 操作类需求。...产品定位 不管依托于哪种企业IM工具，披着什么样的“外衣”，智能运维机器人本质上是一个开发自助平台，也是一个移动运维平台。...作为移动运维平台，用户鉴权和联通内网环境，企业IM工具已经内嵌了这两个功能；参数提取，操作识别以及界面交互，智能运维机器人帮你做好。...这一点切合运维工具定制化强，开发敏捷的特点。而且相比手机APP这个正统的移动运维平台，智能运维机器人的移动运维工具开发门槛低到大多数的运维同学都能够迈过去。
在监控系统中，频繁的告警通知可能会对运维团队造成干扰和疲劳，影响其对真正重要的告警事件的关注。...NetView告警抑制作为一种优化告警管理的方法，可以有效减少无关紧要的告警通知，提高运维效率。本文将介绍NetView告警抑制的定义、工作原理以及其在告警管理中的应用。...告警抑制的定义告警抑制是一种基于规则的功能，它允许在特定条件下抑制或延迟告警通知。通过定义告警抑制规则，可以阻止不必要或重复的告警通知，减少对运维团队的干扰。...告警抑制具有以下优势：减少告警噪音：通过抑制无关紧要的告警通知，减少运维团队的干扰和疲劳，使其能够更专注于重要的告警事件。优化资源利用：避免因大量重复告警而浪费运维资源，提高资源的有效利用率。...告警抑制适用于以下应用场景：频繁产生的重复告警：对于一些周期性出现的告警，可以通过告警抑制规则将其抑制，避免对运维团队的干扰。
但变的是办公方式，不变的是美创运维的7*24小时不间断支持。 这不，一位客户发来了一条消息： 客户:张工，好像我这个数据库服务器的内存使用率有点高啊，你帮我看看？...共享内存和tmpfs，即free命令中的shared部分 在正常的业务数据库系统中，cached较高是一件比较普遍的事情，尽量不要去手动清缓存，毕竟它是为了提高效率而产生的，如果冒然释放缓存会造成IO...美创科技拥有强大的运维中心数据库服务团队，其中Oracle ACE 1人、OCM 10余人、数十名Oracle OCP、MySQL OCP、红帽RHCA、中间件weblogic、tuxedo认证、达梦工程师...，并著有《Oracle DBA实战攻略》，《Oracle数据库性能优化方法和最佳实践》，《Oracle内核技术揭秘》等多本数据运维优化书籍。...今天的运维小技巧就分享到这了，下期再和美创运维团队一起学习运维知识吧！
运维工程师是IT行业中不可或缺的一环，他们负责维护系统的稳定性和可靠性，确保业务的正常运行。然而，随着技术的不断发展，运维工程师也面临着一些挑战和困惑，他们的出路到底在哪里呢？...35岁被称为运维半衰期，究竟为何？ 近年来，有一种说法称35岁是运维工程师的半衰期，意思是说在这个年龄之后，运维工程师的职业生涯会开始走下坡路。...此外，随着云计算、物联网、人工智能等新技术的出现，运维工程师的工作范围和职责也在不断扩大，他们需要掌握更多的知识和技能，以适应新的业务需求。...运维工程师需要掌握的知识和技能非常广泛，包括操作系统、网络、数据库、安全等方面，因此需要不断学习和更新自己的知识和技能，以适应技术的发展和业务的需求。 深入了解业务需求。...运维的职业发展路径 运维工程师的职业发展路径有很多种，以下是其中几种比较常见的方向： 技术专家。运维工程师可以深入研究某一个领域或技术，成为该领域的专家，提供专业的技术支持和解决方案。 架构师。
在近期要做的RESTful服务API化的过程中，对于开放的API还是需要考虑基本的安全认证的，如果API能够随便被调用，可能对于功能来说是畅通的，如果调用模式固定了之后，再加上更强的安全机制，对于已有的业务流程都需要做加固...我看了下网上的很多文章，似乎要想完整的调试通，中间总是会碰到一些额外的问题，今天在同事的帮助下把这个基本的功能先搞定了。...所以现在的优先目标是功能的调用，我们配置两个url,一个是api-token-auth这个是调用token的验证逻辑，第二个是我们新写的一个cmdb的调用api,这个部分可以根据你的需求来自行定制，哪怕你自己只是输出一个...然后写一个cmdb_api.py，内容如下，这个逻辑是根据输入的参数来得到相应的数据库信息列表，比如输入db_type=MySQL则输出MySQL信息，大概是这样的信息。...的结果，getresponse是一个相对通用的方法，可以传入url得到返回数据。
图片 依托于大数据分析技术，为各行业运维管理提供信息化支撑。通过对管理平台进行智能化改造，构建基于云平台的用监控的统一管理平台。...实现“监、管、控”为一体的先进管理目标，为企业业务运维管理积累运行数据。 目前企业在运维管理的过程中仍然经常碰到一些难点，本文华汇数据将为您整理一些运维管理的难点及解决办法。...智能运维管理系统1、设备没有联网,动态数据缺失巡检靠经验，无法实时查看动态数据。被动运维,故障预测无从谈起。...2、多种因素制约,运维质量较差设备类型繁多，受气候条件、环境因素、人员素质和责任心等多方面因素的制约，导致运维流程难以标准化，巡检质量无法保证。...IT综合运营管理平台（ITOM）包含运维监控系统(IM)、用户体验 (UE)、IT管理平台(ITOA)、IT系统后评价平台(PPE)四大系统，帮助府、企业、行业用户解决IT运维问题，提高运维效率，提升服务质量
将脚本打包成工具使用，比如说自动化运维平台、性能优化平台、监控平台，简单来说就是将所用的脚本归档集中起来。...然后是自动化运维，关于这方面的讨论这几年非常火，各种大会上都在讲自动化。根据我的观察，目前自动化运维主要在做那么一件或两件事，大多是一些不需要太多的流程，不需要太多的人工智能的事情。...最后是智能化运维，这是也本次要讲的一个比较重要的主题。所谓的智能化运维就是让机器去干人的事情，让机器学习人的思想，再通过人工智能的一些手段实现出来。...而智能化运维甚至还在起步阶段，或者说在概念的阶段。 AI性能运维需求 作为一个非甲方公司，我们考虑的智能化性能，必须要兼容所有的数据，这是一个大的前提。不同的数据库的类型，智能化运维需求是不一样的。...因此在智能化运维性能这块，我们要把这些毫无头绪的环节梳理出来。 性能优化的目标 ?
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
