首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

数据库智能探索与实践

在业务的驱动下,美团点评DBA团队经历了从“人肉”到工具化、产品化、自助化、自动化的转型之旅,也开始了智能数据库领域的思考和实践。...本文将介绍美团点评整个数据库平台的演进历史,以及我们当前的情况和面临的一些挑战,最后分享一下我们从自动化到智能过渡时,所进行的思考、探索与实践。...换句话来说,智能不用报警,通过看报表就能知道可能要出事了,能够把故障消灭在“萌芽”阶段;第二,传统是被动接受,而智能是主动出击。...但主动出击不一定是通过DBA去做,可能是系统或者机器人操作;第三,传统是由DBA发起和解决的,而智能是系统发起、RD自助;第四,传统属于“人肉救火”,而智能属于“智能决策执行”;最后一点...w=1340&h=672&f=png&s=274797] 上图是传统维和智能的特点分析,左边属于传统,右边属于智能

4.1K10

为什么要搞数据库平台

实际上很多企业都有想做一套数据库平台的想法,主要基于以下的一些原因 1 ORACLE 的淘汰,导致更换其他数据库后,数据库的台数和数量等都有上升,管理手段和方式在使用纯手工的方式进行大批量的数据库的管理...2 固定种类数据库监控种类的平台建立,这样的平台也是见得不少,都有自己的特性和卖点,并且有些产品是固化与某一种数据库产品或自研数据库产品所推出的,这些平台包含,自动搭建数据库,自动巡检数据库,自动故障处理...3 基于业务的数据库平台,这点可能是商业数据库平台的一个无法触及的地方,目前经济环节的问题会导致针对成本核算的重视,而数据库成本的计算,尤其与业务方面有关的方面这是一个空白,比如数据库为什么要扩充容量...自研平台可以针对各种数据库的原理结合自身的业务特性,做出适合企业特有的数据库与工作性能监控,任务自动一体化的平台,通过平台的搭建,搭建者会成为数据库技术及公司业务的精通者,并且对于DEVOPS 软件平台的规划和功能模块的划分也会有深入的了解...从某种角度,如果深入到业务甚至可以通过平台的方式节省在数据库上的投入,转变被动管理方式,为主动管理,让数据库从花钱的角色,变为省钱的角色,乃至一个“赚钱”的部门。

2.8K60
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    设备远程平台—助力工业设备智能

    远程是工业互联网重要组成部分,没有工业互联网核心技术,远程不可能实现目标,设备远程平台运用了各种新技术,物联网实现数据接入,云计算实现存储、大数据实现分析, 人工智能实现状态检修与预警预报。...01设备远程平台设备远程平台通过智能终端对设备进行在线监测,将各种数据上传到云平台,存储、整理、分析,通过智能应用系统实现在线监控、记录、查询、统计、分析、修改、报警等操作,实现远程智能化管理。...设备远程行业现状分析:01设备运行状况:设备分布广,无法远程监控设备运行情况、故障情况;02成本:出差维护成本高,好多无效出差,设备故障无法及时掌握;03设备运营服务:设备工作、故障、服务、客户使用...04设备远程维系统优势1、一物一码,快速全面掌握设备信息系统给每台设备配置唯一的二码标识,扫一扫即可快速查看设备详情、服务记录、备件更换记录、设备使用帮助、知识库以及设备的实时运行数据,更加有利于客户对产品使用...05设备远程应用价值

    1.2K50

    腾讯织云Metis智能学件平台正式开源

    10月20日,腾讯织云 Metis 智能学件平台正式对外开源。...1、项目描述 “Metis”取名自希腊神话中的智慧女神墨提斯,全称为:腾讯织云 Metis 智能学件平台。“织云”指的是腾讯智能一体化平台,“学件”的概念由南京大学周志华教授提出。...如 Metis 的智能咨询机器人、舆情监控、集群智能负载均衡、数据库参数调优、容量预测。...5、Metis 智能学件未来开源计划 Metis 将打造一个开放的学件平台,陆续开源时间序列指标预测、主机异常智能分析、MySQL 异常智能分析、硬盘生命周期预测等其它智能学件,集合广大用户在智能领域的建设经验和实践...腾讯织云 Metis 智能学件平台之无阈值智能监控学件正式开源 Github 开源地址: https://github.com/Tencent/Metis Metis国内镜像地址: https://

    5.1K21

    数据库管理平台面面观

    如企业业务发展很快,对容量管理这部分就很重要;再比如有类似11的大促活动等,也需要此能力。但相对而言,这部分能力现有工具平台相对功能较弱。...数据库管理平台将逐渐向基于云的SaaS平台发展,实现跨地域、跨云平台的资源监控和管理。 智能化趋势:数据库管理平台将更加注重应用人工智能、机器学习等技术,实现数据库管理自动化和智能化。...安全智防趋势:随着数据库安全事件频繁发生,数据库管理平台将更加注重数据库安全的智能防护。例如对不合法的SQL操作,恶意登录,数据泄漏等安全事件进行实时监控,及时发现并处理异常情况。...自动化趋势:数据库管理平台将更加注重自动化的发展,推进各项操作的自动化实现,减少人工操作的参与,提高效率和管理质量。...综上所述,数据库管理平台将逐渐实现云化、智能化、多模式化、安全化和自动化的发展趋势。作为一个专门用于进行数据库管理和平台,将实现更高效的数据库管理,更保障企业数据的可靠性和安全性。

    46220

    数据库自动化平台–自助DML

    为了使DBA的工作轻松,有效率很多年前各大公司就开始自动化平台建设,在这方面我们属于比较晚的了。 今天介绍下最近开发的一个平台,自助DML。什么是DML,就是平常执行的增删改查数据库操作。...有人有疑问这不是程序访问的操作,为什么还要做一个平台操作这些呢,其实这种操作主要是开发需要线下修复数据的一种操作,不只是增删改,还有建表,建索引,添加字段等,这些操作开发一般会提给DBA协助操作数据库。...虽说现在的公司实例少点,但每天的工作量还是很大,关键这种工比较重复,枯燥,没有技术含量,所以迫切需要一个自助的服务平台开放出去来提高工作效率,解放DBA。...: 1) 提交任务需要满足两个条件:(1) 元数据平台(请参考之前的元数据平台博客)集群归属部门信息不能为空 (2)提交任务的人所在部门要跟集群归属部门一致 2) 根据流程检查权限后,就会对提交的...10) 这个页面是DBA后台操作页面, 目前只有DML,其他平台正在开发中。 总结: 此系统目前已经开放给RD使用,目前日处理需求量50+,对工作效率,安全性,RD体验等方面有了显著的提升。

    3.3K20

    【开源公告】腾讯织云Metis智能学件平台正式开源

    1 项目描述 “Metis”取名自希腊神话中的智慧女神墨提斯,全称为:腾讯织云 Metis 智能学件平台。“织云”指的是腾讯智能一体化平台,“学件”的概念由南京大学周志华教授提出。...在此基础上,腾讯云副总裁赵建春先生进一步提出“学件”的概念,亦称 AI 组建,强调其具备对场景智能化解决方案的记忆能力。...如 Metis 的智能咨询机器人、舆情监控、集群智能负载均衡、数据库参数调优、容量预测。...5 Metis 智能学件未来开源计划 Metis 将打造一个开放的学件平台,陆续开源时间序列指标预测、主机异常智能分析、MySQL 异常智能分析、硬盘生命周期预测等其它智能学件,集合广大用户在智能领域的建设经验和实践...腾讯织云 Metis 智能学件平台之无阈值智能监控学件正式开源 Github 开源地址: https://github.com/Tencent/Metis (点击文末阅读原文直接访问) 请给 Metis

    3.7K30

    【开源公告】腾讯织云Metis智能学件平台正式开源

    1 项目描述 “Metis”取名自希腊神话中的智慧女神墨提斯,全称为:腾讯织云 Metis 智能学件平台。“织云”指的是腾讯智能一体化平台,“学件”的概念由南京大学周志华教授提出。...在此基础上,腾讯云副总裁赵建春先生进一步提出“学件”的概念,亦称 AI 组建,强调其具备对场景智能化解决方案的记忆能力。...如 Metis 的智能咨询机器人、舆情监控、集群智能负载均衡、数据库参数调优、容量预测。...5 Metis 智能学件未来开源计划 Metis 将打造一个开放的学件平台,陆续开源时间序列指标预测、主机异常智能分析、MySQL 异常智能分析、硬盘生命周期预测等其它智能学件,集合广大用户在智能领域的建设经验和实践...腾讯织云 Metis 智能学件平台之无阈值智能监控学件正式开源 Github 开源地址: https://github.com/Tencent/Metis 请给 Metis 一个 Star !

    1.4K30

    【开源公告】腾讯织云Metis智能学件平台正式开源

    1 项目描述 “Metis”取名自希腊神话中的智慧女神墨提斯,全称为:腾讯织云 Metis 智能学件平台。“织云”指的是腾讯智能一体化平台,“学件”的概念由南京大学周志华教授提出。...在此基础上,腾讯云副总裁赵建春先生进一步提出“学件”的概念,亦称 AI 组建,强调其具备对场景智能化解决方案的记忆能力。...如 Metis 的智能咨询机器人、舆情监控、集群智能负载均衡、数据库参数调优、容量预测。...5 Metis 智能学件未来开源计划 Metis 将打造一个开放的学件平台,陆续开源时间序列指标预测、主机异常智能分析、MySQL 异常智能分析、硬盘生命周期预测等其它智能学件,集合广大用户在智能领域的建设经验和实践...腾讯织云 Metis 智能学件平台之无阈值智能监控学件正式开源 Github 开源地址: https://github.com/Tencent/Metis 请给 Metis 一个 Star !

    3.2K20

    腾讯数据库专家雷海林分享智能架构

    2019年5月8日-10日的DTCC2019年中国数据库大会上,腾讯云数据库专家工程师雷海林首受邀做了主题为《TDSQL智能平台-扁鹊架构与实践》的技术分享,以下为大会现场演讲实录。 ?...扁鹊的需求背景 TDSQL作为腾讯针对金融场景推出的高一致,分布式数据库集群的解决方案目前已覆盖了腾讯90%的支付业务场景,内部有大量团队使用;同时作为腾讯金融云的数据库产品,支持公有云和专有云两种云解决方案...之所以将这个模块命名为扁鹊,就是希望它能像古代的扁鹊神医为人诊断病因一样也可以为数据库“对症下药“,治疗/修复/预判数据库已知或潜在的风险。 2....三、智能诊断原理与实践 我们将客户经常咨询的DB问题大体分为三类,可用性问题、性能问题、可靠性问题。 下面我们具体看一下扁鹊是怎样针对这三类问题进行分析并解决的。 1....从我们自身的经验来看,由DB故障导致的切换并不常见,更多的情况是由于用户的SQL占用过多的系统资源引发的一些异常状况,主要可以分为慢查询并发和大事务两类,下面我们逐个分析两种行为触发切换的原因 由慢查询并发引起的主备切换

    1.9K20

    腾讯数据库专家雷海林分享智能架构

    2019年5月8日-10日的DTCC2019年中国数据库大会上,腾讯云数据库专家工程师雷海林首受邀做了主题为《TDSQL智能平台-扁鹊架构与实践》的技术分享,以下为大会现场演讲实录。...image.png 关注“腾讯云数据库”官方微信,回复“智能”,即可下载本文PPT。...image.png 三、智能诊断原理与实践 我们将客户经常咨询的DB问题大体分为三类,可用性问题、性能问题、可靠性问题。 下面我们具体看一下扁鹊是怎样针对这三类问题进行分析并解决的。...image.png 从我们自身的经验来看,由DB故障导致的切换并不常见,更多的情况是由于用户的SQL占用过多的系统资源引发的一些异常状况,主要可以分为慢查询并发和大事务两类,下面我们逐个分析两种行为触发切换的原因...关注“腾讯云数据库”官方微信,回复“智能”,即可下载本文PPT。 image.png

    11.8K20

    腾讯数据库专家雷海林分享智能架构

    2019年5月8日-10日的DTCC2019年中国数据库大会上,腾讯云数据库专家工程师雷海林首受邀做了主题为《TDSQL智能平台-扁鹊架构与实践》的技术分享,以下为大会现场演讲实录。...之所以将这个模块命名为扁鹊,就是希望它能像古代的扁鹊神医为人诊断病因一样也可以为数据库“对症下药“,治疗/修复/预判数据库已知或潜在的风险。 2....三、智能诊断原理与实践 我们将客户经常咨询的DB问题大体分为三类,可用性问题、性能问题、可靠性问题。 下面我们具体看一下扁鹊是怎样针对这三类问题进行分析并解决的。 1....从我们自身的经验来看,由DB故障导致的切换并不常见,更多的情况是由于用户的SQL占用过多的系统资源引发的一些异常状况,主要可以分为慢查询并发和大事务两类,下面我们逐个分析两种行为触发切换的原因 由慢查询并发引起的主备切换...受苹果公司新规定影响,微信 iOS 版的赞赏功能被关闭,可通过二码转账支持公众号。

    1.4K60

    重新定义智能,博睿数据ONE平台带来哪些启示

    为此,博睿数据近日正式推出了一体化智能可观测平台ONE,该平台旨在建立一体化、智能化、面向业务与用户体验的统一平台,助力企业提高数字化体验,降低成本,提升工作效率,为数字化转型赋能升级。...同时,这也是业界第一个将所有监控需求“All in ONE”的统一平台。 博睿数据COO吴静涛直言:“一体化智能可观测ONE平台在IT市场具有里程碑意义。...作为一个集告警收敛、异常检测、根因定位、智能见解,聚焦业务与用户体验的体系,打破孤岛,避免重复建设,赋能企业数字化的一体化、智能化、面向业务与用户的开箱即用的一体化可观测平台,ONE平台实现监控到可观测...从孤立的工具走向统一的能力平台,传统工具化的体系竖井林立,已不再适合企业对位监控的需求。 从人工的分析走向智能的见解。...大部分运产品只是提供简单的信息,而ONE平台提供智能见解,告诉用户系统发生了什么,以及人员应该做什么以解决这些问题。

    1.1K20

    腾讯智平台在渝上线,开启IDC智能维新时代

    作为腾讯20年数据中心经验的结晶,腾讯智平台将以水土机房为起点,逐步在重庆电信机房部署落地。此次合作,正是腾讯数据中心为行业升级提供解决方案的一次尝试,也代表着腾讯拥抱产业互联网的决心。...图4    腾讯重庆云计算数据中心 腾讯智由服务内部的星云平台升级而来,是腾讯自研的数据中心技术设施管理软件平台。...通过智平台,可以实现数据中心的智能告警、智能巡检、智能容量分析和透明化的客户体验,为全局把控、精细化管理、优化运营成本提供基础,同时也为技术专家实时、异地处理告警,数据中心无人值守创造可能。...图5    腾讯智平台优势介绍 接入腾讯智平台后,重庆电信数据中心将在运营方面更加智能化和可视化,如同多了一可以掌控数据中心运营全局的“眼睛”。...“扎根消费者互联网、积极拥抱产业互联网”,借由智平台,腾讯可将在服务C端海量用户时积累的经验,转化为服务B端合作伙伴的坚实基础。

    2.3K10

    智能综合管理平台能否解决企业目前面临的困难?

    图片    依托于大数据分析技术,为各行业管理提供信息化支撑。通过对管理平台进行智能化改造,构建基于云平台的用监控的统一管理平台。...实现“监、管、控”为一体的先进管理目标,为企业业务管理积累运行数据。     目前企业在运管理的过程中仍然经常碰到一些难点,本文华汇数据将为您整理一些管理的难点及解决办法。...智能管理系统1、设备没有联网,动态数据缺失巡检靠经验,无法实时查看动态数据。被动,故障预测无从谈起。...IT综合运营管理平台(ITOM)包含监控系统(IM)、用户体验 (UE)、IT管理平台(ITOA)、IT系统后评价平台(PPE)四大系统,帮助府、企业、行业用户解决IT问题,提高效率,提升服务质量...,降低成本。

    1.1K10

    腾讯智平台在渝上线,开启IDC智能维新时代

    作为腾讯20年数据中心经验的结晶,腾讯智平台将以水土机房为起点,逐步在重庆电信机房部署落地。此次合作,正是腾讯数据中心为行业升级提供解决方案的一次尝试,也代表着腾讯拥抱产业互联网的决心。...图4    腾讯重庆云计算数据中心 腾讯智由服务内部的星云平台升级而来,是腾讯自研的数据中心技术设施管理软件平台。...通过智平台,可以实现数据中心的智能告警、智能巡检、智能容量分析和透明化的客户体验,为全局把控、精细化管理、优化运营成本提供基础,同时也为技术专家实时、异地处理告警,数据中心无人值守创造可能。...图5    腾讯智平台优势介绍 接入腾讯智平台后,重庆电信数据中心将在运营方面更加智能化和可视化,如同多了一可以掌控数据中心运营全局的“眼睛”。...“扎根消费者互联网、积极拥抱产业互联网”,借由智平台,腾讯可将在服务C端海量用户时积累的经验,转化为服务B端合作伙伴的坚实基础。

    2.5K10

    哪些是数据库智能必踩的坑?

    将脚本打包成工具使用,比如说自动化平台、性能优化平台、监控平台,简单来说就是将所用的脚本归档集中起来。...所谓的不够标准化,指的是我们的机房环境错综复杂,自动化很难部署下去。 最后是智能,这是也本次要讲的一个比较重要的主题。...所谓的智能就是让机器去干人的事情,让机器学习人的思想,再通过人工智能的一些手段实现出来。...而智能甚至还在起步阶段,或者说在概念的阶段。 AI性能需求 作为一个非甲方公司,我们考虑的智能化性能,必须要兼容所有的数据,这是一个大的前提。不同的数据库的类型,智能需求是不一样的。...因此在智能性能这块,我们要把这些毫无头绪的环节梳理出来。 性能优化的目标 ?

    1.5K30

    腾讯云林晓斌:腾讯云数据库进入智能时代

    腾讯云数据库已进入了智能时代,当下的关键词是业务价值,云数据库智能诊断工具会使DBA对业务价值的贡献凸显得更加纯粹。...据林晓斌介绍,历经数十年发展,数据库已经度过石器时代、工具时代、专家时代,随着工具的日趋成熟,低价值的工作量得以解放,DBA价值不断提升,数据库进入了智能时代。...,针对业务访问特性定制化生成最优配置,大幅提高数据库效率。...除了7*24小时的实时诊断优化,DBbrain还具有安全威胁识别、混合云管理数据库和掌上数据库等功能。...,并进行最大化输出,大幅减少人工的量,实现降本增效。

    3.6K00

    基于知识图谱和人工智能驱动的企业深度智能运营和平台

    第四阶部分构建智能运营系统与管理系统。 (1)智能管理系统主要针对平台运行日志检测,错误排查,预测维护等功能。可适用应用领域包括交通,电信等。...为此,本项目提出了一个面向企业,以知识图谱和人工智能为驱动的企业深度智能运营和平台。...所以,为了构建企业知识库,从而实现集知识管理、知识发现、知识服务等功能于一身的企业深度智能运营和平台,本项目采用知识图谱技术对企业知识数据进行存储、管理。...因此,对于不同的领域数据,可以通过知识图谱实现智能推理,并且自动制定运营、规则。 应用前景 智能维系统 智能管理系统主要使用深度学习技术,针对平台运行日志检测,错误排查,预测维护等功能。...而科学合理地整合获得的知识能更好地为将来知识工作服务,可以通过知识图谱构建机械维修平台

    4.5K30

    隐秘而伟大,探访鹏博士大数据双十一背后那些真英雄

    数据猿发布产业全景图——2020中国数据智能产业图谱1.0版 大数据产业创新服务媒体 ——聚焦数据 · 改变商业 ---- 超级流量IP双十一大幕开启,作为今年来全球最大的消费季,11的交易额纪录不断被刷新...用户看到的双十一只是各大电商平台拼促销、拼市场的表象,而对于业内人士而言,看到的往往是数据中心服务的稳定性及网络的高效性,特别是像淘宝、天猫那样的大型电商平台,一旦出现问题后果将不堪设想。...为了保障双十一期间这些客户的业务能够稳定运行,我们的人员一般在十月中下旬完成国庆重保任务之后,就立即开始部署双十一的重保工作。...可以说,在用户眼中双十一的“一时爽”,于我们数据中心的服务人员,却是对客户重如千钧的庄严承诺。...鹏博士大数据工作指导性文件《应急手册》、《手册》虽在不断更新并已日臻完善,但在每年重保之前,还会将其进行针对性升级以确保准备充分。

    6.6K20
    领券