前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
社区首页 >专栏 >从CMDB到数据中台

从CMDB到数据中台

作者头像
CloudBest
发布于 2019-09-10 07:54:11
发布于 2019-09-10 07:54:11
2K0
举报
文章被收录于专栏:CloudBestCloudBest

2018年年底到2019年年初,一场组织变革的飓风席卷了国内各大互联网公司。阿里、腾讯、百度、京东、美团等先后拿出了几年来最大规模的组织调整计划。在这些变化中,一个值得关注的现象是,各大公司都不约而同地在组织架构中增设“中台”。

1

中台是什么,能解决什么问题?

那么,“中台”到底是什么?跟我们熟悉的“平台”有什么关系?

大家估计听过华为在几年前就提出的“平台炮火支撑精兵作战”的平台化战略,“让听得到炮声的人能呼唤到炮火”说的就是大平台赋能一线团队,快速将后台能力投送到需要支援的地方,使华为可以迅速响应瞬息万变的市场机会。

(图片来源网络)

在平台化战略的实践过程中,随着企业业务的发展,逐渐诞生了很多支撑前台营销场景的工具系统。这些工具系统主要面向企业的最终用户和市场营销人员,要快速响应市场需求,快速创新迭代。因此产生大量调取后台系统资源的需求。

然而,很多后台系统在创建之初是为了解决特定场景下的管理效率或安全管控需求(比如财务系统、CRM系统、物流系统等),其目标并不是服务于前台的各种业务创新。所以在能力设计上,这些老后台系统大部分是封闭的,很难开放出来给前台系统调用。

此时的前台和后台就像是两个不同转速的轮,前台转的快,后台转的慢,就出现了匹配失衡。

解决这个问题有两个办法,一种是重建后台系统,让后台系统具备灵活、开放的服务化能力,能够让前台方便调用。但这种做法的风险很大,因为后台管理企业的核心数据,牵一发动全身,而且还有各种安全、审计、合规、法律等限制,当然是稳定至上。所以后台不是不愿意转快点儿,是后台本来就应该慢一点、稳一点。

另一种方法是在后台和前台之间构建一个共享服务平台,将各个后台系统的核心能力、数据、用户信息加以沉淀和打磨,然后按照前台容易使用的方式对其进行服务化包装,从而将后台能力平滑的传递给前台。这个共享服务平台就是中台。中台就像是在前台与后台之间添加的组“变速轮”,将前台与后台的速率进行匹配,解决前台快一点、后台慢一点的矛盾。

阿里是最早提出并践行中台战略的,通过多年不懈的努力,在业务的不断催化滋养下,终于将⾃己的技术和业务能力沉淀出一套综合能力共享平台,具备了对于前台业务变化及创新的快速响应能力。所以,我们认为中台与企业平台化战略一脉相承,它是企业平台化战略的一种落地方式。

2

运维需要中台吗?

上面说的都是企业管理和互联网经验,在运维领域需要中台吗?

现在很多IT组织自身也在进行数字化转型。为了从以“稳定、安全、可靠”为核心的被动运维转型成以“体验、效率、效益”为核心的主动运营,我们需要打造可视化、场景化、数字化的IT运营平台。但在这个过程中困难重重,我们也遇到了前后台配速失衡的问题,如下图:

我们会发现,目前市场上比较成熟的运维软件产品主要是后台系统,而前台运维系统有明显的多样性和个性化特征,同样的场景、不同的IT组织就可能有完全不同的实现要求(以应急指挥为例,从应急响应、应急分析到应急处置,按理说是比较标准化的,但交行、中行、建行对应急的侧重点不同,就导致功能需求完全不同),所以很难形成标准化的产品。即使定制化开发也困难重重,因为要对接大量后台系统的数据和能力(要接入各种告警和指标数据,还要对接工单、自动化操作、预案等),实施复杂度非常高。而且由于前台场景的需求变化普遍很快,更增加了项目实施成本。各大ITOM厂商原本提供的是后台系统,却被迫定制开发各种前台场景,这种前后一体化的做法让厂商苦不堪言,客户也对后台厂商在短时间内拼凑出的前台场景不满意。

要破解这个困境,还是要想办法建立一个资源共享层,既能让后台系统专注把自己的事情做好,也能让前台系统放飞自我,快速迭代创新。

那么,哪些资源最容易、也最迫切需要被共享呢?是“数据”。因为前台各种分析协作场景都离不开后台数据的支持,而这类专注做数据共享服务的中台,我们也称之为运维数据中台。

3

什么是运维数据中台,和运维大数据平台有什么区别?

运维数据中台的职责是识别前台数据需求、整合后台数据、加工数据、输出数据,是数据中心级的数据服务共享平台

运维数据中台应有两个核心理念:

数据中心级

指数据中心内所有运维系统都是数据中台的用户。因此在建设运维中台的时候,从格局上就一定要跳出单条业务线站在中心整体视角来审视数据需求和供给现状,识别优先级,寻找那些最需要被共享的数据。

数据服务

数据中台一定是开放的、服务化的,要通过 API 的方式提供数据,而不是直接把数据库暴露给前台。因此Data API是数据中台的核心,至于如何提升API生产效率,让API 更加清晰,调用更加便捷,性能和数据质量更好,这些都是围绕数据服务需要打造的关键能力。

运维数据中台和我们熟悉的运维大数据平台有什么区别呢?

它们不是一个维度上的概念。运维大数据平台更像一个技术概念。我们一提到运维大数据平台,首先想到的是大数据存储技术、流式计算、智能算法等技术,其能力侧重在数据的相关性和周期性分析方面,主要用于异常检测、故障预测等少数运维“高端”场景。

而运维数据中台是一个业务概念,它是一个能力传导层,聚焦如何将后台数据平滑传给前台系统。

举个比喻,大数据平台类似高档餐厅,打造的是前后端一体化能力,而数据中台是送外卖,更偏向能力整合。数据中台可以整合、配送来自资源管理平台、云管平台、监控平台、自动化平台、流程平台的数据,也可以配送来自大数据平台的数据,甚至数据中台本身也可以利用大数据平台技术构建。

4

CMDB和数据中台有什么关系?

它们都是数据能力的传导平台,核心职责都是整合数据、加工数据、输出数据(CMDB业务模型图和中台图对比)

CMDB也符合运维数据中台两大核心理念:数据中心级和数据服务。

这里的“数据中心级”有两个含义,首先指CMDB的数据范围包含与应用系统相关的所有IT资源,这是CMDB与所有专业领域配置库(如资产库、云资源库、DB性能分析库、网管资源库等)的核心区别之一。其次,CMDB是面向数据中心所有运维工具使用的,解决的是跨专业数据共享问题。这也引出CMDB的第二个核心理念,即必须具备灵活、开放的数据服务能力。

但CMDB和运维数据中台也有些许不同点,在数据范围方面,数据中台是全域数据(包括配置、告警、指标、工单、操作),而CMDB只有静态的配置数据。从这点看,其实数据中台是可以涵盖CMDB的。事实上,CMDB可以定位成数据中台的主数据管理模块。

5

数据中台对CMDB建设有哪些启发?

1

要先做数据商人,而不是数据科学家

数据商人会将注意力放在解决跨部门、跨工具数据流通不畅的问题,要促进数据商品的流通。而数据科学家则专注于对某个专业领域开展数据研究,以解决这个专业领域的某个难题。

具体来说,数据商人做什么事情呢?比如:

  1. 从服务请求流程获得新增的IT资源(后称CI),对该资源数据进行整合、加工,然后将数据送给自动化平台进行监控部署
  2. 从自动发现平台中获取文件系统CI,给这些CI丰富应用责任人信息,然后将数据送给监控平台进行告警丰富
  3. 防火墙管理工具中获取网络访问策略信息,给这些访问策略丰富源、目的CI的配置信息(包括主机名、所属应用、责任人等),然后将数据提供给应用岗,供日常查询

那什么是数据科学家做的事情?

  1. 研究原始的防火墙策略日志,设计复杂的数据分析逻辑,输出结构化的访问策略
  2. 采集数据库参数信息,开发参数比对程序,输出比对结果

在建设初期,CMDB应该先做好数据商人,这里主要是从成本和收益考虑,毕竟有大量的跨部门、跨工具数据共享需求,这些需求涉及的配置数据并不复杂,但收益却非常明显,所以应该优先建设。至于数据科学家的工作,可以在CMDB成熟后逐渐开展,不过最理想的方案仍然是由专业的技术管理工具解决专业的问题。

2

要关注消费场景,但不应大包大揽,要聚焦数据服务

按照数据中台的思想,CMDB的定位是“做外卖”,但很多IT组织把CMDB做成了“开饭馆”。开饭馆就要买菜、洗菜、切菜、炒菜、端菜、甚至搞点节目让顾客吃得开心,这是贯穿前后台的一体化能力。对应CMDB就是大搞数据生产,建立一系列配套流程制度和自动发现工具,定制大量数据维护和消费界面,倾力打造贯穿前后台数据生产、治理、消费的一体化能力平台。这种建设方式并不妥当,一方面打造前后台一体化的能力平台需要相当长的时间和巨大成本,另一方面,即使建设成了,无非是又立起了一个烟囱系统,隔绝于现有运维体系之外。

基于中台思路,我们认为更加合理的建设方式是横向能力整合,类似送外卖。这种建设思路首先要考虑的是前台用户是谁,有什么数据需求,数据的生产源头在哪里,如何与数据源的流程对接实现数据的自然沉淀,然后对沉淀的数据进行加工整合,最后通过服务化接口将数据投送到用户嘴里。这种建设方式的成本更低、见效更快。(来源:优锘科技)

如有转载需求,欢迎与"editor@cloudbest.cn"联系或文章下面留言。已经授权使用作品的,应在授权范围内使用,并注明“来源:CloudBest”。

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2019-09-05,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 数字科智 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
暂无评论
推荐阅读
编辑精选文章
换一批
运维大数据平台落地构想
现在全国政务行业都在推行数字政府、数字中国的落地。大部分省市都在进行IaaS资源、PaaS资源、DaaS资源以及SaaS资源的整合;构建基于IPDS架构的云平台数据中心,通过IPDS云平台数据中心,为用户提供各类资源服务。
嘉为蓝鲸
2019/08/08
2K0
运维大数据平台落地构想
主数据与数据中台
初次接触数据治理工作的朋友可能都会遇到主数据和数据中台这两个概念,经常有粉丝朋友问我二者有什么区别。
大数据学习与分享
2023/10/25
7140
主数据与数据中台
张涵诚关于数据中台的十问十答
数据中台最近讨论非常火热,本文总结了数据中台最常见的10个问题并一一作答,便于读者更好的理解数据中台的内涵。
数据猿
2019/05/10
2K0
张涵诚关于数据中台的十问十答
数据中台建设(二):数据中台简单介绍
2014年马云正式提出“DT(Data Technology)”的概念,人类从IT时代走向DT时代,阿里内部的数据平台事业部大刀阔斧的建立整个集团的数据资产,同年,阿里从芬兰Supercell公司接触到中台概念后,在集团内部积极践行,开创了“大中台、小前台”的组织机制和业务机制,通过高效、统一的后方系统来支撑快速变化的前端业务,提高业务产出效率,减少成本投入。
Lansonli
2022/04/30
6.5K1
数据中台建设(二):数据中台简单介绍
如何释放企业CMDB价值?——CMDB建设路径浅谈
CMDB(Configuration Management DataBase配置管理数据库),基本定义为是一个ITIL数据库,存储信息化软件和硬件资产信息,广义上包括流程、服务、人员组织。CMDB在企业中主要的作用基本概括为:
嘉为蓝鲸
2021/03/26
2.2K0
如何释放企业CMDB价值?——CMDB建设路径浅谈
CMDB要怎么建,才不会沦为一个毫无边界的数据库?
据McKinsey(麦肯锡)发布的调查报告显示,目前企业数字化转型的成功率普遍仅为20%。导致企业数字化转型失败的原因多种多样,大多数企业的失败可以归咎于缺乏业务上的指引,盲目部署数字化系统和引进新技术,对即将出现的各种风险毫无防备。
嘉为蓝鲸
2022/05/28
1.1K0
CMDB要怎么建,才不会沦为一个毫无边界的数据库?
数据仓库、数据湖、数据中台一文读懂【2】
Pentaho首席技术官James Dixon创造了“数据湖”一词。它把数据集市描述成一瓶水(清洗过的,包装过的和结构化易于使用的)。
辉哥
2022/03/23
1.2K0
数据仓库、数据湖、数据中台一文读懂【2】
数据/业务中台建设解密:包含哪些内容?如何发挥作用?
数据是从业务系统产生的,而业务系统也需要数据分析的结果,那么是否可以把业务系统的数据存储和计算能力抽离,由单独的数据处理平台提供存储和计算能力,不仅可以简化业务系统的复杂性,而且可以让各个系统采用更合适的技术,专注做本身擅长的事?这个专用的数据处理平台即数据中台。
数商云网络科技
2020/05/19
1.7K0
数据/业务中台建设解密:包含哪些内容?如何发挥作用?
【干货·案例】金融行业应用型CMDB建设实录
前言 GOPS全球运维大会暨首届金牌运维峰会于11月17日-18日在上海圆满举行。国信证券负责运维平台建设,具有此类丰富经验的讲师张浩水受邀出席大会,并在DevOps道法术器专场带来针对证券及金融行业
IT大咖说
2018/04/04
1.8K0
【干货·案例】金融行业应用型CMDB建设实录
【四川农信】主力军银行里的智慧运维力量-嘉为案例
四川省农村信用社联合社(以下简称“四川农信”)诞生于1951年,紧盯打造“农村金融主力军、地方金融主力军、普惠金融主力军”目标愿景,全面推进合规银行、智慧银行、主力军银行建设。至2021年12月底,四川农信有5131个营业网点,近4万名从业人员,资产规模达1.8万亿元,各项存款1.5万亿元,各项贷款8775亿元,资产规模、存款规模位居全省同业第一位、全国农信系统第七位。
嘉为蓝鲸
2023/01/17
6810
【四川农信】主力军银行里的智慧运维力量-嘉为案例
数据中台知识体系
数据中台是一套可持续“让企业的数据用起来”的机制,是一种战略选择和组织形式,是依据企业特有的业务模式和组织架构,通过有形的产品和实施方法论支撑,构建的一套持续不断把数据变成资产并服务于业务的机制
大数据学习与分享
2024/05/18
4400
数据中台知识体系
华为 VS 阿里数据中台建设方法论
想要找到答案,仅仅沉寂在各自“中台”之中,如同管中窥豹,身入迷阵,是很难想清楚的。不如换个⾓度,从各类的“中台迷阵”中跳脱出来,尝试以更高的视角,从企业均衡可持续发展的角度来思考中台的价值,试图反推它存在的价值。
肉眼品世界
2022/06/15
7040
华为 VS 阿里数据中台建设方法论
运维数据生态之数据思维
前言:在上一篇文章《建立数据指标体系,推动DevOps全链路度量闭环》中,我们描述了基于数据来建立数据指标体系,通过指标体系达到主观事件客观呈现的效果。信通院的一些分析数据表明,企业IT的信息化历程逐渐完成,同时企业对IT的精益运行的需求越来越迫切,在这个场景下,数据的思维和使用能力成为制约提升IT生产效率的桎梏。
顾黄亮
2020/06/29
2.7K0
运维数据生态之数据思维
民生银行数据中台体系的构建与实践
在大数据、人工智能、区块链等新兴技术的驱动下,各家银行纷纷利用新技术制定数字转型改革战略,寻找差异化经营的可行模式。
Python数据科学
2019/08/12
2K0
爱奇艺数据中台建设方案
数据中台更像一种企业架构,是一套结合互联网技术和行业特性,在企业发展的不确定性中,寻找确定性,并且持续沉淀和抽象企业核心能力,最终支持企业快速、高效、低成本进行业务创新和增强的企业架构。
Spark学习技巧
2022/01/12
5580
爱奇艺数据中台建设方案
数据中台是什么:数据中台剖析
抗击疫情,腾讯云在行动。数据中台被誉为大数据的下一站,成为了人们谈论的焦点,2019年也被称为数据中台元年。但是数据中台是什么?它和数据仓库、商业智能、大数据平台有什么区别?它的主要功能是什么?本文是对TVP史凯老师的直播演讲整理,为大家剖析数据中台的愿景和本质。
可可爱爱没有脑袋
2020/03/05
3.8K1
数据中台是什么:数据中台剖析
什么是以消费驱动的CMDB?——嘉为蓝鲸
当前,数字经济进入了高速发展的阶段,数字经济已经成为了引领经济的新增长点,全球范围的数字经济时代已经来临。尤其是在疫情期间,各地陆续颁发了推动和促进数字经济发展的相关政策与举措,以物联网、5G、大数据、人工智能等数字技术为支撑的新产业新业态将加快发展。
嘉为蓝鲸
2022/06/09
2.1K0
什么是以消费驱动的CMDB?——嘉为蓝鲸
关于银行业智能化运维建设思考
一、现状:银行运维工具已实现技术条线全覆盖,但基于运维管理的全流程自动化、智能化尚停留在研讨阶段
嘉为蓝鲸
2019/04/24
2K0
关于银行业智能化运维建设思考
数据中台——金融机构数字化转型的利器
从互联网行业火到金融行业的概念不少,比如个性化、微服务,还有近几年的各大金融机构都在谈论的“数据中台”,一些走在数字化转型前列的金融机构开始搭建数据中台。
盈鱼MA
2020/04/21
1.3K0
数据中台——金融机构数字化转型的利器
什么是数据管理,数据治理,数据中心,数据中台,数据湖?
数据管理是指组织对其整个数据生命周期进行的规划、执行和控制,以期最大化数据的价值。它涵盖了从数据采集、存储、处理到最终使用等全部过程。
大数据流动
2023/07/21
1.1K0
什么是数据管理,数据治理,数据中心,数据中台,数据湖?
推荐阅读
相关推荐
运维大数据平台落地构想
更多 >
领券
社区富文本编辑器全新改版!诚邀体验~
全新交互,全新视觉,新增快捷键、悬浮工具栏、高亮块等功能并同时优化现有功能,全面提升创作效率和体验
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档
查看详情【社区公告】 技术创作特训营有奖征文