数据治理那些事-数据架构-1

导读：上节主要讲了逻辑认知的能力培养,从三个方面来提高自己知道,融会贯通,不但要掌握知识,要掌握原理,会分析比较和理论联系,最后是总结和反思,这本者是系统关系,不是线性关系.

主要就是第一讲知识分类中程序知识如何通过逻辑认知的事,到这里方法论基本完成了,大家是否掌握相关方法论,如果没有掌握,回去重新复习下第一讲到第六讲,前六讲算是一个部分,正常接下来应该讲数据治理相关的核心领域,还记得DAMA所说的10个相关方面吧,重点在国内做的比较多7个左右,实际生活通常是数据标准—数据质量—元数据-数据模型-主数据-数据安全—数据生命周期管理这种模式,是不是感觉少了什么,对了就是少数据架构,为什么这样呢？

首先通数据治理辅助别的项目来实施的,本身没有一个整体规则,更谈不上架构,所以从项目角度上看,解决问题即可,不用架构,其次很多时侯,也不知道数据要如何入手? 所以打破传统,从整体的数据开始讲,准备5讲文章来说明,重点说明我以前给一个国企业写的数据架构文档及数据架构和定位和模型间的关系.数据架构讲完再讲元数据,数据标准, 数据模型, 语主数据,数据指标和标签,数据质量,数据安全,数据生命周期管理,等,是否感觉和DAMA的说的顺序不同,或者和平时咨询公司说的也不同,这是我自己的总结,从逻辑角度根据他们间的联系反思和总结出来的.要学会质疑和反思,才能抓住数据治理的本质.

理解数据架构,首先理解什么是架构?架构就是二种解释,一种是组成派,一种派,什么意思,一各种说的是组成架构有什么元素和元素间的关系这叫组成派,一种是架构间元素是如何判断和决策的,这里的架构通常指的IT架构,而不是业务架构或其它上下文.

数据架构就是数据相关的元素如何分布和流转,他们间的关系是什以及有问题如何处理,这样说有点抽象,举个例子,你想造非典型疫情的医院,是不是先有蓝图才有建设,不能直接建吧,蓝图就是架构,说明医院如何建,建设医院要建设什么内容,先建什么,后建什么,IT上的架构其实就是从建筑上移植来的,,对于业务架构和应用架构，数据架构在总体架构中处于基础和核心地位。

因为信息系统支撑下的企业业务运作状况，是通过信息系统中的数据反映出来的，数据信息系统管理的重要资源。因此构建企业的IT总体架构时，首先要考虑数据架构对当前业务的支持。理想的IT总体架构规划逻辑上是数据驱动的，即：首先根据业务架构分析定义数据架构；然后根据数据架构结合业务功能定义应用架构；最后根据应用架构与数据架构的定义，来设计技术架构,数据架构贯穿于数据的生命周期,从数据产生,数据流转,数据整合,数据分析应用,归档及消亡各个环节,对数据模型策略,访问机制和存储方式进行设计,目的是满足不同的数据操作的有交效性和便捷性需求.

数据产生

业务系统的业务发生或信息管理的操作会产生业务数据和管理数据,这些数据由不同的系统生产,彼此有关联性,数据的产生紧密相关业务流程的动作,同时影响客户和体验,并保持数据一致性.

数据流转

数据流转主要是实时数据交换和批量数据交换,在交换过程中可能需要数据的加工处理和存储,需要保持数据流转过程中的状态和交换效率.

数据整合主要分为五个方面

实时决策层:解决业务发生过程中,通过近实时和数据流转支持业务高时效性分析和决策的数据存储和处理。

操作数据层: 通过贴源和短期历史数据存储,满足企业时效性高的应用导出和应用接入服务,满足数据物理集中的要求。

企业数据模型层：面向主题的，范式的的模型设计，满足企业的基础明细数据整合和长期的历史存储需求，适度屏蔽业务系统变化对数据分析应用的影响

通用汇总层：负责跨领域的共性加工逻辑处理数据存储

数据应用：数据集市层，面向应用的逻辑加工和应用访问为目标的数据存储

数据归档和消亡：支持数据归档和以归档为基础的查询的数据存储,说完范围后,和前面一个套路,数据架构比较复杂,是不是也有相关方法论,关于方法论这块国际有好多种,我这里简单介绍下TOGAF理论构架.其实别的理论框架,大家自行掌握,我不再详细说明,因为国内TOGAFT理论应用比较多,下面主要介绍下.

数据架构规划原则

数据分层原则

按数据生命周期分层，解决分层的功能定位问题

数据处理效率原则

数据架构解决企业数据处理的合理问题，空间的分布和时间的分配会数据流转有重大影响

保障数据一致原则

数据架构支持数据管理，解决不同分层和不同分布中的数据质量和数据标准问题。

数据架构扩展原则

保持模型的扩展性，解决因业务变化导致模型变化，同时考虑数据存储技术的可扩展性

服务于业务原则

数据架构本身是从业务架构导出，数据架构最终目标是为业务服务。

数据架构蓝图

未来公司信息 公司项目在采购、生产、销售到客户服务等过程中，无不伴随着数据的产生、流转和运用。为了使各个部门内部、部门之间、部门与外部单位间频繁的、复杂的数据流更加畅通，数据交互更加完整、统一，并把数据作为企业的一种资源进行管理，充分发挥企业信息资源的作用，就必须统一、全面、细致地进行数据梳理和规划,并在信息系统系统建设过程中实现数据资源的使用,以更好地为企业管理和决策服务.

未来加强数据管理需要从总体上基于企业的业务特点，对数据环境进行整体数据架构规划从跨业务、跨级层、跨应用系统的视角统一对数据进行组织和规划，提高数据集中存储和跨系统间数据共享的效率。数据架构描述了企业的数据资产，显示了如何管理和共享信息资源，用以决策支持，最大限度地发挥数据的价值。数据架构有时也被称为信息架构。

数创知云课程已更新