数据治理之元数据管理

目录

一、概念

什么是元数据？

二、特点

三、分类

1.业务元数据

2.技术元数据

3.管理元数据

四、元数据管理工具

一、概念

什么是元数据？

元数据（Metadata）：描述数据的数据（data about data），主要是描述数据属性（property）的信息，用来支持如指示存储位置、历史数据、资源查找、文件记录等功能。元数据算是一种电子式目录，为了达到编制目录的目的，必须在描述并收藏数据的内容或特色，进而达成协助数据检索的目的。

二、特点

1.元数据一经建立，便可共享

2.元数据是一种编码体系

3.元数据通常是结构化数据的数据

4.元数据包含用于描述信息对象的内容和位置的数据元素集，方便查询与检索

5.元数据是与对象相关的数据

三、分类

1.业务元数据

从业务角度描述业务领域的相关概念、关系，包括业务术语和业务规则。

维度、维度描述、属性信息、指标、指标定义、业务过程

2.技术元数据

指技术细节相关的概念、关系和规则，包括对数据结构、数据处理方面的描述。以及数据仓库、ETL、前端展现等技术细节的信息。

存储元数据（表、字段、分区、生命周期）；运行元数据（作业类型、实例名称、执行时间）；数据同步、计算任务、任务调度等信息；数据质量和运维相关元数据，如任务监控、运维报警、数据质量

3.管理元数据

管理领域相关，包括管理流程、人员组织、角色职责等。

四、元数据管理工具

初始化配置、元数据采集、提供元数据价值分析：包括血缘分析、健康度分析等，支撑数据资产可视化。

1.Apache Atlas

2.Netflix Metadata