数据资产达人3分钟课堂：数据资产管理师课题组，元数据抽取，数据资源目录规划、建设、共享！

     数据资产目录，为数据资产开发利用和数据资源共享提供支撑，对企业的数据资产进行组织管理和查询定位，有效解决企业数据资源数量多、数据类型多、数据分布分散、数据信息不对称等问题。通过梳理企业各类信息系统数据库，分析每个数据库包含的数据表、数据指标以及表间关系，抽取企业元数据，规划、建设数据资产目录。

1、技术元数据

    技术元数据通过元数据元素体现各阶段数据库结构内容。对于技术元数据的元素（复合元素）定义方法，通过中文名称、英文名称、缩写名、定义、数据类型、约束/条件、最大出现次数、值域等属性来描述。

2、业务元数据

    业务元数据是对企业生产经营过程数据和处理规则的业务化描述。通过元数据管理工具将元数据服务提供给所有业务人员，使业务人员能够快速的从业务角度理解数据，找到数据，利用数据。

3、管理元数据

     面向数据管理运维人员，从数据管理、质量、安全等方面描述。包括数据库记录数、表空间、数据质量规则、数据质量评测报告等；

4、元数据抽取

    元数据抽取首先解决从哪个数据源获得元数据，获得哪些元数据，如何获取元数据，如何存储元数据。抽取对象主要有：（1）已有目录：已建业务应用系统中现有的目录资源。（2）数据库：各种数据库资源，包括关系型数据库、XML数据库等。（3）格式化电子文件：电子文件，例如Word、PDF、XLS等文件。

5、电子文档的元数据抽取

 （1）整理归档，对于分散在各处的电子文档(纸质文档需要先进行电子化处理)，必须由专人进行统一整理，根据公开共享的前提进行集中，这种集中可以是物理上集中的，也可以是逻辑上集中的。

 （2）根据安全级别，建立相应的访问机制，用户名/密码、数字证书、物理隔断等等，做到重要信息不泄露，不丢失。

 （3）编目处理，对于word、excel、ppt、pdf等主流格式的电子文档，要提供自动采集工具进行编目处理。采集的范围主要是文档的标题和内容，对于其它的元数据内容，要提供手工配置的方式进行辅助。对于格式特殊、内容有加密算法的文档，是很难通过抓取工具进行采集的，这些文档主要通过手工编目的方式来处理。

 （4）保存元数据，采集后的数据要放到数据库或者保存到硬盘上，另外要根据目录体系标准，把数据分解为元数据，然后进行存储。

6、数据资源目录审核

   数据资源目录审核是指，对已经入库的数据资源目录和元数据进行核对，只有经过核准的数据信息资源，方可正式发布。元数据有效性审核分为自动审核与手动审核两个部分，数据在接受报送系统报送数据时会启动自动审核系统对数据进行初步的有效性审核，主要以过滤数据结构性错误为主，例如缺少字段、类型错误、编码缺失或不可识别字符编码等。 手工审核设计包括确认无误、退回重报、打印错误清单、直接更新元数据内容、打印元数据内容等功能，为了安全起见，更新元数据功能会记录详细的操作审计日志。

7、数据资源检索、查询

    查询已经发布的数据资源，提供数据资源统计分析，以列表或图形的方式展示查询结果。数据资源目录查询与统计功能提供数据发布、管理、下载、搜索等功能，由各部门或处室提供按标准格式整理的数据，并设置数据共享级别，用户根据共享级别按规定的流程获取数据、搜索数据。数据资源目录可初始化一批共享资源，内容包括基础数据、主题分析报表、业务报表等。数据查询提供数据发布、下载、查看、搜索、排序等功能。可以通过关键字对数据进行搜索，可以选择搜索当前分类中的数据或者对全部数据进行搜索。对搜索到的结果按时间等要素排序。可以查看数据集的详细信息和元数据属性。

8、数据资源共享、查询

     数据资源目录共享服务主要向外界提供以Web形式的HTTP动态网页为主的目录数据发布服务。数据资源目录服务提供信息资源目录和应用系统与数据库目录自关键字查询方式，查找信息资源目录库中含有特定关键字的目录数据条目。通过目录数据查询或导航功能，可以查看定位到的目录数据详细内容，即元数据内容。     

     为促进区域经济社会数字化转型、数字经济蓬勃发展， “数据资产管理师”课题组，面向地方政府、央国企相关部门，承办、支撑“建筑、市政、交通、运输、物流”等领域新质生产力优化升级、数据资产相关高端论坛、会议等专业学术活动。