专栏首页数据饕餮Apache Atlas元数据管理从入门到实战(1)

Apache Atlas元数据管理从入门到实战(1)

一、前言

  元数据管理是数据治理非常重要的一个方向,元数据的一致性,可追溯性,是实现数据治理非常重要的一个环节。传统数据情况下,有过多种相对成熟的元数据管理工具,而大数据时代,基于hadoop,最为成熟的,与Hadoop兼容性最好的元数据治理平台则是Apache Atlas。本文是《Apache Atlas元数据管理从入门到实战》系列博文的第1篇。相关内容配套视频课程,已发布在网易云课堂:《Apache Atlas元数据管理从入门到实战》,敬请关注。配套实验环境地址:http://106.13.76.64:21000/login.jsp,账号密码,请关注微信公众号:精英智能课堂,发送消息:atlas,获取。

二、正文

2.1 课程大纲

本课程共16课时,其中正文12课时,番外4课时(以后补充)。具体的课程目录结构如下图所示:

2.2 内容摘要

2.2.1 Apache Atlas系统架构

Apache Atlas1.1.0版本系统架构如下图所示:

2.2.2 Apache Atlas源码编译

2.2.3 Apache Atlas UI界面

三、未完待续

本文是《Apache Atlas元数据管理从入门到实战》系列博文的第1篇。相关内容配套视频课程,已发布在网易云课堂:《Apache Atlas元数据管理从入门到实战》,敬请关注。

本文参与 腾讯云自媒体分享计划 ,欢迎热爱写作的你一起参与!
本文分享自作者个人站点/博客:https://blog.csdn.net/hadoopdevelop复制
如有侵权,请联系 cloudcommunity@tencent.com 删除。
登录 后参与评论
0 条评论

相关文章

  • 实时数据治理—当Atlas遇见Flink

    Atlas是一组可扩展和可扩展的核心基础治理服务,使企业能够有效,高效地满足Hadoop中的合规性要求,并允许与整个企业数据生态系统集成。

    用户6070864
  • 数据治理之元数据管理的利器——Atlas入门宝典

    随着数字化转型的工作推进,数据治理的工作已经被越来越多的公司提上了日程。作为Hadoop生态最紧密的元数据管理与发现工具,Atlas在其中扮演着重要的位置。但是...

    实时计算
  • 数据治理(五):元数据管理

    元数据(Metadata),通常的定义为"描述数据的数据"。元数据打通了源数据、数据仓库、数据应用,记录了数据从产生到消费的全过程。元数据管理是数据治理的核心。

    Lanson
  • 数据治理之元数据管理的利器——Atlas入门宝典

    随着数字化转型的工作推进,数据治理的工作已经被越来越多的公司提上了日程。作为Hadoop生态最紧密的元数据管理与发现工具,Atlas在其中扮演着重要的位置。但是...

    用户6070864
  • Apache Atlas系列 -- 部署

    摘抄一段官网上的介绍,Atlas 是一个可伸缩且功能丰富的数据管理系统,深度集成了 Hadoop 大数据组件。简单理解就是一个跟 Hadoop 关系紧密的,可以...

    runzhliu
  • 使用Atlas进行元数据管理之Atlas简介

    谈到数据治理,自然离不开元数据。元数据(Metadata),用一句话定义就是:描述数据的数据。元数据打通了数据源、数据仓库、数据应用,记录了数据从产生到消费的全...

    mantou
  • 数据治理:白话打通对Atlas的理解

    问题导读 1.Atlas是什么? 2.Atlas能干什么? 3.Atlas血统关系是什么? Atlas现在被企业使用的越来越多,我们可能听说过,但是具体它是...

    用户1410343
  • 数据治理方案技术调研 Atlas VS Datahub VS Amundsen

    数据治理意义重大,传统的数据治理采用文档的形式进行管理,已经无法满足大数据下的数据治理需要。而适合于Hadoop大数据生态体系的数据治理就非常的重要了。

    实时计算
  • BIGO 的数据管理与应用实践

    本文整理自 BIGO 在 nMeetp 上的主题分享,主要介绍 BIGO 过去一年在数据管理建设方面的理解和探索。而 BIGO 数据管理的核心重点在于元数据平台...

    NebulaGraph
  • Flink1.12支持对接Atlas【使用Atlas收集Flink元数据】

    问题导读 1.Atlas中实体具体指什么? 2.如何为Flink创建Atlas实体类型定义? 3.如何验证元数据收集? 在Cloudera Streamin...

    用户1410343
  • 当Atlas遇见Flink——Apache Atlas 2.2.0发布!

    距离上次atlas发布新版本已经有一年的时间了,但是这一年元数据管理平台的发展一直没有停止。Datahub,Amundsen等等,都在不断的更新着自己的版本。但...

    用户6070864
  • 当Atlas遇见Flink——Apache Atlas 2.2.0发布!

    距离上次atlas发布新版本已经有一年的时间了,但是这一年元数据管理平台的发展一直没有停止。Datahub,Amundsen等等,都在不断的更新着自己的版本。但...

    实时计算
  • 谷歌大脑深度学习从入门到精通视频课程[8.9]:稀疏编码——与V1神经元的关系

    AI100 已经引入 Hugo Larochelle 教授的深度学习课程,会在公众号中推送,并且对视频中的 PPT 进行讲解。课后,我们会设计一系列的问题来巩...

    AI科技大本营
  • 大公司是如何发展元数据的?

    对于数据工程师而言,元数据知识可能是最需要掌握的,却常常又被忽略的一部分。毕竟在平时做需求时,大家都是用 SQL 完成任务,而和领导汇报时,又常常凸显出数据产生...

    哒呵呵
  • Atlas 2.1.0 实践(1)—— 编译Atlas

    为什么要做数据治理?业务繁多,数据繁多,业务数据不断迭代。人员流动,文档不全,逻辑不清楚,对于数据很难直观理解,后期很难维护。

    用户6070864
  • 一站式元数据治理平台——Datahub入门宝典

    随着数字化转型的工作推进,数据治理的工作已经被越来越多的公司提上了日程。作为新一代的元数据管理平台,Datahub在近一年的时间里发展迅猛,大有取代老牌元数据管...

    用户6070864
  • 使用Atlas进行数据治理

    Apache Atlas为Hadoop提供了数据治理功能。Apache Atlas用作公共元数据存储,旨在在Hadoop堆栈内外交换元数据。Atlas与Apac...

    大数据杂货铺
  • 数据治理实践:元数据管理架构的演变

    近几年来数据的量级在疯狂的增长,由此带来了系列的问题。作为对人工智能团队的数据支撑,我们听到的最多的质疑是 “正确的数据集”,他们需要正确的数据用于他们的分析。...

    用户6070864

扫码关注腾讯云开发者

领取腾讯云代金券