首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

数据治理:白话打通对Atlas的理解

问题导读 1.Atlas是什么? 2.Atlas能干什么? 3.Atlas血统关系是什么? Atlas现在被企业使用的越来越多,我们可能听说过,但是具体它是什么,能干什么的,我们可能不清楚。 因此我们要解决第一个问题,Atlas是什么? Apache Atlas是Hadoop社区为解决Hadoop生态系统的元数据治理问题而产生的开源项目,它为Hadoop生态系统集群提供了包括数据分类、集中策略引擎、数据血缘、安全和生命周期管理在内的元数据治理核心能力。 上面我们或许听着比较懵圈,都是啥,元数据治理是啥?为啥要元数据治理?元数据不就是用来描述数据的数据,我们这么理解没有错的,不过这个是其中重要的一项。比如Hive的元数据,那是需要第三方数据库的,大多存储到mysql中。为啥又出来一个Atlas,它能管理Hive的元数据吗?别说,还真可以的。那为啥要用Atlas来管理。这就涉及到我们的第二个问题,Atlas能干什么?。 Atlas能干什么? 其实很多大数据组件都有元数据管理,比如: Hive保存在外部数据库中,比如Mysql Hadoop元数据保存在Namenode,元数据的存储格式:data/hadoopdata/目录下 name:元数据存储目录 namenode存储元数据的存储目录 Kakfa元数据一般保存在zookeeper中 等等以上,我们的元数据每个大数据组件都有保存的地方,为啥还需要Atlas。 上面元数据是为了功能而生,都是单独的系统,散落在各个组件中,而我们能不能把这些元数据统一管理,而且数据的变化我们也能看到那就更好了。而且如果能把我们整个集群的大数据组件的元数据我们都能看到,那就更好了。看到这些有什么好处?比如我们想找到Hive有哪些表,想查看我们数据是怎么来的。这时候数据管理工具就产生了--Atlas,用来管理元数据的平台。 我们知道了Atlas是什么,能干什么,可能是比较通透了。可是还不够详细,那么接下来我们看看Atlas有哪些功能,有什么特点。这里直接借用《大数据治理与安全从理论到开源实践》书中内容。

01
您找到你想要的搜索结果了吗?
是的
没有找到

没时间社交?莫方,大数据帮你找到真爱!

生活中,可能你会遇到一些人,在眼神触碰的那一瞬间,你就认定他/她就是你的destiny。十年前,如果你在咖啡厅或者公交站旁边的报刊亭遇到了心仪类型的男神/女神,你可能会走过去搭讪,然后发展一段友情或者爱情。而今天,在公交站台等候的人们都不再看书了,而是盯着手机屏幕,你基本上看不到他们在看什么,不知道他们是刷微博刷朋友圈呢,还是碰巧在看你最喜欢的书的电子版。人们之间隔着一个智能手机的距离。 但是你知道吗?智能手机也能帮助我们找到志同道合的朋友。每天,我们都在各个社交网络上给有趣的内容点赞、评论和转发。如果有

04

如果明天失业了,该怎么办?

对于家里没矿、拆不了迁、拼不了爹妈爷奶的普通打工人,工作的首要目标就是养家糊口,为了生活,尤其是人到中年,上有老下有小,身上有车贷房贷,不敢生病,不敢请假。最近朋友圈看到很多关于寒意的内容,比如《我,阿里P7,找不到工作》,XX公司整部门裁员,应届生是重灾区等等。于是,一时间,“有工作”好像就已经是得天独厚的优势了,曾经经常在朋友圈吐槽公司、吐槽领导的人,甚至开始感激公司“不杀之恩,多谢收留”。开始打鸡血努力工作,保自己,保老板。于是,就在思考一个问题,如果我明天失业了,准备怎么办?有句古话叫“置之死地而后生”,提前想想这个问题,或许当这一天真的来了的时候,才不至于猝不及防,难以应对。

03

邮件群发怎么设置_qq邮箱邮件怎么群发

大家都说30岁的女人一枝花,但是我就狠狠的被家里人催婚了。老妈让我去参加一个相亲,虽然心里不想去,但是为了让老妈开心,还是去参加了这场相亲局。当相亲那天来临时,我进入了跟人约好的咖啡馆,见面时寒暄了几句,就进入了无声的沉默,后来我们聊天时提起了我们的职业,我说我是外企HR,他跟我说他是会展公司的市场部部员,然后我问他工作具体是干什么的,然后他跟我说他是具体用邮件来开发客户,介绍会展公司承包的展览这种工作。我说好厉害的样子,你们是不是也需要邮件群发啊?最近我的邮箱有限,不是特别好用,刚好想换一个邮箱,你平常使用什么邮箱啊?他说他使用的是TOMVIP邮箱,使用起来非常方便,而且单次群发量高达500封,就像你外企HR需要给员工群发邮件通知都特别方便,而且还有群发单显的功能。当时我心里想办一个吧,于是在他的帮助下我注册了这个邮箱。在他的帮助中,我觉得这个男孩特别温柔,也特别有耐心。于是我们互相加了邮箱地址和微信有了进一步的联系。作为一个HR接下来我给大家分享一下如何群发单显哦!

02
领券