备案控制台
学习
实践
活动
专区
工具
TVP
文章/答案/技术大牛
写文章
  • 广告
    关闭

    热门业务场景教学

    个人网站、项目部署、开发环境、游戏服务器、图床、渲染训练等免费搭建教程，多款云服务器20元起。

    • 您找到你想要的搜索结果了吗？
    是的
    没有找到

    使用Atlas进行元数据管理之Atlas简介

    然后，包含数据分类、集中策略引擎、数据血缘、安全和生命周期管理功能的Atlas应运而生。 (PS：另一个应用的较多的元数据开源项目是Linkedin 在2016年新开源的项目：WhereHows)Atlas目前最新的版本为2018年9月18日发布的1.0.0版本。 1. Atlas介绍 Atlas 是一个可伸缩和可扩展的核心基础治理服务集合 ，使企业能够有效地和高效地满足 Hadoop 中的合规性要求，并允许与整个企业数据生态系统的集成。 Apache Atlas为组织提供开放式元数据管理和治理功能，用以构建其数据资产目录，对这些资产进行分类和管理，并为数据科学家，数据分析师和数据治理团队提供围绕这些数据资产的协作功能。 ? 2. 与Apache Ranger集成可根据与Apache Atlas中的实体相关的分类对数据访问进行授权/数据屏蔽。例如： 谁可以访问分类为PII，SENSITIVE的数据。

    3.7K40

    Atlas功能特性

    1.Atlas是否支持多字符集？ 对多字符集的支持是我们对原版MySQL-Proxy的第一项改进，符合国情是必须的。并且支持客户端在连接时指定默认字符集。 2.Atlas是否支持事务操作？ 在Atlas中读操作不受影响，Atlas会将读请求转发到其他还存活的从库上。但此时写请求将会失败，因为主库宕机了。 5.检测后端DB状态会阻塞正常请求么？ 8.相比官方mysql-proxy, Atlas还有哪些改进？ 11.在使用Atlas的过程中，发现了Atlas存在的bug或者对Atlas有新的功能需求，如何反馈给开发者？ 对于用户反馈的bug，我们非常重视。 Atlas不负责MySQL的主从同步操作，需要DBA自己管理。但热心的网友已经通过脚本实现了通过调用Atlas提供的接口，来监控主从之间的同步，并做上下线从库的操作。

    51120

    Atlas 高可用部署

    =true 2）Hbase相关配置 atlas.graph.storage.backend=hbase2 atlas.graph.storage.hbase.table=apache_atlas_janus =false atlas.kafka.data=/home/service/apache-atlas-2.1.0/data/kafka atlas.kafka.zookeeper.connect=node1 href="http://atlas.kafka.hook.group.id/">atlas.kafka.hook.group.id=atlas atlas.kafka.enable.auto.commit =1 atlas.notification.topics=ATLAS_HOOK,ATLAS_ENTITIES atlas.notification.log.failed.messages=true atlas.notification.consumer.retry.interval ### atlas.server.ids=id1,id2 atlas.server.address.id1=hostname1:21000 atlas.server.address.id1=hostname2

    11310

    当Atlas遇见Flink——Apache Atlas 2.2.0发布！

    距离上次atlas发布新版本已经有一年的时间了，但是这一年元数据管理平台的发展一直没有停止。Datahub，Amundsen等等，都在不断的更新着自己的版本。 但是似乎Atlas在元数据管理，数据血缘领域的地位一直没有动摇。 最近Atlas终于迎来又一次大的更新，发布了全新的2.2.0版本。 首先来了解一下这个版本。 Apache Atlas 2.2 有哪些新功能？ Python 客户端：重构和增强的 Atlas Python 客户端，支持 Python 2.7 搜索：更新了自由文本搜索处理器以支持 Elasticsearch，支持带有特殊字符的搜索文本，优化分页 已经默认增加Flink可以接受Flink的元数据了，但是Flink并没有公布对atlas的支持，捕获并发送元数据这部分还是需要做一些的工作。

    88511

    Atlas实现MySQL主从分离

    一.介绍Atlas及架构图 Atlas源代码用C语言编写，它对于Web Server相当于是DB,相对于DB相当于是Client,如果把Atlas的逻辑放到Web Server程序里去处理，这样会大大增加 是架设在Web Server与DB之间的一个中间件，Web Server与DB之间的耦合关系放到了Atlas来处理，既做到了灵活也保留了性能，这也是Atlas存在的价值。       mysql slave ：192.168.200.102  atlas ：192.168.200.103 atlas有两个port，分别为 工作端口： proxy-address项配置，例如proxy-address 二.安装Atlas  注意：只能安装在64位的Linux操作系统上，CentOS官方建议rpm安装方式 三.实施案例 1.目录结构  bin： 该目录存放atlas启动程序，还有加密脚本  conf： 3.安装配置Atlas 下载地址：https://github.com/Qihoo360/Atlas/releases [root@Atlas ~]# rpm -ivh Atlas-2.2.1.el5.

    15210

    MySQL工具Atlas的安装使用

    4.3 节点管理 4.3.1 查看所有节点 4.3.2 节点的上线和下线 4.3.3 添加删除节点 4.4 用户管理 4.4.1 在主库增加数据库用户 4.4.2 查看当前用 4.4.3 增加Atlas 用户 作者：AshesCat 1、介绍 Atlas是由Qihoo 360, Web平台部基础架构团队开发维护的一个基于MySQL协议的数据中间层项目 它是在mysql-proxy 0.8.2版本的基础上 ，对其进行了优化，增加了一些新的功能特性 360内部使用Atlas运行的mysql业务，每天承载的读写请求数达几十亿条 下载地址 ：https://github.com/Qihoo360/Atlas /releases 注意： 1、Atlas只能安装运行在64位的系统上 2、Centos 5.X安装Atlas-XX.el5.x86_64.rpm，Centos 6.X/7.X安装Atlas-XX.el6 2.2 下载安装Altas wget https://github.com/Qihoo360/Atlas/releases/download/2.2.1/Atlas-2.2.1.el6.x86_64.

    28820
    点击加载更多

    关注

    腾讯云开发者公众号
    将获得
    10元无门槛代金券
    洞察腾讯核心技术
    剖析业界实践案例
    腾讯云开发者公众号二维码

    相关产品

    • 腾讯云 TI 平台

      腾讯云 TI 平台

      智能钛机器学习（TI-ML）是基于腾讯云强大计算能力的一站式机器学习生态服务平台。它能够对各种数据源、组件、算法、模型和评估模块进行组合，使得算法工程师和数据科学家在其之上能够方便地进行模型训练、评估和预测……

    相关资讯

    热门标签

    更多标签

    活动推荐

    腾讯云开发者

    扫码关注腾讯云开发者

    领取腾讯云代金券

    热门产品

    热门推荐

    更多推荐

    Copyright © 2013 - 2023 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有

    深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 深公网安备号 44030502008569

    腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号 |京公网安备号11010802020287

    扫码关注腾讯云开发者

    领取腾讯云代金券