前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >Datahub 0.8.5发布! 通用的元数据搜索和发现工具

Datahub 0.8.5发布! 通用的元数据搜索和发现工具

作者头像
大数据流动
发布2021-07-14 16:36:27
8820
发布2021-07-14 16:36:27
举报
文章被收录于专栏:实时计算实时计算

近期Datahub 发布了最新的版本0.8.5,作为LinkedIn开源的通用的元数据搜索和发现工具。Datahub近一年来有了巨大的发展,也成为了很多公司进行元数据管理的调研方向并进行使用的选择。

新功能

0.8.5版本中datahub修复了各种稳定性的修复,并改进了多个数据源的元数据获取方式,包括mongodb、looker、hive、snowflake。

在采用React重构前端以后,datahub的可视化功能得到了极大的提高。

但对于功能方面的改进,DataHub 也没有停止。

功能简介

Datahub目前提供了如下功能:

  • 搜索:全文和高级搜索,搜索排名
  • 浏览:浏览可配置的层次结构
  • 架构:表格和 JSON 格式的表和文档架构
  • 粗粒谱系:支持数据集级别的谱系,下游/上游的表格和图形可视化
  • 所有权:显示数据集的所有者,查看您拥有的数据集
  • 数据集生命周期管理:弃用/取消弃用,表面删除的数据集并用“已删除”标记它
  • 机构知识:支持向任何数据集添加自由格式的文档

而新的功能也在开发当中。根据开发路线图,细粒度的血缘关系也将会很快推出。

架构

不得不提到datahub的架构。

datahub由datahub ingestion,datahub fraontend,datahub serving三部分构成。

分为负责元数据的采集,存储与可视化展示。

这种架构让datahub可以非常灵活的进行各种数据源的对接与功能改进。

相信随着社区的不断活跃,datahub将在元数据管理领域大放异彩!

大数据流动 将于近期持续推出datahub及其他元数据管理,数据血缘等数据治理的落地方案,与实践过程。欢迎大家关注~

本文参与 腾讯云自媒体分享计划,分享自作者个人站点/博客。
原始发表:2021-07-09 ,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体分享计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 新功能
  • 功能简介
  • 架构
相关产品与服务
云数据库 MongoDB
腾讯云数据库 MongoDB(TencentDB for MongoDB)是腾讯云基于全球广受欢迎的 MongoDB 打造的高性能 NoSQL 数据库,100%完全兼容 MongoDB 协议,支持跨文档事务,提供稳定丰富的监控管理,弹性可扩展、自动容灾,适用于文档型数据库场景,您无需自建灾备体系及控制管理系统。
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档