专栏首页物流IT圈大数据平台下的数据治理

大数据平台下的数据治理

数据治理是指从使用零散数据变为使用统一主数据、从具有很少或没有组织和流程治理到企业范围内的综合数据治理、从尝试处理主数据混乱状况到主数据井井有条的一个过程。

随着Hadoop技术的提升,数据如何进来,如何整合,开展什么样的应用都已经有了成熟的案例,可是,同传统数仓时代一样,垃圾进垃圾出,如何破?相比传统数仓时代,进入Hadoop集群的数据更加的多样、更加的复杂、量更足,这个数仓时代都没有处理好的事情,如何能够在大数据时代处理好,这是所有大数据应用者最最期盼的改变,也是大数据平台建设者最有挑战的难题:数据治理难的不是技术,而是流程,是协同,是管理。

数据治理涉及的IT技术主题众多,包括元数据管理、主数据管理、数据质量、数据集成、监控与报告等。

数据治理是专注于将数据作为企业的商业资产进行应用和管理的一套管理机制,能够消除数据的不一致性,建立规范的数据应用标准,提高组织数据质量,实现数据广泛共享,并能够将数据作为组织的宝贵资产应用于业务、管理、战略决策中,发挥数据资产的商业价值。同时,数据治理将帮助组织更好的遵从内外部有关数据使用和管理的监管法规,如SOX法案,Basel II协议等。良好的数据治理必将为信息化时代的企业带来不可替代的竞争优势。

物流IT圈

泛物流行业IT知识分享传播、从业人士互帮互助,覆盖快递快运/互联网物流平台/城配/即时配送/3PL/仓配/货代/冷链/物流软件公司/物流装备/物流自动化设备/物流机器人等细分行业。长按二维码即刻加入我们,如果你是以上行业公司中的IT从业人士加运营小哥微信后可入群交流。

本文分享自微信公众号 - 物流IT圈(exiter18),作者:CIO之家

原文出处及转载信息见文内详细说明,如有侵权,请联系 yunjia_community@tencent.com 删除。

原始发表时间:2019-09-30

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

我来说两句

0 条评论
登录 后参与评论

相关文章

  • 【原创】从地图到线路规划 (四)

    第三类要讲的地图数据是三维图,主要用在仓储、中转场等场内调度和仓储优化领域。在物流行业,场站内调度从来就是信息化密集覆盖的一个区域,场内叉车每日上百躺运转,产生...

    物流IT圈
  • [数据知识]IBM 数据治理成熟度评估模型

    数据被认为是推动企业增长和商业创新引擎的燃料。数据无疑被组织认定且拥有的资产之一,但是由于其海量数据的增加,复杂度随之增加,管理和控制的难度越来越大。

    物流IT圈
  • 大数据平台技术栈

    Flume是一个分布式的高可用的数据收集、聚集和移动的工具。通常用于从其他系统搜集数据,如web服务器产生的日志,通过Flume将日志写入到Hadoop的HDF...

    物流IT圈
  • 数据科学通识第七讲:数据分析

    数据科学最重要的内涵是用科学的方法来研究数据。数据科学是在数学、统计学、计算机科学等相关学科的支撑下对数据开展研究和应用的学科,它包括数据采集、数据管理、数据治...

    数据酷客
  • 【金猿人物展】BBD董事长曾途:大数据政府治理将迎来新格局

    那么新时代下,该如何运用大数据这些技术手段辅助科学决策和社会治理,以推进政府管理精准化?我们可以从以下几个方面得到启示。

    数据猿
  • 大数据要经得起三问:从哪来?怎么用?谁买单?

    当我们面对一项大数据应用时,只要简单问一问3个问题——数据哪里来、数据怎么用、成果谁买单——就能揭开许多“伪装”。日前由中国管理科学学会大数据管理专委会、国务院...

    钱塘数据
  • 大数据“变现热”的冷思考

    10月26日,第一财经旗下DT财经发起的数据社群——数据侠联手复旦大学大数据研究院人文社科数据研究所,共同举办以“大数据商业应用解析与未来展望”为主题的公开课。

    DT数据侠
  • 荐读|数据湖是什么东东 数据湖的四个最佳实践

    数据湖听起来很简单:把数据或信息汇集到一个结合处理速度和存储空间的大数据系统――Hadoop集群或内存解决方案,那样业务部门就能访问数据,获取新的洞察力。不过,...

    灯塔大数据
  • 大咖 | 车品觉:我们为什么要认识数据的本质

    大数据文摘
  • 关于数据分析,管理者的4个常规错误

    大数据文摘

扫码关注云+社区

领取腾讯云代金券