展开

关键词

首页关键词数据工程师

数据工程师

相关内容

WeData 数据开发平台

WeData 数据开发平台

该产品提供包含数据集成、可视化数据开发与数据治理在内的全链路数据开发能力,帮助数据工程师高效构建企业级数据中台架构,以实现企业的数据驱动业务增长。
  • 数据工程师的崛起

    13年离开时我的职位却是数据工程师。但他们也不像数据科学家,数据工程师受到一位更成熟的“父亲”– 软件工程师 – 启发。数据工程师创造工具、基础、框架和服务。事实上,相比于数据科学家,数据工程师可以说是更接近于软件工程师。-Bill Inmon 相应得,数据仓库还是与以前一样,数据工程师负责数据仓库的多方面搭建并在其上操纵。数据工程师总是关注于在数据仓库及其附属产品。在这些项目中数据工程师教会人们怎么样更专业地操作数据。 数据工程师同时也是数据仓库的管理员,编目、整理元数据,定义从数据仓库抽取数据的过程。服务数据工程师还会做些更高级别的抽象事务,在一些工作场景中提供服务和工具化使数据工程师,数据科学家和分析师可能人工处理的工作自动化。
    来自:
    浏览:320
  • 数据工程师的没落

    大数据文摘作品作者:Maxime Beauchemin编译:阮雪妮,笪洁琼,Aileen这个行业的辛酸,也许只有数据工程师们自己能懂。本文是几个月前大数据文摘推送的一篇文章《数据工程师的崛起》的后续 。那是最近一篇尝试定义数据工程和描述数据工程师这一新职位与数据科学领域以往和现在的职位之间的联系的文章。如果对数据工程师这个职位不了解的读者,可以参考这篇文章《数据科学行业的8个关键角色:职责与技能》了解数据科学行业职责分类。在这篇文章中我打算揭露使数据工程师寸步难行的挑战和风险,并列举这一领域在经历其“青春期”时所面临的阻力。是否是真正的软件工程师?这个领域的人们应该听到过关于数据工程师是否是“真正的软件工程师”,或是某种不同类别的工程师的争论。在某些机构中这一职位是不同的,并且可能有不同(更低)的工资级别。
    来自:
    浏览:364
  • 数据安全中心

    数据安全中心(DSGC)是通过数据资产感知与风险识别,对企业云上敏感数据进行定位与分类分级,并帮助企业针对风险问题来设置数据安全策略,提高防护措施有效性。
    来自:
  • 广告
    关闭

    50+款云产品免费体验

    提供包括云服务器,云数据库在内的50+款云计算产品。打造一站式的云产品试用服务,助力开发者和企业零门槛上云。

  • 数据湖构建

    腾讯云数据湖构建(DLF)提供了数据湖的快速构建,与湖上元数据管理服务,帮助用户快速高效的构建企业数据湖技术架构。DLF包括元数据管理、入湖任务、任务编排、权限管理等数据湖构建工具。借助DLF,用户可以极大的提高数据入湖准备的效率,方便的管理散落各处的孤岛数据…...
    来自:
  • 数据协作平台

    数据协作平台(DSP)为企业用户和个人用户提供安全可靠的数据订阅服务。企业用户可通过数据共享平台,在国家法律法规允许的范围内发布数据;个人用户和其他企业用户可通过数据共享平台订阅已发布的数据。
    来自:
  • 云数据迁移

    云数据迁移(Cloud Data Migration)是腾讯云提供的 TB ~ PB 级别的数据迁移上云服务。本服务提供了安全可靠的离线迁移专用设备,满足本地数据中心进行大规模数据迁移上云的需求,解决本地数据中心通过网络传输时间长、成本高、安全性低的问题。
    来自:
  • 数据安全审计

    腾讯云数据安全审计(Data Security Audit,DSAudit)是一款基于人工智能的数据库安全审计系统,可挖掘数据库运行过程中各类潜在风险和隐患,为数据库安全运行保驾护航。
    来自:
  • 数据湖计算

    腾讯云数据湖计算(DLC)提供了敏捷高效的数据湖分析与计算服务。该服务采用无服务器架构(Serverless)设计,用户无需关注底层架构或维护计算资源,使用标准 SQL 即可完成对象存储服务(COS)及其他云端数据设施的联合分析计算。借助该服务,用户无需进行传统的数据分层建模,大幅缩减了海量数据分析的准备时间,有效提升了企业数据敏捷度。
    来自:
  • 数据保险箱

    数据保险箱(CDCS)是腾讯云提供给您的更高安全系数的数据安全管理服务。客户可以通过控制台、API 多样化方式简单、快速地接入,实现海量文件数据的精细化安全管理,符合监管和合规要求。
    来自:
  • 数据工程师该如何入门?

    0x00 前言最近发现身边有不少小伙伴想转行做数据工程师,聊天的过程中发现大家对该如何入门有很多迷茫的地方,周末写篇博客记录一下。哪些人适合继续阅读数据工程师该如何入门?,发现大数据方向挺不错本文结构前面已经限定了一个大致的话题范围,下面介绍一下主要的文章结构:数据工程师的日常工作,或者是什么是数据工程师数据工程师需要具备什么技能该怎么学0x01 数据工程师的技能树1.什么是数据工程师数据工程师这个概念其实很模糊,不同的人和公司对它赋予的含义也区别很大,感兴趣的可以看一下我前面的几篇文章。在这里,我们大概聊一下一般意义上的数据工程师在工作中会做什么?集群运维:安装、测试、运维各种大数据组件数据开发:细分一点的话会有ETL工程师、数据仓库工程师等数据系统开发:偏重Web系统开发,比如报表系统、推荐系统等?集群运维数据工程师,基本上是离不开集群搭建,比如Hadoop、Spark、Kafka,不要指望有专门的运维帮你搞定,新组件的引入一般都要自己来动手的。因此这就要求数据工程师了解各种大数据的组件。
    来自:
    浏览:399
  • 数据万象

    腾讯云数据万象(Cloud Infinite,CI)能够实现对云上的图片、视频、音频、文档等数据进行处理,为客户提供专业一体化的数据处理解决方案,涵盖图片处理、内容审核、内容识别、媒体处理、文档服务等功能
    来自:
  • 敏感数据处理

    敏感数据处理(Data Mask,DMask)是一款敏感数据脱敏与水印标记工具,可为数据系统中的敏感信息进行脱敏处理并在泄漏时提供追溯依据,为企业核心数据提供有效的安全保护措施。
    来自:
  • 云数据库 Redis

    云数据库 Redis,数据库缓存,数据库存储,云数据库 云数据库 Redis(TencentDB for Redis)是腾讯云打造的兼容 Redis 协议的缓存和存储服务。丰富的数据结构能帮助您完成不同类型的业务场景开发。支持主从热备,提供自动容灾切换、数据备份、故障迁移、实例监控、在线扩容、数据回档等全套的数据库服务。云数据库Redis是腾讯云打造的兼容 Redis 协议的缓存和存储服务。丰富的数据结构能帮助您完成不同类型的业务场景开发。支持主从热备,提供自动容灾切换、数据备份、故障迁移、实例监控、在线扩容、数据回档等全套的数据库服务。
    来自:
  • 云数据仓库 PostgreSQL

    云数据仓库 PostgreSQL (Cloud Data Warehouse PostgreSQL,CDWPG)(原Snova数据仓库)为您提供简单、快速、经济高效的PB级云端数据仓库解决方案。CDWPG兼容Greenplum开源数据仓库,是一种基于MPP(大规模并行处理)架构的数仓服务。借助于该产品,您可以使用丰富的PostgreSQL 开源生态工具,实现对云数据仓库中海量数据的即席查询分析、ETL 处理及可视化探索;还可以借助云端数据无缝集成特性,轻松分析位于 COS、TencentDB、ES 等数据引擎上的 PB 级数据。
    来自:
  • 云数据库 MongoDB

    文档数据库 MongoDB是腾讯云 打造的高性能 NoSQL 数据库,100% 完全兼容 MongoDB 协议,同时高度兼容 DynamoDB 协议,提供稳定丰富的监控管理,弹性可扩展、自动容灾,适用于文档型数据库场景
    来自:
  • 大数据处理套件

    腾讯大数据处理套件(TBDS)是基于腾讯多年海量数据处理经验,对外提供的可靠、安全、易用的大数据处理平台。你可以根据不同数据处理需求选择合适的大数据分析引擎和相应的实时数据开发、离线数据开发以及算法开发服务,来构建您的大数据应用服务……
    来自:
  • 云数据库 MySQL

    腾讯云数据库MySQL是一种高性能、高可靠、高安全、可灵活伸缩的数据库托管服务,其不仅经济实惠,而且提供备份回档、监控、快速扩容、数据传输等数据库运维全套解决方案,为您简化 IT 运维工作,让您能更加专注于业务发展
    来自:
  • 数据库专家服务

    腾讯数据库专家服务(DES)为您提供专业化的数据库服务。仅需提交您的具体问题和需求,即可获得腾讯云数据库专家的专业支持,助您解决各类专业化数据库问题。
    来自:
  • 游戏数据库 TcaplusDB

    游戏数据库(TcaplusDB)是专为游戏设计的分布式 NoSQL 数据存储服务, 支持全区全服、分区分服的业务模式,为游戏业务爆发增长和长尾运维提供不停服扩缩容、自动合服等功能。同时,游戏数据库TcaplusDB还 提供完善的高可用、容灾、备份、回档功能以实现7*24小时五个9的可靠数据存储服务。
    来自:

扫码关注云+社区

领取腾讯云代金券