首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
技术百科首页 >数据湖计算 >腾讯云数据湖计算 DLC 的常见场景有哪些?

腾讯云数据湖计算 DLC 的常见场景有哪些?

词条归属:数据湖计算

用户可直接查询和计算 COS 桶中的数据,而无需将数据聚合或加载到将数据湖计算 DLC 中。数据湖计算 DLC 可以处理非结构化、半结构化和结构化的数据集,格式包括 CSV、JSON、Avro、Parquet、ORC 等;也可以将数据湖计算 DLC 集成到数据可视化应用中,生成数据报表,轻松实现数据可视化。

数据湖计算 DLC 支持对多源异构数据进行联合查询分析,包括对象存储、云数据库大数据服务等。用户通过统一的数据视图,使用标准的 SQL 即可实现多源数据联合分析。无需依赖数据工程团队进行传统数据分层建模的 ETL 操作,也无需加载数据。

相关文章
腾讯云DLC(数据湖计算)重磅支持Apache Hudi
数据湖计算 DLC 通过类 SaaS 化的服务设计,为客户提供云原生企业级敏捷智能数据湖解决方案,具备以下特点:
ApacheHudi
2023-02-28
1.3K0
PB 级数据秒级分析:腾讯云原生湖仓DLC 架构揭秘
导读|过去几年,数据湖能力已经在腾讯内部包括微信视频号、小程序等多个业务大规模落地,数据规模达到 PB至 EB 级别。在此基础上,腾讯自研业务也启动了云原生湖仓能力建设。云原生湖仓架构最大的挑战什么?腾讯云原生湖仓 DLC 从哪些方面着手解决问题?接下来由腾讯云大数据专家工程师于华丽带来相关分享。 云原生湖仓的诞生背景、价值、挑战 当前这个阶段,相信大家对于数据湖,数据仓,湖仓一系列的名词已经不算陌生了,我用最直白、最狭义方式去解释“湖仓”的话,就是数据湖跟数仓存储架构统一。 数据湖最初的需求是,要存储和
腾讯云开发者
2023-01-04
1.2K0
云原生Spark UI Service在腾讯云云原生数据湖产品DLC的实践
作者:余建涛,大数据平台产品中心高级工程师 摘要 Spark UI是查看Spark作业运行情况的重要窗口,用户经常需要根据UI上的信息来判断作业失败的原因或者分析作业如何优化。DLC团队实现了云原生的Spark UI Sevice,相较于开源的Spark History Server,存储成本降低80%,大规模作业UI加载速度提升70%。目前已在公有云多个地域上线,为DLC用户提供Spark UI服务。 背景 Spark History Server原理 Spark History Server(以下简称S
腾讯云大数据
2022-08-26
1.5K0
一份数据满足所有数据场景?腾讯云数据湖解决方案及DLC内核技术介绍
摘要 OLAP数据库/引擎日新月异,不断推陈出新,在各种场景下有不同引擎的价值:flink擅长于实时数据集成/实时计算;spark批处理、tb级以上、hive生态、复杂join的数据分析、以及机器学习;presto联邦分析、较简单join、tb级以下hive生态udf数据分析;clickhouse 大宽表聚合操作、无数据更新、尽量无join、没有复杂udf的亚秒级分析,tensorflow深度学习等等 即使相同的引擎,考虑资源隔离、成本分摊、数仓研发/使用周期(test,adhoc,prod,backfil
腾讯云大数据
2022-04-22
1K0
精选 | 腾讯云CDN内容加速场景有哪些?
腾讯云 CDN,ECDN 和 SCDN 的各种应用场景列举如下。您可以单击具体的应用场景,查看更详细的内容:
TCS-F
2021-11-17
12.8K0
点击加载更多
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档
领券