云数据仓库套件 Sparkling

简单易用、全托管、高性能、高弹性的云端分布式 PB 级数据仓库套件

一站式全托管、高性能的 PB 级数据仓库

腾讯云数据仓库套件 Sparkling 详细信息

云数据仓库套件 Sparkling 提供无服务器化多租户和独享集群两种模式。试用期主要支持独享集群部署模式,以集群为基本使用单位,一个用户可以拥有多个集群,一个集群通常由主节点、核心节点和弹性计算节点组成。单集群随着核心节点的增加,容量和计算能力将线性提升,同时用户可按需伸缩弹性计算节点,提升或缩减计算能力。无服务器化多租户模式按使用量进行收费,独享集群模式按核心节点和计算节点的规格和数量进行收费。两种模式都提供按量计费和包月计费两种计费方式。 

功能

云数据仓库套件 Sparkling 提供快速、完全托管的PB级数据仓库解决方案,使您可以经济并高效的分析处理海量数据。

弹性伸缩

提供强大的弹性扩缩容能力。计算存储分离,集群工作节点包括核心节点和弹性计算节点。用户通过 Data Studio 控制台或云API,实现手动/自动的大规模节点的快速线性横向的扩容,以及纵向计算和存储能力的变配。弹性计算节点同时支持自动化弹性缩容,以适配业务的发展。

数据集成

云数据仓库套件 Sparkling 提供各类异构数据源的接入集成能力。用户可以通过 Data Studio 控制台将传统关系型数据库、对象存储 COS、本地文件、K-V类数据存储中数据经过抽取、转换和装载,接入到 Sparkling 数据仓库的存储中。

集群管控

独享模式为用户提供集群管理和监控模块,支持集群创建、自动扩缩容、集群配置、启停、资源智能监控报警等功能。用户可以利用集群管控功能进行日常运维、集群性能调优。

数据管理

云数据仓库套件 Sparkling 提供元数据管理模块,支持技术元数据、管理元数据和业务元数据的注册、导入、存储、检索、导出、发布等管理功能,同时为用户提供数据地图、数据字典、数据血缘追踪和影响分析、元数据版本管理、元数据统计分析、数据质量报表等多种数据管理能力。

数据开发

云数据仓库套件 Sparkling 提供数据开发模块,基于Notebook笔记簿架构,用于用户编码进行ETL、数据加工处理、数据计算等操作。当前版本支持SQL语言,后续会逐渐扩展 Python、Scala、Java、R 等常用脚本语言。

任务管控

云数据仓库套件 Sparkling 提供任务编排调度管理模块,支持时间驱动和事件驱动的 DAG 任务编排和调度。同时提供完备的任务监控能力,方便用户运维数据ETL和数据加工分析作业。

项目管理

云数据仓库套件 Sparkling 提供项目管理模块,支持客户按照企业内部产品线、团队和项目方式创建项目空间,并进行项目人员和笔记簿管理。