云数据仓库分层

云数据仓库分层是一种常见的数据存储和管理方式，它将数据分为不同的层次，以便更好地组织和管理数据。在云数据仓库中，数据通常分为三个主要层次：表层、数据仓库层和数据湖层。

表层

表层是云数据仓库的最底层，它包含最原始的数据，通常是从各种来源收集的数据。表层的数据通常是非常原始的，需要进行清洗、转换和整合，以便更好地进行分析和挖掘。

数据仓库层

数据仓库层是云数据仓库的核心层，它包含经过清洗、转换和整合的数据。数据仓库层的数据通常是经过一定程度的聚合和汇总的，以便更好地进行分析和挖掘。数据仓库层通常包含一些常用的数据分析工具和报表，以便用户能够更快地进行数据分析和挖掘。

数据湖层

数据湖层是云数据仓库的最高层，它包含所有的数据，包括原始数据、聚合数据和汇总数据。数据湖层的数据通常是非常灵活的，可以通过各种方式进行分析和挖掘。数据湖层通常包含一些高级的数据分析工具和报表，以便用户能够更快地进行数据分析和挖掘。

推荐的腾讯云相关产品：

腾讯云数据仓库：https://cloud.tencent.com/product/dw
腾讯云数据湖：https://cloud.tencent.com/product/dl
腾讯云数据分析：https://cloud.tencent.com/product/dana

页面内容是否对你有帮助？

有帮助

没帮助

Oracle云数据仓库

cloud、analytics、oracle-cloud-infrastructure

有没有与Amazon Redshift和Google Big query相当的Oracle云数据仓库？我遇到了Oracle12c，Exadata，即将推出的自治数据仓库。不确定oracle产品在云数据仓库中的应用

浏览 0提问于2017-11-21得票数 1

1回答

数据湖中的可信数据层能代替数据仓库吗？

google-cloud-platform、snowflake-cloud-data-platform、data-warehouse、azure-data-lake、data-lake

如果是这样的话，我想不出一种逻辑来证明数据仓库的存在是合理的。还是可信数据本身就是Datawarehouse？或者信任的数据更像是只是聚合数据，而不是做适当的建模，因此我们仍然需要数据仓库。

浏览 9提问于2022-07-25得票数 0

1回答

在亚马逊网络服务云(RedShift)上测试数据库？

testing、amazon-web-services、etl、business-intelligence、database-reconciliation

我想检查一下功能测试，在功能测试中，我验证/验证云服务器和数据库上的数据与使用DB2作为数据库的物理服务器上的数据是否相同。所以，主要是一种数据对账，但也涉及到ETL。

浏览 3提问于2015-10-19得票数 1

1回答

如何自动将数据从google drive导入到google cloud

mysql-workbench、google-cloud-storage、google-cloud-sql

我在谷歌云中有一个数据仓库，我的数据在谷歌驱动器上是excel格式的，我想自动将数据从谷歌驱动器导入到谷歌云sql数据仓库中。我该怎么做呢?请帮帮我。

浏览 3提问于2016-08-11得票数 0

1回答

无法使用SSIS包通过数据工厂将数据导入Azure数据仓库

ssis、azure-data-factory、azure-sql-data-warehouse

我们正在尝试将数据从本地系统复制到Azure数据仓库。我们希望使用SSIS包将数据从本地复制到云。Azure Data Factory v1不支持SSIS包，而Azure数据工厂v2支持SSIS包，但数据仓库不支持它。所以我的问题是，如何使用Azure data Factory SSIS包将数据从本地数据库导入Azure数据仓库？

浏览 1提问于2020-03-13得票数 0

2回答

什么是Amazon Snowflake执行引擎

hadoop-yarn、snowflake-cloud-data-platform

当您使用Hadoop时，您可以让YARN管理Hadoop作业、资源等…… 亚马逊的Snowflake的等价物是什么？ Hadoop之于_，犹如雪花之于Hadoop

浏览 42提问于2019-01-31得票数 1

回答已采纳

2回答

使用自己的云环境而不是雪花托管的s3来存储数据

database、amazon-web-services、amazon-s3、storage、snowflake-cloud-data-platform

我们知道Snowflake是基于云的分析数据仓库，在这些云环境(AWS、Azure、GCP)上提供Saas。我们可以选择像亚马逊网络服务这样的云环境，数据将存储在雪花管理的S3存储桶中。是否可以使用我们的AWS云环境而不是针对存储进行管理的snowflake？有什么选择吗？

浏览 5提问于2021-10-22得票数 2

12回答

什么是数据仓库？

database、data-structures、data-warehouse

一位客户问我“数据仓库”这个术语的真正含义是什么。我想过ETL，数据模型的细节，与NoSQL，云，‘普通’数据库管理系统，主数据管理等的区别，但无法用几句话向他描述这个术语……(事实上，我做了一些谈话，没有照亮他。)如何用1-3个(或更多)句子来描述“数据仓库”？

浏览 0提问于2010-06-23得票数 26

回答已采纳

0回答

SQL Azure数据库:查询SQL server Azure数据仓库数据

azure-sql-database、data-warehouse

是否有从Azure SQL Server数据库(云)查询Azure SQL数据仓库(云)的选项？我们有一个托管在云中的中央仓库，其中包含应用程序所需的所有域。

浏览 8提问于2017-01-09得票数 0

1回答

oracle分析中的多对多关系

database-design、data-warehouse、oracle-analytics

我使用的是Oracle Analytics v5.9，我有一个数据仓库，其中包括一个用于实现分层维度的桥接表。我找不到将此表与事实表和维度表连接的方法。

浏览 17提问于2021-09-04得票数 0

2回答

哪种开源框架最适合ETL、Apache Airflow或Apache Beam？

apache-spark、pyspark、etl、airflow、apache-beam

我正在尝试用开源框架来做ETL，我听说过两件事，Apache Beam和Apache Airflow，这两件事最适合整个ETL或ELT，比如Talend、Azure Data Factory等，事实上，我正在尝试用云数据仓库(redshift、azure数据仓库、雪花等)来做所有的事情。

浏览 35提问于2019-07-09得票数 0

1回答

数据仓库向大数据结构的转换

bigdata、dataset

将数据仓库中的数据转换为大数据结构所需的阶段是什么？是否有任何支持它的工具和方法？如何使用模式进行这种转换，如何处理不同的数据类型，例如事实和维度。数据分离为机器、索引或唯一键的标准是什么？

浏览 0提问于2016-09-13得票数 1

回答已采纳

1回答

数据仓库-物理实现最佳实践

data-warehouse

我的任务是设计一个Kimball风格的数据仓库。它将位于Server中的prem上。组织物理实现的最佳做法是什么？也就是说，数据仓库是否应该是一个单一的数据库，使用模式来分隔每个数据集市(并且将所有维度都放在自己的模式中，以帮助“驱动”跨市场的重用)？如果我使用云平台进行数据仓库，比如Azure SQL DB (例如，使用托管实例来允许跨数据库查询)，这个决策是否重要？

浏览 2提问于2022-01-07得票数 1

1回答

如何将DbVisualizer与OAC连接

sql、data-warehouse、dbvisualizer、oracle-analytics

OAC = Oracle云自治数据仓库。我们的OAC管理员为我们提供了用于连接的.zip钱包文件，但是DbVisualizer本机不支持这一点。我该怎么连接？

浏览 5提问于2021-03-18得票数 0

2回答

客观化图书馆可以在GAE之外使用吗？

google-app-engine、google-cloud-platform、google-cloud-datastore

我想使用谷歌云数据仓库。但是，我没有使用GAE。我还能使用对象化库吗？如果是的话，怎么做？文档中没有提到如何配置它来对Datastore进行验证。

浏览 2提问于2015-05-25得票数 3

回答已采纳

1回答

AWS，RDS:如何使用硬盘文件将+40 to数据库从AWS ec2实例迁移到RDS？

postgresql、amazon-web-services、amazon-rds

使用数据目录迁移Postgres数据库似乎是可行的：

浏览 0提问于2019-01-18得票数 0

回答已采纳

1回答

雪花桌存放在哪里？

snowflake-cloud-data-platform

我正在考虑给客户买雪花，但是我不能告诉他们文档在哪里存储数据？似乎是s3，但为什么这么昂贵的存储成本？用户的s3或雪花中的数据是s3吗？

浏览 2提问于2020-03-12得票数 0

回答已采纳

1回答

我有一个表，每天大约有6亿到10亿行。即30m- 40m recs/小时数据从项目1插入到项目2，从GCS读取拼图文件，使用DataProc集群将其转换为CloudSql可接受的格式，然后插入到CloudSql中，这是考虑到mysql (又称CloudSql)对大容量插入的自然限制。我使用的是一个20主节点的集群。我的目标MySql实例是一个52 GB、8 vCPU的CloudSql实例，具有600 GB固态硬盘存储，并将innodb_write_io_

浏览 1提问于2021-03-17得票数 1

3回答