mpp架构大数据架构 - 腾讯云开发者社区

文章/答案/技术大牛

发布

1回答

什么是MPP数据库? Oracle和SQL Server是否属于这些数据库？

sql-server、database、oracle、teradata

我们研究types.We数据库时发现其中一种类型就是MPP数据库。什么是MPP数据库? Oracle和SQL Server是其中之一吗?如果MPP数据库是数据仓库，我们可以创建数据仓库架构吗？

浏览 16提问于2016-10-11得票数 0

1回答

Postgres-XC和MPP

postgres-xc

我目前正在考虑使用Postgres或Postgres为大约20 TB或更多的数据创建一个长期数据存储。为什么Postgres不是MPP？

浏览 0提问于2014-08-08得票数 1

回答已采纳

1回答

Snowflake中使用的是平行提示吗

sql、snowflake-cloud-data-platform

我将查询从Oracle移植到Snowflake，查询如下： select /*+ parallel(SCHUC) */ schuc.time_period from some_schuc_table 我相信Snowflake在分散工作负载方面做得更好，那么提供一个并行提示仍然有帮助吗？

浏览 11提问于2020-07-24得票数 0

1回答

我正在开发一个酒店数据分析仪表板，很像这个使用d3.js和dc.js (带有交叉过滤器)的。这是一个Django项目，我使用的数据库是Postgresql。我目前正在开发一个通用的条形图系列，它最终将允许用户选择他们希望在条形图格式中相互绘制的字段(从提供的数据集中)。我的数据库由1000万个条目组成，每个条目有54个字段(单个表)。在Python中处理数据(修改列键名称以匹配通用条形图的名称)，并将数据转换为json格式以供图形使用，这又需要几分钟，这对于我想要的应用程序来说是不可接

浏览 1提问于2015-09-28得票数 0

1回答

如何处理代码存储库中的大型文件？

palantir-foundry、foundry-code-repositories

我有一个数据提要，每天提供一个大的.txt文件(50-75GB)。文件中包含几个不同的架构，其中每一行对应于一个架构。我想为每个模式将它分割成分区数据集，我如何有效地做到这一点？

浏览 7提问于2021-01-13得票数 4

回答已采纳

1回答

CREATE TABLE返回引用sp_changeobjectowner和不存在的架构时出错

sql-server

我在SQL Server2008 R2服务器上有一个数据库。我已经为这个模式创建了一个名为MPP的模式和一些表。有一个名为ASBJOR的数据库用户，但没有架构。如果我向MPP模式添加一个新表，错误消息的数量将会增加，并且其中一条消息会引用新的表。我已经尝试在默认的dbo模式中创建一个新表，并使用ALTER schema MPP传输将其移动到MPP模式...命令，但错误消息中仍显示新的表。您知道是什么原因导致此错误消息，或者我可以在数据库中查找更多核心详

浏览 32提问于2020-04-28得票数 0

回答已采纳

1回答

Azure数据仓库数据库存储

azure、azure-sql-database、azure-blob-storage、azure-sqldw

我是Azure数据仓库的新手，在阅读一些关于数据实际存储位置的文章时，我一点也不感到困惑。是计算节点为db表或azure blob存储数据吗？谢谢

浏览 2提问于2016-08-27得票数 0

回答已采纳

1回答

从公共表列引用架构

postgresql、multi-tenant

我有一个多租户Postgresql数据库，每个模式都属于我们的一个客户(租户)。每个租户都有一个名为Messages的表。

浏览 0提问于2019-01-29得票数 0

2回答

为什么erlang整数使用28位？

erlang、integer

今天当我阅读Erlang关于效率指南的高级一章 1字64位架构：-576460752303423489 <i< 576460752303423488(60位)3.N个词为什么使用28位或60位？小还是大是由erlang判断的呢？32位架构意味着32位系统还是cpu？我的英语很差，我刚来二郎。泰克斯。

浏览 1提问于2014-08-05得票数 2

回答已采纳

1回答

如何将大型XML数据转换为Excel或CSV

excel、ms-access、vba

我所需要的就是将XML数据转换成Excel，如果数据很大，那么它应该移动到另一个工作表。谢谢,

浏览 4提问于2017-08-02得票数 0

1回答

如何仅为Postgres导出模式

postgresql、pg-dump

我有一个非常大的PostgresSQL数据库。我只想转储架构。正在运行 pg_dump -s myschema -f /dump.sql 永远运行，所以我认为它也在导出数据。如何才能仅转储模式？

浏览 25提问于2019-05-09得票数 1

回答已采纳

1回答

使用推断模式与在spark数据中加载CSV文件数据时显式传递模式时的性能开销

csv、apache-spark、apache-spark-sql

我是加载CSV数据在火花数据与设置inferSchema选项为true。尽管我的CSV文件的模式总是相同的，而且我知道确切的模式。手动提供模式而不是推断模式是个好主意吗？显式提供架构是否提高了性能？

浏览 1提问于2017-08-09得票数 1

回答已采纳

3回答

哪种微服务模式适用于传输大型数据文件

design-patterns、microservices、enterprise-architecture

如果多个微服务需要处理一个大的JASON文件(10MB)，那么最好的企业架构/设计模式是什么？每个微服务都需要文件中的整个数据来处理它。

浏览 3提问于2017-08-14得票数 1

1回答

使用当前行值在Power中使用匹配的列名对表执行计算？

powerbi、powerquery

浏览 2提问于2019-08-23得票数 0

回答已采纳

1回答

如何在创建与从Google工作表中删除的表同名的新表时使用旧模式停止大查询

sql、google-sheets、google-bigquery、schema

我正在使用一个Google表作为大查询中表的来源。由于无法在现有表的架构中重命名字段名，所以在修改源Google工作表中的列名后，我删除了该表并试图重新创建它。即使我在创建表时以文本形式输入新架构，它也会忽略我输入的内容，并使用旧表中的架构。提前感谢！

浏览 4提问于2022-01-14得票数 0

1回答

猫鼬ValidationError:产品验证失败: CountInStock: Path `CountInStock‘是必需的

reactjs、mongodb、mongoose、mern

我是一个初学者的反应，我是工作在MERN堆栈项目，我是遵循教程。在我的例子中，连接到DB是成功的。然而，我无法在我的主屏幕上显示产品，当我尝试使用这个链接时， nodemon应用程序会崩溃并显示此错误。 (节点:28916) MONGODB驱动程序警告:不推荐使用collection.remove。改用deleteOne、deleteMany或bulkWrite。(使用D:\Github\Ecommerce-mern\backend\node_modules\mongoose\lib\document.js:2965 this.$__.validationError =this.$__.va

浏览 2提问于2022-05-07得票数 0

回答已采纳

4回答

群集和MPP超级计算机体系结构有什么不同？

cluster-computing、supercomputers

群集和MPP超级计算机体系结构有什么不同？

浏览 2提问于2011-04-07得票数 24

回答已采纳

1回答

哪种页面加载用例

architecture、traffic

架构问题：如果一个站点需要处理100个并发页面负载和100,000个并发会话，这会被视为大容量站点吗？一个需要重型代码框架来支持卷？(假设页面加载不是数据密集型的)

浏览 2提问于2010-09-26得票数 1

3回答

如何在bcpy(批量复制python)中避免dbo，同时将数据从python推送到sql server

python、sql-server、bcp

我正在尝试使用python脚本中的bcpy将熊猫数据压缩到sql server表中。如何避免默认架构名称dbodatabase : database_nametable : table_name 它创建database_name.schema_name.table_name

浏览 4提问于2019-09-25得票数 1

回答已采纳

2回答

从sql server到Azure Datawarehouse的实时数据流

azure、apache-kafka、spark-streaming、azure-data-lake、sql-data-warehouse

我正试图在Microsoft数据仓库之上构建一个实时报告服务。目前，我有一个拥有大约5TB数据的SQL服务器。我想将数据流到数据仓库，并使用Azure DW的计算能力生成基于数据的实时报告。我正在考虑的一种方法是将数据加载到Kafka中，然后通过Spark流将其流到Azure DW中。然而，这种方法比实时方法更接近实时.是否有任何方法利用Server更改数据捕获来将数据流到数据仓库中？

浏览 6提问于2017-10-23得票数 2

回答已采纳

点击加载更多