解析来自表Greenplum的数据

文章/答案/技术大牛

发布

1回答

regex、parsing、plpgsql、greenplum

我在Greenplum有一张scheme2.central_id__new_numbers表。 ? 我需要以多对多关系的形式从scheme2.central_id__new_numbers中选择数据。 ?

浏览 26提问于2021-01-08得票数 0

2回答

Greenplum:查找任何外部表的相关错误表

greenplum、external-tables

有没有办法找出与每个外部表关联的所有错误表的列表。问候，Gurupreet

浏览 0提问于2016-02-23得票数 0

2回答

gpfdist与gpload greenplum

psql、greenplum

我第一次设置greenplum。我在跟着走。我要设置从sql到greenplum数据库的连接。目前正在找出实现这一目标的最佳方法。我遇到了gpfdist和gpload。这两个有什么不同？因为两者都使用外部表，所以都在从节点上工作，并且都用于并行加载。那么使用一种方法比使用另一种方法有什么优势吗？

浏览 18提问于2017-08-09得票数 1

回答已采纳

1回答

GreenPlum是如何实现外部表的？

external、greenplum

而且我对外部表感到困惑。以下是我的理解。对于只读表，gpdb仅创建表的元数据。所有数据都存储在远程服务器上，如hdfs。查询时，数据从远程服务器传输到网段。查询结束时，数据不会保存在段上。对于只写表，gpdb将从远程加载数据。所有数据都将保存在数据段中。插入操作将修改本地段上的数据，而不是远程段上的数

浏览 2提问于2016-12-13得票数 0

2回答

如何将数据从HAWQ推送到GREENPLUM？

hadoop、hdfs、greenplum、external-tables、hawq

我有一个不稳定的客户，他想在经过一些预处理后将数据从HAWQ推送到GREENPLUM。有没有办法做到这一点？如果没有，是否可以在greenplum中创建一个外部表，以便从运行HAWQ的HDFS中读取该表？任何帮助都将不胜感激。

浏览 2提问于2014-06-09得票数 1

3回答

如何在pgAdmin 4上预览函数代码？

greenplum、pgadmin-4

当我在pgAdmin3中登录到postgresql数据库时，当我展开一个模式时，我会看到一个函数选项卡。当您单击函数并选择一个函数时，您可以看到该函数的code.In pgAdmin 4I没有在模式下看到函数的选项卡。如何查看pgAdmin 4中的函数代码？

浏览 40提问于2018-02-26得票数 1

2回答

在Greenplum中格式化外部表格(PostgreSQL)

database、postgresql、greenplum

我想使用外部表将普通文件加载到Greenplum数据库中。我可以为时间戳/日期/时间字段指定输入格式吗？(如果你知道PostgreSQL的答案，也请回复)CRE

浏览 0提问于2012-11-05得票数 1

回答已采纳

2回答

火花流加入格林梅利/Postgres数据。方法

apache-spark、hadoop、pyspark、spark-streaming、greenplum

另外，我在GreenPlum中有一个表(在它自己的集群上)，其中包含可能被更新的用户数据。此表通过Kafka使用逻辑日志流复制填充。表大小为1亿用户。 Notes 当然，

浏览 2提问于2018-06-06得票数 0

1回答

将数据从ORACLE View传输到greenplum* DB表*

oracle、postgresql、oracle10g、greenplum

我有一个包含大量数据的Oracle视图，我想将这些数据迁移到Greenplum数据库的一个表中。有没有办法在Postgresql中编写任何查询来获取Oracle视图数据？如果不能在Postgresql中通过查询，请向我建议一些从Linux服务器访问Oracle视图方法，以便我可以从Oracle视图到Linux服务器创建数据文件，并通过gpfdist将该文件加载到Greenplum表。注: Oracl

浏览 2提问于2013-08-01得票数 0

1回答

greenplum中的增量加载

etl、greenplum

我在greenplum中有外部和内部表。外部表在hdfs中指向csv文件。Hdfs中的csv文件每小时加载一张表的完整数据。在greenplum的内部表中以增量方式加载数据的最佳方式是什么。

浏览 14提问于2017-07-27得票数 0

4回答

将数据从DB2数据库传输到greenplum数据库

python、postgresql、db2、datamart、greenplum

我的公司已经决定使用Greenplum实现一个datamart，我的任务是弄清楚如何继续下去。要从现有DB2数据库传输到Greenplum数据库的数据量大概为2 TB。我想知道: 1) Greenplum DB和vanilla PostgresSQL是一样的吗？(我在Postgres AS 8.3上工作过) 2)有没有(免费的)工具可以用来完成这项任务(提取和导入) 3)我对Python有一些了解。

浏览 1提问于2011-05-24得票数 0

2回答

将PostgreSQL数据复制到基图斯/格林梅利？

postgresql、replication、data-warehouse、greenplum、citus

我需要在数据仓库中集成来自3个不同PostgreSQL数据库(OLTP应用程序后端)的数据。对于数据仓库本身，我考虑使用Citus或Greenplum。有一项要求，即来自应用程序的数据必须与数据仓库尽可能接近实时地同步(延迟3-5分钟以上的所有内容都是不可接受的，实时复制将是最好的)。Citus是Postgres的扩展，你能把它

浏览 0提问于2021-02-04得票数 0

2回答

使用MapReduce或Sqoop将数据加载到Greenplum* DB中*

sqoop、greenplum

我想尝试使用mapreduce或sqoop将数据加载到Greenplum中。目前，从hdfs加载greenplum db的方法是，使用gphdfs创建一个扩展表，然后加载内部表。我想尝试使用sqoop或mapreduce将数据直接加载到greenplum中的解决方案。我需要一些关于我如何继续这件事的意见。你能帮帮我吗？

浏览 2提问于2015-04-28得票数 1

2回答

如何优化多个连接

sql、greenplum

如何优化查询，如on a.foo = b.fooand a.bazz = b.bazz是否有必要在这些列上添加索引，以便它们在连接时运行得更快？

浏览 1提问于2019-07-30得票数 0

3回答

使用Greenplum导入Sqoop

sqoop

我想使用sqoop将数据从greenplum导入配置单元。但是，我无法从greenplum的其他模式中存在的表中获取数据。

浏览 4提问于2014-02-11得票数 0

1回答

我应该什么时候使用格林梅数据库与HAWQ？

greenplum、hawq

我们有零售业数据的用例。我们正在从事EDW的生产。 gpdb层将如何影响我们现有的数据管道。这里的数据管道是外部系统--> talend -->hadoop-hawq-->tableau。

浏览 2提问于2016-05-17得票数 3

回答已采纳

1回答

Greenplum数据库

database、parallel-processing、enterprise、greenplum、data-lake

Greenplum (GPDB)社区版与企业版之间的主要区别是什么？与Greenplum数据库的社区版相比，我想了解更多关于企业版可用功能的详细信息。

浏览 12提问于2021-09-16得票数 0

2回答

在连接到Greenplum时，使用Spark读取数据时使用的jar & driver类是什么？

apache-spark、greenplum

我试图连接到Greenplum数据库，使用Spark读取表中的数据，并将其保存为HDFS上的文件。但我面对的障碍与司机或连接器，我正在使用。，如下：Class.forName("io.pivotal.greenplum.spark.GreenplumRelationProvider").newInstance()colSeq是一个集

浏览 2提问于2019-01-07得票数 1

3回答

使用gpload更新greenplum数据库中的表

sql、database、shell、greenplum

我在greenplum中有一个本地表XYZ。我正在使用来自其他5个表的数据填充该表(表XYZ只有很少的列，来自5个不同表的数据，由一些连接操作填充)。1>我需要我的表XYZ有最新的数据。也就是说，如果5个表中有任何新条目(其中填

浏览 0提问于2015-07-18得票数 0

2回答

Greenplum Spark Connector org.postgresql.util.PSQLException:错误:将数据写入gpfdist时出错

scala、azure、apache-spark、greenplum

我在我的scala代码中做了这样的事情： var options = Map[String, String]()options += ("user"USER IF EXISTS user1; CREATE USER user1 CREATEEXTTABLE (type='writable') PASSWORD 'p@ss0rd'; 然后使用该用户创建数据库/表，如下所示 dr

浏览 134提问于2020-03-25得票数 0

点击加载更多