转置表红移

文章/答案/技术大牛

发布

1回答

amazon-redshift

我想将列转置为行(不使用UNION)：----------------------------------- | 1

浏览 6提问于2017-03-16得票数 0

2回答

转置表格，然后将其导出为CSV文件

sql、postgresql、csv、amazon-redshift

我有一个包含3列的SQL表：我想在亚马逊红移(运行CSV 8.0.2)中编写一个脚本，将上面的表导出为转置的PostgreSQL文件。通过转置，我的意思是我想为CSV文件中的每个cobrand ( cobrand_id列中有4个不同的值)创建一个新列。

浏览 1提问于2016-11-13得票数 1

1回答

来自R DBI的Redshift中的用户定义函数

r、postgresql、amazon-redshift、r-dbi

我尝试定义这个开放源码函数来转置一个表： out_table varchar,我如何定义这个函数并通过R在我的红移表上使用它？谢谢!

浏览 10提问于2016-09-03得票数 1

2回答

如何通过JDBC将红移表数据导出到本地文件？

amazon-redshift

有没有办法通过JDBC将红移表数据作为转储文件导出到本地文件？谢谢

浏览 2提问于2016-04-08得票数 1

1回答

AWS数据湖

excel、amazon-web-services、amazon-s3、amazon-athena、data-lake

使用这些文件是否需要对在桶中提交的数据使用胶水，还是有其他方法使这些数据可用于其他工具，如雅典娜和红移光谱？-Guido

浏览 4提问于2017-09-21得票数 2

回答已采纳

1回答

从AWS表到RedShift光谱外部表的日期字段转换

json、aws-glue、isodate、amazon-redshift-spectrum

我正在尝试将JSON数据集从S3转换为粘合表模式，并将其转换为用于数据分析的红移频谱。在创建外部表时，如何转换日期字段？在外部表中尝试了以下格式startDate:struct<date:varchar(40)> startDate:struct<date:timestamp>

浏览 5提问于2019-03-20得票数 7

1回答

根据数据类型将AWS Kinesis中的数据放入不同的存储桶中

amazon-web-services、amazon-s3、amazon-redshift、amazon-kinesis、amazon-kinesis-firehose

我已经按照this教程中描述的设置配置了从极光到红移的所有数据管道。我有一个完美的工作为一个表，例如销售。然而，现在我想扩展一些东西，这样我也可以从其他表中引入数据，比如Products和Categories，这样每种数据类型都会出现在Redshift中的一个单独的表中，即Redshift除了有一个Categories表之外，还应该有一个Sales表和一个Product表。Redshift只能从一个S3位置获取数据。同样，可以将Kin

浏览 7提问于2019-02-28得票数 0

1回答

如何检查AWS S3的红移复制命令性能？

amazon-s3、amazon-redshift、amazon-redshift-spectrum

我正在开发一个应用程序，在这个应用程序中，我将将数据加载到红移中。对于每一次这样的迭代，我都需要将数据加载到20表中。现在，我正在创建20 CSV文件，以便将数据加载到20表中，在每次迭代时，20创建的文件将被加载到20表中。在下一次迭代中，将创建新的20 CSV文件并将其转储到Redshift中。对于我所拥有的当前系统，每个CSV文件可能包含最多的1000行，应该转储到表</em

浏览 4提问于2019-11-10得票数 2

回答已采纳

1回答

将数据从s3导入Redshift时保留源文件名

amazon-web-services、amazon-s3、amazon-ec2、amazon-redshift

由于文件的数量很大，我需要在红移表中的一个列，它应该包含来自s3位置的源文件名。有没有办法解决这个问题？

浏览 37提问于2017-01-27得票数 2

回答已采纳

1回答

如何有效地将数据从Postgres传输到Amazon？

python、postgresql、amazon-web-services、amazon-redshift

我需要对这个本地数据库中的数据进行反分类，并获得一个特定格式的查询集，该查询集可以使用Python直接加载到红移表中。我确实有一些查询，可以在本地数据库上运行，并获得需要直接加载到红移的特定格式的查询集。我只是想知道是否有其他方法可以做到。类似于直

浏览 2提问于2019-10-09得票数 2

回答已采纳

2回答

是“插入选择”，不受红移中的竞赛条件影响。

database、concurrency、data-warehouse、amazon-redshift

我们有一个数据仓库系统，需要将s3上以csv格式显示的数据加载到红移表中。唯一的限制是只有唯一的记录被插入红移。创建一个临时表。将S3文件复制到TEMOPRARY表中。开始交易插入到{主红移表} select从列上的{连接在暂存表和主红移表之间，该表应该是唯一的

浏览 2提问于2016-05-09得票数 0

1回答

如何将雪花连接到红移桌子上？

amazon-web-services、amazon-redshift、snowflake-cloud-data-platform、aws-glue、snowflake-schema

我已被授予具有多个表的红移模式的读访问凭据。这些数据将保留在Redshift中，也没有迁移到雪花的计划。数据每周更新一次。我想要做的是使用这个凭据从雪花创建到这个数据的连接，这样我就可以从那里查询它。

浏览 1提问于2022-01-31得票数 0

2回答

如何使用boto3或psycopg2 python库在红移中插入数据

python、amazon-web-services、amazon-redshift、boto3、psycopg2

在python函数中，哪个库最好用于"boto3“和"Psycopg2”中的红移操作：如果我得到以下答复，我会同意：满足上述3项需求的任何一个库的

浏览 13提问于2022-02-26得票数 0

回答已采纳

1回答

红移/正则表达式(负前瞻性)不起作用

regex、amazon-redshift

当我在红移上使用负展望(类似于(?!abc))时，红移返回如下错误：select * from table_a where column_a ~ '^代码: 8002上下文: T_regexp_init查询: 1039510位置: funcs_expr.cpp:130 看起来红移不认识负面展望..。

浏览 4提问于2016-12-07得票数 9

回答已采纳

2回答

将蜂巢表迁移到红移

hive、amazon-redshift、data-migration

让我稍微解释一下这个场景:我在S3 (ORC，Parquet)上存储了数百个蜂窝表，所以只需要澄清一下HDFS。现在，我有兴趣将其中一些迁移到Redshift来运行一些性能测试。我正在考虑使用Hive本身创建临时CSV表，然后迁移到Redshift。我还在考虑使用Spark来移动这些数据。有过这种情况的人吗？

浏览 0提问于2018-03-14得票数 1

回答已采纳

1回答

错误:键入"pg_catalog.varchar_latin“不存在”

postgresql、amazon-web-services、amazon-redshift

当我试图创建一个表时，我得到了下面的错误。有人知道我怎么解决这个问题吗？错误："pg_catalog.varchar_latin“类型不存在 CREATE TABLE test (name VARCHAR(250) CHARACTER

浏览 0提问于2018-04-27得票数 0

回答已采纳

4回答

红移插入瓶颈

postgresql、amazon-web-services、pentaho、amazon-redshift、kettle

我正在尝试将一个巨大的表从postgres迁移到Redshift。表的大小约为5,697,213,832 通过观察，我发现插入Redshift是瓶颈。是否有任何方法加快插入红移在单机模式？比如使用JDBC参数？

浏览 4提问于2015-11-25得票数 1

回答已采纳

1回答

如何将嵌套的Avro字段作为单个字段复制到Redshift？

amazon-redshift、avro、jsonpath

我有以下记录的Avro模式，我想向Redshift发出一份副本： "name": "id",}, { "type": { "name": "MyDateTime", "namespace"

浏览 2提问于2018-09-25得票数 1

2回答

将数据从Google sheets写入Redshift

google-apps-script、google-sheets、amazon-redshift

我有400个谷歌工作表，每个有6个选项卡。它们是由不同的分析师维护的项目。有没有什么方法可以将这些工作表连接到Redshift，它不仅可以插入数据，还可以在任何人在工作表中添加任何行时保持更新Redshift。我可以使用应用程序脚本，但它是这个用例的可伸缩解决方案吗？

浏览 0提问于2018-07-16得票数 1

1回答

按日拉取数据

amazon-redshift、aws-glue

我的红移集群中有数据，最好的方法是每天从红移中提取数据，并在几个sql查询的基础上在红移中创建一个新的表YY。例如，我们在redshift中有一个表XX，我想从表XX中拉出前10行，然后在redshift中创建一个表创建表格YY作为从XX中选择前10 *

浏览 2提问于2019-01-02得票数 1

点击加载更多