我正在寻找一个最好的方法来复制许多表格从亚马逊PostgreSQL到红移数据库，如下要求： -We需要将大约90个表从7个PostgreSQL数据库复制到1个红移数据库 需要每30分钟刷新一次-Full表的-Most很小，只有一些大的表(大约10-150M条记录) 我正在考虑胶水，但我们在AWS上可能有更好的方法？
浏览 36提问于2021-09-17得票数 0
我想知道社区对“用python2.7.x将数据从PostgreSQL复制到RedShift的最佳方法”的看法。我不能使用Amazon，RedShift是普通的postgresql数据库，但只支持来自S3的副本(我不能使用)
浏览 0提问于2015-05-06得票数 1
2回答
我试着去找，但是找不到无论如何，我想将数据从Redshift传输到PostgreSQL数据库，如果它具有类似的功能，您可以使用任何第三方数据库工具。有谁能提出更好的建议吗？
浏览 0提问于2019-06-10得票数 2
回答已采纳
我们有一个很大的MySQL销售表，我们想要复制到Redshift，使用亚马逊网络服务数据库迁移服务(DMS)流式传输数据。此表仅用于插入。一旦添加了销售，它就不会被删除或修改。我们希望在TTL之后定期修剪销售(他们将在Redshift中)，以保持表格较小。然而，删除记录将被复制到Redshift。
DMS可以丢弃删除或以其他方式阻止记录从Redshift目标中删除吗？
浏览 2提问于2017-05-04得票数 1
为了分析的目的，我们也需要相同的数据在Redshift中。因此，每15分钟我们需要同步Dynamodb表到Redshift表。企业只想在顶级红移集群上进行分析。为了在15分钟内从DynamoDB复制数据到红移，使用红移复制命令，我需要大约10000的读取容量单元。
为此，每月的费用约为2400美元。因此，我们与Amazon支持部门进行了核对:他们清楚地提到，对于实时或近实时注入，Redshift并不是一个好的选择。提出的</e
浏览 3提问于2019-09-22得票数 1
回答已采纳
1回答
目前，我已经使用亚马逊网络服务数据管道将数据从亚马逊S3复制到亚马逊Redshift，仅用于当前日期和时间。我想每隔30分钟将数据从S3复制到Redshift。并且最后处理的S3文件名也被存储到另一个红移表中。
有人能回答这个问题吗？
浏览 0提问于2013-11-14得票数 4
4回答
我目前正在努力查询存储在分区表中的数据块(每个日期的分区)date, product_id, orders2019-11-01, 2, 200现在，例如，如果我想要查询产品id 1和2在2周内的总订单，并按日期分组(在每个日期的图形中显示)，数据库必须转到2周的分区并获取它们的数据。当产品数量很多或所需的时间框架很长时，该过程可能会花费很长时间。
我读到过AWS Redshift<
浏览 8提问于2019-11-21得票数 4
我有一个平台，其中大量数据(每天数百万条记录)将存储在亚马逊Redshift中，但这些数据也将由cronjob定期处理，然后在运行我的Rails应用程序的PostgreSQL数据库中创建聚合统计数据，而旧数据将从Redshift中清除。本质上，这意味着对于最近事件(最近一两天)的统计数据，我的Rails模型将需要从Redshift中拉出，否则，它将需要从PostgreSQL中拉出。
浏览 3提问于2017-03-18得票数 0
是否可以使用Amazon Redshift作为Excel数据透视表的数据源？在谷歌上搜索这个问题并没有得到任何明显的答案。谢谢。
浏览 3提问于2013-02-26得票数 3
2回答
它可以很好地直接从存储桶中加载，但是当我使用一个访问点ARN作为存储桶时，我得到了错误。我猜它根本不受支持，但希望我能做点什么。
浏览 16提问于2021-05-20得票数 0
回答已采纳
3回答
使用动态将S3加载到红移
、、、、
我收到我的源文件在S3，我需要加载这些数据的红移。要求: Webstreams -------------- > S3 ------> Redshift我想知道我是否可以使用Kinesis从S3加载到红移。
浏览 8提问于2017-05-22得票数 0
我有在Postgres上运行良好的Java程序，但是在迁移到Redshift时，我希望这个Postgres程序在Redshift上运行。在Postgres中，我使用了以下类，并试图在Redshift中使用相同的类。import org.postgresql.copy.CopyIn;import org.postgresql.core.BaseConnection.S41N
浏览 9提问于2015-07-24得票数 2
我们有一个Redshift集群，需要一个来自RDS / postgres数据库的表。我不太确定导出数据并输入数据的最佳方法，确切的步骤应该是什么。在拼凑各种博客和文章时，大家的共识似乎是使用pg_dump将表复制到csv文件中，然后将其复制到S3桶中，然后使用Redshift COPY命令将其放入一个新表--这是我的高级理解，但不确定命令行开关应该是什么如果是这样的话，我
浏览 2提问于2020-10-30得票数 1
回答已采纳
2回答
将数据从Amazon Redshift复制到MySQL/PSQL数据库的最佳方法是什么？我所知道的唯一解决方案是将数据从Redshift复制到我的机器上，然后将其移动到MySQL/PSQL，但当然，这是I/O密集型的，并且不可伸缩。
有没有人能推荐一些更好的(可能是通过S3的)？
浏览 1提问于2016-01-15得票数 3
1回答
在使用AWS Redshift时，我注意到通过JDBC驱动程序从带有标识列的表中获取最后插入的id不能通过以下任何一种方法完成：或
以上方法不可用，因为Redshift (截至2013年10/17)是基于PostgreSQL版本8.0.2构建的。请参阅以下链接中的</em
浏览 4提问于2013-10-17得票数 10
1回答
我在区域-1的集群中有表，我想在其他区域(Regi-2)的另一个集群中复制其中的一些表。
因为对我来说做工作有点费钱，所以我想有一个替代的解决方案。
浏览 2提问于2016-11-21得票数 0
回答已采纳
我有一个本地Hadoop集群，想要将数据加载到Amazon Redshift中。考虑到成本，Informatica/Talend不是一个选项，所以我们可以利用Sqoop将表从Hive直接导出到Redshift中吗？Sqoop连接到Redshift吗？
浏览 3提问于2016-09-23得票数 3
我已经通过s3使用unload/copy命令以交互方式在Amazon Redshift集群之间迁移数据。下一步是自动化过程，我正在寻找最好的方法来做到这一点。
浏览 0提问于2014-03-28得票数 1
4回答
我们在亚马逊RedShift中对巨大的数据集进行一些聚合，在MySQL中有一些相对较少的数据。对于RedShift中的某些联接，我们需要MySQL中的数据。将MySql数据同步到RedShift的最佳方法是什么？红移中有像甲骨文中的遥视那样的东西吗？还是应该以编程方式查询MySql并在RedShift中插入/更新？
浏览 11提问于2013-10-16得票数 6
回答已采纳
2回答
我在redshift中有一个my表，其中包含一些连接的id。Product_id , options_id5, 5;9;7我想像这样拆分我的每个表： 5, 9 52, 4 52, 9
在redshift的文档中，我发现了一个类似的函数'sp
浏览 0提问于2016-10-25得票数 0
云服务器
ICP备案
腾讯会议
云直播
对象存储
腾讯云开发者
