1回答
我们构建了数据管道来不断地将数据从S3移动到RedShift。我知道数据是通过HTTP/SSL协议使用copy命令传输到redshift的。我的问题是，这个流量是在VPC内网还是通过internet？
如果我从S3存储桶传输到不同地区的另一个S3存储桶，会通过互联网吗？
浏览 15提问于2020-05-13得票数 0
1回答
我必须将数以百万计的记录加载到redshift DB中(这是必须的)，这样做的最有效/最快的方法是什么？现在，我正在创建一个字典，在其中存储行块，这些行被抛到字符串中，这样我就可以将它们放在查询字符串中，然后使用Pandas这样的方法： with conn.cursor() as c:
for chunk in df_chunks.keys()
浏览 0提问于2020-04-22得票数 0
回答已采纳
将数据从Redshift中的一个表复制到另一个表。
这是AWS提出的脚本。我选择了"Change“选项，因为我想创建一个新的目标数据集。
浏览 9提问于2020-06-26得票数 0
2回答
我们有一个数据仓库系统，需要将s3上以csv格式显示的数据加载到红移表中。唯一的限制是只有唯一的记录被插入红移。创建一个临时表。将S3文件复制到TEMOPRARY表中。开始交易结束交易
select子查询中使用的联接返回那些存在于暂存表中的记录
浏览 2提问于2016-05-09得票数 0
我正在使用AWS Data Pipeline将文件从S3复制到AWS Redshift表中。S3上的文件夹结构如下：s3://test/example=01s3://test/example=03
s3://test
浏览 2提问于2016-03-03得票数 0
1回答
问题
是否可以使用QA红移，然后用LocalStack将这些文件复制到本地模拟的PosgreSQL，最后再使用模拟的PosgreSQL进行第二次红移？Note：我不想用LocalStack在本地嘲笑Redshift，因为很明显
红移服务仅模拟<e
浏览 9提问于2022-03-16得票数 1
我们可以直接将一个表从一个红移集群复制到另一个红移集群吗？
我知道表复制可以使用s3作为临时存储(即从第一个集群卸载到s3，然后从s3复制到另一个集群)。
浏览 1提问于2015-05-05得票数 13
回答已采纳
我单击Configure，当我从Amazon集群属性输入连接信息时，将面临以下错误：以下是群集的当前网络安全设置。我唯一改变的是，我已经公开了它(值从“否”更改为“是”)。据我所见，所有入站和出站流量都是允许的。有什么我可能错过的吗？我是否也应该为这个端口向本地机器添加防火墙规则？VPC组的入站规则
VPC组的出站规则
浏览 2提问于2020-11-11得票数 1
回答已采纳
2回答
一种选择是直接从S3中使用外部表和查询数据，但是用于实现这一目标的工具，比如雅典娜和Glue，也有自己的成本，这也是基于每次查询的。
浏览 2提问于2018-06-19得票数 0
回答已采纳
在使用copy命令执行从s3到红移的红移复制时，是否可以将纪元格式化为时间格式'YYYY-MM-DD HH:MI:SS‘
浏览 0提问于2015-02-13得票数 6
1回答
我已经在一个私有子网中建立了一个红移群集。我可以成功地连接到红移群集，并通过DBeaver执行基本的SQL查询。我还需要从s3上传一些文件到redshift，因此我在私有子网中设置了一个s3网关，并更新了专用子网的路由表，以添加所需的路由，如下所示：0.0.0.0/0 nat-0a73ba7659e887232 active No
但是，
浏览 3提问于2020-01-01得票数 0
因为这是非结构化的想法，我应该放入dynamodb，但是对于分析，红移更好。我也可能不需要将所有键值持久化到红移，但这是可选的。我没有想过的几个选择：
将日志文件放入云监视日志中！但是如何消费呢？
浏览 6提问于2016-07-07得票数 1
回答已采纳
1回答
我希望将表数据从红移复制到S3，但将原始数据保存在红移中。我知道有卸载命令。但我不确定它是否删除/删除原始表中的数据。有人有解决办法吗？
浏览 1提问于2015-02-10得票数 2
回答已采纳
2回答
我试图将火花流数据直接插入到Amazon集群中，但无法找到正确的方法。
下面是我得到的代码，但它第一次插入S3，然后复制到Redshift：。
浏览 0提问于2018-01-29得票数 0
回答已采纳
1回答
我计划使用DMS将RDS连续迁移到Redshift。根据文档，它指出如果目标是红移，DMS在复制到红移之前使用S3存储桶临时存储数据。我找不到任何文档来确认这个S3存储桶是否是临时的(仅用于初始复制)，并在复制完成后被删除。()
对此有什么想法吗？
浏览 11提问于2019-10-22得票数 0
1回答
我在S3 folder中有文件，在那里我必须使用来自EMR的PiG scripts进行转换，然后加载回s3。我想知道如何从unix调用猪脚本？除了sqlworkbench之外，我如何执行红移脚本？我怎样才能按顺序运行它们？
浏览 0提问于2015-04-01得票数 0
回答已采纳
2回答
让我稍微解释一下这个场景:我在S3 (ORC，Parquet)上存储了数百个蜂窝表，所以只需要澄清一下HDFS。现在，我有兴趣将其中一些迁移到Redshift来运行一些性能测试。
浏览 0提问于2018-03-14得票数 1
回答已采纳
云服务器
ICP备案
云直播
对象存储
实时音视频
腾讯云开发者
