腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(8081)
视频
沙龙
1
回答
复制
命令
中
的
红
移
相
关子
查询
amazon-redshift
我试图在copy
命令
中
从表中进行
查询
,但是,我不断地收到错误。以下是示例SQL语句。
浏览 7
提问于2021-08-09
得票数 0
回答已采纳
2
回答
在RedShift中进行反加入
的
最佳方法
sql
、
amazon-redshift
反连接是在一个表
中
获取与另一个表不匹配
的
元组
的
一种方法。有许多方法可以实现反连接: 在Redshift
中
执行反连接
的
最佳方法是哪一种?在这种情况下,关联子
查询
不是最优
的
,
红
移
的
查询
引擎也不去关联该
查询
。
浏览 2
提问于2016-03-07
得票数 2
1
回答
本地模拟Redshift和S3
的
首选方法
mocking
、
airflow
、
localstack
问题 是否可以使用QA
红
移
,然后用LocalStack将这些文件
复制
到本地模拟
的
PosgreSQL,最后再使用模拟
的
PosgreSQL进行第二次
红
移
?这种方法会有更多
的
利大于弊吗? Note:我不想用LocalStack在本地嘲笑Redshift,
浏览 9
提问于2022-03-16
得票数 1
1
回答
AWS数据湖
excel
、
amazon-web-services
、
amazon-s3
、
amazon-athena
、
data-lake
还是允许胶水在您
的
数据湖
中
爬行s3桶以使用这些数据格式? 我已经浏览过"“文档,我不得不绞尽脑汁地想要把数据输入湖里。我有一个数据提供程序,它以excel和access文件
的
形式存储在他们
的
系统
中
。基于流程流,他们会将数据上载到提交s3桶
中
,这将引发一系列操作,但没有将数据转换为与其他工具一起工作
的
格式。使用这些文件是否需要对在桶中提交
的
数据使用胶水,还是有其他方法使这些数据可用于其他工具,如雅典娜和
红
移
光
浏览 4
提问于2017-09-21
得票数 2
回答已采纳
1
回答
红
移
性能: SQL
查询
与表规范化
amazon-web-services
、
amazon-redshift
、
query-performance
、
database-normalization
、
amazon-kinesis
我正在通过监听来自不同来源
的
事件来构建
红
移数据库,并将这些数据注入
红
移
集群。在从
红
移
中
获得所需
的
信息之后,我将把这些信息与我
的
事件通知数据结合起来,并发出一个请求。Kinesis将完成它
的
工作,并发出所需
的
复制
浏览 2
提问于2017-06-18
得票数 1
回答已采纳
1
回答
将csv数据加载到Redshift
中
amazon-web-services
、
amazon-kinesis
、
amazon-kinesis-firehose
、
amazon-kinesis-kpl
、
amazon-kinesis-agent
我正在使用Kinesis消防软管处理数据为
红
移
,我正在尝试Json和Csv格式。从's3://foldername/‘凭据’products_json _iam_role=arn:aws::/‘json 'auto';
中
复制
aws消防软管
浏览 6
提问于2017-02-28
得票数 0
回答已采纳
1
回答
如何编写AWS Glue脚本将新数据插入
红
移
表
amazon-redshift
、
sql-insert
、
aws-glue
我是AWS Glue
的
新手,我希望创建一个使用我编写
的
SQL脚本( INSERT INTO语句)
的
作业,并填充我在Redshift
中
拥有的空表。这个是可能
的
吗?如果是的话,语法是什么?将数据从Redshift
中
的
一个表
复制
到另一个表。 这是AWS提出
的
脚本。我选择了"Change“选项,因为我想创建一个新
的
目标数据集。patients_info", redshift_tmp_dir = args[
浏览 9
提问于2020-06-26
得票数 0
1
回答
使用
复制
命令
时
的
符号
amazon-web-services
、
amazon-s3
、
aws-lambda
、
amazon-redshift
我正在尝试使用
复制
命令
将csv文件加载到
红
移
表
中
。 varchar列
中
的
特殊符号(如井号to )将转换为问号"?“(这是
红
移
的
默认设置)。如何
复制
特殊
的
符号呢?以下是我
的
aws
复制
命令
COPY public.sales FROM 's3://mybucket/salesfile
浏览 5
提问于2019-04-25
得票数 1
1
回答
用Python脚本加载
红
移数据
python-3.x
、
pandas
、
pyspark
、
amazon-redshift
我必须将数以百万计
的
记录加载到redshift DB
中
(这是必须
的
),这样做
的
最有效/最快
的
方法是什么?现在,我正在创建一个字典,在其中存储行块,这些行被抛到字符串
中
,这样我就可以将它们放在
查询
字符串
中
,然后使用Pandas这样
的
方法: c.execute(
浏览 0
提问于2020-04-22
得票数 0
回答已采纳
2
回答
亚马逊网络服务数据管道访问S3
amazon-web-services
我正在使用AWS Data Pipeline将文件从S3
复制
到AWS Redshift表
中
。S3上
的
文件夹结构如下:s3://test/example=01s3://test/example=03我希望能够
复制
'example=##‘文件夹<
浏览 2
提问于2016-03-03
得票数 0
1
回答
卸载
命令
是否删除或删除
红
移
中
的
数据?
amazon-web-services
、
amazon-s3
、
amazon-redshift
我希望将表数据从
红
移
复制
到S3,但将原始数据保存在
红
移
中
。我知道有卸载
命令
。但我不确定它是否删除/删除原始表
中
的
数据。有人有解决办法吗?
浏览 1
提问于2015-02-10
得票数 2
回答已采纳
2
回答
红
移
复制
时,将时间格式化为'YYYY-MM-DD HH:MI:SS‘
的
纪元
amazon-web-services
、
amazon-redshift
在使用copy
命令
执行从s3到
红
移
的
红
移
复制
时,是否可以将纪元格式化为时间格式'YYYY-MM-DD HH:MI:SS‘
浏览 0
提问于2015-02-13
得票数 6
3
回答
S3到
红
移
复制
命令
python
、
amazon-s3
、
amazon-redshift
、
parquet
我正在尝试使用copy
命令
将一些数据从S3存储桶
复制
到
红
移
表
中
。该文件
的
格式为PARQUET。当我运行执行
复制
命令
查询
时,我得到InternalError_:频谱扫描错误。如果对此有解决方案,请帮助我。我在python中使用boto3。
浏览 3
提问于2020-03-30
得票数 5
回答已采纳
2
回答
是“插入选择”,不受
红
移
中
的
竞赛条件影响。
database
、
concurrency
、
data-warehouse
、
amazon-redshift
我们有一个数据仓库系统,需要将s3上以csv格式显示
的
数据加载到
红
移
表
中
。唯一
的
限制是只有唯一
的
记录被插入
红
移
。创建一个临时表。将S3文件
复制
到TEMOPRARY表
中
。开始交易 插入到{主
红
移
表} select从列上
的
{连接在暂存表和主
红
移
表之间,该表应该是唯一
的
浏览 2
提问于2016-05-09
得票数 0
1
回答
如何忽略
红
移
复制
命令
中
的
错误
amazon-web-services
、
amazon-redshift
我有拼板文件,需要加载到
红
移
使用
复制
命令
。由于频谱扫描错误,
命令
失败。因此,如果有任何导致错误
的
情况,我希望忽略该文件。 是否有任何方法可以忽略记录/最大错误选项,在
红
移
复制
命令
,为拼板文件加载?targettablename> from '<s3 path>' iam_role 'arn:aws:iam::1232432' format as pa
浏览 12
提问于2022-04-10
得票数 2
1
回答
当使用copy
命令
从s3
复制
到
红
移时未插入任何内容
python
、
amazon-web-services
、
amazon-s3
我在s3
中
有大数据,必须移动到
红
移
中
,并在
红
移
中有一个表。由于我使用
的
是python,所以我编写了python脚本,并使用psycopg2连接
红
移
。我在aws网站上查看了仪表板,发现redshift收到了一个
查询
,它加载了一些东西,但它没有插入任何东西,这个过程消耗
的
时间太长了,比如超过3分钟。没有错误日志,所以我找不到原因。这有什么可能
的
原因吗? 编辑添加了我使用
的</e
浏览 0
提问于2017-05-17
得票数 0
1
回答
在作为保留关键字
的
Redshift COPY
命令
中使用列名
amazon-redshift
我有一个
红
移
表,其中列名是‘开始’和‘结束’。它们是
红
移
关键字。我想在Redshift
复制
命令
中
显式地使用它们。是否有解决办法,而不是重命名表
中
的
列名。那将是我最后
的
选择。我试图将它们用单引号/双引号括起来,但看起来COPY
命令
只接受逗号分隔
的
列名。
浏览 1
提问于2019-07-03
得票数 2
2
回答
将
红
移
表
的
内容作为JSON
复制
到S3?
json
、
amazon-s3
、
amazon-redshift
使用标准
的
Redshift COPY
命令
可以直接将S3上
的
JSON数据
复制
到Redshift表
中
。然而,我也在寻找相反
的
操作:将现有
红
移
表
中
包含
的
数据
复制
到存储在S3
中
的
COPY
中
,以便后续
的
Redshift JSON
命令
可以完全按照最初
的
方式重新创建
红
移
表
浏览 2
提问于2017-08-25
得票数 0
1
回答
通过S3
复制
将数据加载到
红
移
中
,多线程
java
、
multithreading
、
amazon-s3
、
amazon-redshift
我正在使用Redshift做一些POC工作,使用来自S3程序
的
copy
命令
通过json文件加载数据。这个POC正在测试一个最初
的
数据迁移,我们要做
的
是种子
红
移
,而不是日常使用。我
的
类
的
单线程版本大约在20秒内(通过
复制
命令
)从我
的
一个s3子文件夹加载文件。但是,当我引入第二个线程(每个线程从BoneCP连接池获得一个redshift db连接)时,除了第一个
复制
命令</em
浏览 0
提问于2015-09-01
得票数 1
回答已采纳
1
回答
如何有效地将数据从Postgres传输到Amazon?
python
、
postgresql
、
amazon-web-services
、
amazon-redshift
在我
的
机器上,我
的
本地Postgres数据库中有这么多数据。我需要对这个本地数据库
中
的
数据进行反分类,并获得一个特定格式
的
查询
集,该
查询
集可以使用Python直接加载到
红
移
表
中
。我确实有一些
查询
,可以在本地数据库上运行,并获得需要直接加载到
红
移
的
特定格式
的
查询
集。 但是有这么多
的
数据,我需要从
浏览 2
提问于2019-10-09
得票数 2
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
使用 Vi/Vim 编辑器:基础篇
Linux下文本编辑神器:Vim 最全图解
如何在MySQL Workbench中使用命令行工具和控制台功能?命令工具
循序渐进学习如何在 MariaDB 中配置主从复制
《MySQL系列》之MySQL临时表和复制表
热门
标签
更多标签
云服务器
ICP备案
实时音视频
对象存储
云直播
活动推荐
运营活动
广告
关闭
领券