腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
如何
合并
红
移
中
的
行
sql
、
amazon-redshift
我有一个
红
移
格式
的
表,其中有一个具有公共标识符
的
列,以及许多其他属性列。但是,公共标识符会显示在多行
中
,每个属性占一
行
。我想把它们
合并
。Attribute 1 | Attribute 2987 B A 这基本上是从我旋转一个表(使用case语句)开始
的
,但最终
的
输出需要按照公共id进行
合并
或分组(但没有聚合)。注在最终产
浏览 11
提问于2019-04-29
得票数 2
1
回答
从
红
移到
红
移
的
行
处理数据
database
、
amazon-web-services
、
amazon-redshift
我们正在处理
的
需求
中
,我们希望从一个
红
移
集群“逐行”获取增量数据,根据需求处理它,并将其插入另一个
红
移
集群
中
。我们要做
的
是“
行
”而不是“批处理操作”。为此,我们正在编写一个通用服务,它将从
红
移
->
红
移
执行行处理。因此,它就像
红
移
->服务->
红
移
。对于插入数据,我们将使用ins
浏览 2
提问于2018-02-06
得票数 0
1
回答
aws glue
中
的
catalog_connection参数是什么?
amazon-web-services
、
amazon-redshift
、
aws-glue
、
aws-glue-data-catalog
我希望每隔4小时定期运行一次etl作业,它将
合并
(
合并
)来自s3存储桶(拼图格式)
的
数据和来自
红
移
的
数据。找出唯一
的
,然后将其重新写入
红
移
,替换旧
的
红
移数据。为了将数据帧写入
红
移
,this glueContext.write_dynamic_frame.from_jdbc_conf(frame, catalog_connection, connection_opt
浏览 59
提问于2021-02-24
得票数 0
回答已采纳
2
回答
是“插入选择”,不受
红
移
中
的
竞赛条件影响。
database
、
concurrency
、
data-warehouse
、
amazon-redshift
我们有一个数据仓库系统,需要将s3上以csv格式显示
的
数据加载到
红
移
表
中
。唯一
的
限制是只有唯一
的
记录被插入
红
移
。创建一个临时表。将S3文件复制到TEMOPRARY表
中
。开始交易 插入到{主
红
移
表} select从列上
的
{连接在暂存表和主
红
移
表之间,该表应该是唯一
的
,以便记录是唯一<
浏览 2
提问于2016-05-09
得票数 0
1
回答
使用AWS处理.csv数据
的
最佳方法
amazon-web-services
、
amazon-ec2
、
amazon-redshift
、
amazon-emr
、
amazon-data-pipeline
因此,每天我都会上传(自动)很多.csv文件到我
的
s3桶
中
,下一步是将/merge/concat/etc加入到一个更最终
的
状态
中
,以便将它上传到redshift。为了做到这一点,你给我提供了哪些服务?我分析了不同
的
方法: s3 -> EC2 ->使用Python ->
红
移
处理数据(我不认为这真的很有效) s3 ->管道-> EMR ->管道->
红
移
(我对EMR有0
浏览 4
提问于2017-07-13
得票数 0
回答已采纳
1
回答
如何
在AWS Glue
中
运行查询
python
、
postgresql
、
amazon-redshift
、
aws-glue
我在AWS Redshift中有我需要
的
数据。它在一个名为Lz (Landingzone)
的
数据库
中
。这些数据被插入到一个名为Stage
的
数据库
中
(相同
的
红
移
)。我使用(select)查询将数据从原始状态(LZ)转换为所需
的
维度和事实。传统上,我会结合使用这些查询和insert来转换数据。结果将被
合并
到数据仓库
中
(同样:相同
的
红
移
) 我
如
浏览 28
提问于2019-06-02
得票数 1
回答已采纳
1
回答
按日拉取数据
amazon-redshift
、
aws-glue
我
的
红
移
集群中有数据,最好
的
方法是每天从
红
移
中提取数据,并在几个sql查询
的
基础上在
红
移
中
创建一个新
的
表YY。例如,我们在redshift中有一个表XX,我想从表XX
中
拉出前10
行
,然后在redshift
中
创建一个表 创建表格YY作为从XX中选择前10 *
浏览 2
提问于2019-01-02
得票数 1
1
回答
Cassandra数据库
中
数据分析
的
备选方案
cassandra
、
amazon-redshift
、
spark-cassandra-connector
、
amazon-kinesis-firehose
以下是我们到目前为止所确定
的
方法。缺点: 导致维修费用高
的
要求 2)将数据移至
红
<em
浏览 2
提问于2016-06-20
得票数 2
1
回答
如何
使用Redshift数据库进行转换和报告?
amazon-redshift
我
的
红
移数据库中有3个表,每隔几秒钟,数据就会来自S3
中
的
3个不同
的
csv文件。一个表有大约30亿条记录,另外两个表有大约1亿条记录。为了接近实时报告
的
目的,我必须将这个表
合并
到一个表
中
。我
如何
在
红
移
中
实现这一点?
浏览 2
提问于2016-08-23
得票数 0
4
回答
红
移
插入瓶颈
postgresql
、
amazon-web-services
、
pentaho
、
amazon-redshift
、
kettle
我正在尝试将一个巨大
的
表从postgres迁移到Redshift。表
的
大小约为5,697,213,832 是否有任何方法加快插入
红
移
在单机模式?比如使用JDBC参数?
浏览 4
提问于2015-11-25
得票数 1
回答已采纳
7
回答
Redshift JDBC驱动程序
的
Gradle/Maven依赖关系
maven
、
gradle
、
amazon-redshift
我下载了RedshiftJDBC41-1.1.17.1007.jar来使用com.amazon.redshift.jdbc41.Driver来完成我正在做
的
一些Redshift POC工作,并且一直在手动地将它添加到我
的
类路径
中
我现在想将它
合并
到我们
的
构建中,但是我似乎找不到一个依赖项名称
的
例子,它可以放在我
的
build.gradle文件
中
,或者在Maven回购中找到它。有小费吗?(注意,我只是在寻找
红
移
jdbc,而
浏览 0
提问于2015-09-17
得票数 12
回答已采纳
1
回答
AWS
红
移交叉帐户访问
amazon-web-services
、
amazon-redshift
、
amazon-redshift-spectrum
不同
的
团队拥有不同
的
数据集。我想要实现
的
目标是能够查询不同团队拥有的不同来源(AWS帐户)。账户A-
红
移
访问帐户A
的
红
移数据库。我知道
如何
做第1部分,
如何
查询跨帐户
红
浏览 6
提问于2020-02-20
得票数 2
1
回答
将ID相同
的
行
合并
为具有更多列
的
单行
sql
、
pivot
、
amazon-redshift
我希望能够将具有相同公共ID
的
行
组合到同一
行
中
,并根据需要添加cols。有没有办法在
红
移
中
轻松做到这一点?我在网上找到
的
答案大多是将
行
合并
成一列。
浏览 19
提问于2020-11-30
得票数 0
2
回答
Amazon Redshift to Mysql,使用Pentaho数据集成
mysql
、
linux
、
pentaho
、
amazon-redshift
我们使用
的
是亚马逊
红
移
,数据库是亚马逊云中
的
POSTGRESQL.Tha数据。我们需要使用Pentaho数据集成Software.Could将数据从亚马逊
红
移
加载到Mysql,请告诉我们
如何
通过Pentaho连接到
红
移
?
浏览 0
提问于2014-11-14
得票数 0
2
回答
如何
使用boto3或psycopg2 python库在
红
移
中
插入数据
python
、
amazon-web-services
、
amazon-redshift
、
boto3
、
psycopg2
在python函数
中
,哪个库最好用于"boto3“和"Psycopg2”
中
的
红
移
操作:如果我得到以下答复,我会同意: 满足上述3项需求
的
任何一个库
的
浏览 13
提问于2022-02-26
得票数 0
回答已采纳
8
回答
Server在amazon中等效
的
isNumeric()
amazon-redshift
我正在使用amazon作为数据仓库 1382测试测试版 左(field1,4)像'0-90-9‘ 这是行不通
的
,从下面的链接看,
红
移
可能
浏览 16
提问于2013-06-05
得票数 17
回答已采纳
2
回答
我正在使用Amazon,并希望使我
的
表数据不区分大小写?
database-recommendation
、
redshift
如何
更改以
红
移
大小写不敏感
的
方式存储
的
表数据? 例如:列
中
的
Bell、BELL、bell应在查询时返回所有
行
。
浏览 0
提问于2016-12-07
得票数 0
1
回答
如何
使用类型记录从现有集群创建
红
移
表?
typescript
、
amazon-redshift
、
cluster-computing
、
aws-cdk
、
amazon-vpc
我有一个ec2实例,试图从它连接到
红
移
集群。使用下面的代码,我可以创建一个新
的
红
移
集群,但我正在寻找
如何
连接到现有
红
移
集群
的
示例。
浏览 2
提问于2022-09-07
得票数 0
1
回答
在
红
移
中
存储时间序列数据
amazon-redshift
我正在考虑一种
红
移
模式来逐分钟地存储时间序列数据。在考虑其他面向列
的
数据库(如cassandra)
中
的
问题时,我打算将要跟踪
的
记录存储为
行
,而每列将是一段时间。这在
红
移
中
是不可能
的
,因为最大列数限制为1,600。什么才是正确
的
存储方式呢?
浏览 2
提问于2014-08-23
得票数 2
2
回答
如何
控制
红
移
中
数据量
的
增加?
amazon-web-services
、
amazon-redshift
、
data-warehouse
、
amazon-athena
我在AWS Redshift
中
维护了一个数据仓库。最近,数据量和速度都有所增加。一种选择是,以更高
的
成本,水平地继续扩展集群。我想知道是否有任何可用
的
归档选项,以便我可以像往常一样查询整个数据(可能会在查询时间上出现折中),但成本低或没有额外成本?一种选择是直接从S3
中
使用外部表和查询数据,但是用于实现这一目标的工具,比如雅典娜和Glue,也有自己
的
成本,这也是基于每次查询
的
。
浏览 2
提问于2018-06-19
得票数 0
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Pandas中如何删除空值所在的行
Excel–有合并单元格的多行标题,如何筛选第二行标题?
如何在Excel中为合并的单元格添加序号
如何同时冻结Excel表格中的首行和尾行?
如何将多张图片合并到一个 PDF 中?PDF图片合并的3大方法
热门
标签
更多标签
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
活动推荐
运营活动
广告
关闭
领券