腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9229)
视频
沙龙
6
回答
如
何在
Amazon
Redshift
上
执行计划
的
SQL
脚本
?
amazon-web-services
、
aws-lambda
、
amazon-redshift
、
etl
我在
Redshift
中每小时自动执行一系列~10个查询(可能会报告成功/失败)。 大多数查询都是对我
的
表进行聚合。我曾尝试将AWS Lambda与CloudWatch Events结合使用,但Lambda函数最多只能存活5分钟,我
的
查询可能需要25分钟。
浏览 51
提问于2017-03-03
得票数 5
回答已采纳
1
回答
如
何在
AWS Glue中运行查询
python
、
postgresql
、
amazon-redshift
、
aws-glue
我在AWS
Redshift
中有我需要
的
数据。它在一个名为Lz (Landingzone)
的
数据库中。这些数据被插入到一个名为Stage
的
数据库中(相同
的
红移)。我使用(select)查询将数据从原始状态(LZ)转换为所需
的
维度和事实。传统
上
,我会结合使用这些查询和insert来转换数据。结果将被合并到数据仓库中(同样:相同
的
红移) 我如
何在
Glue中做到这一点?我可以使用python执行作业中
的
查询吗?或者,我可以
浏览 28
提问于2019-06-02
得票数 1
回答已采纳
1
回答
如
何在
zsh中设置s3复制命令
amazon-web-services
、
amazon-s3
、
zsh
、
aws-cli
我创建了s3.zsh,如下所示#!但它返回了以下内容如何使用aws cli运行我
的
zsh?谢谢
浏览 3
提问于2021-07-06
得票数 0
2
回答
如何使用AWS
Redshift
执行Bash
脚本
sql
、
bash
、
amazon-web-services
、
aws-lambda
、
amazon-redshift
我是
Redshift
的
新手,也是AWS
的
新手。我有一个
Redshift
集群,我需要执行一个bash
脚本
,其中运行了一些
SQL
。有没有办法在
Redshift
集群
上
执行我
的
Bash
脚本
?我希望能够连接到
Redshift
集群,执行Bash
脚本
和集群中
的
所有
SQL
。 我能通过Lambda做这个吗?有一点细节会很感激
的
。
浏览 19
提问于2021-12-19
得票数 0
回答已采纳
2
回答
Amazon
redshift
中
的
while循环
amazon-web-services
、
while-loop
、
amazon-redshift
我正在使用
sql
server,我们确实有一个while循环,它是我在存储过程中创建
的
。我正在评估
redshift
,并在
redshift
amazon
中寻找等价物。以下是我正在尝试做
的
事情,我如
何在
amazon
redshift
中做到这一点: @MaxId SmallInt, Set
浏览 3
提问于2014-03-02
得票数 7
1
回答
电子邮件PySpark写入
Redshift
: java.
sql
.SQLException:[
Amazon
](500310)无效操作:会话为只读
apache-spark
、
pyspark
、
amazon-redshift
、
amazon-emr
、
spark-redshift
在EMR集群
上
使用PySpark向
Redshift
写入数据时,我遇到了一个错误。") \我得到
的
错误是:: org.apache.spark.SparkExceptionstage 0.0 failed 4 times, most recent failure: Lost task 0.3 in stage 0.0 (TID 6, , executor 1):
浏览 1
提问于2021-05-26
得票数 0
5
回答
“数据加载”或"ETL“
的
工具--从
SQL
Server到
Amazon
Redshift
sql
、
sql-server
、
amazon-web-services
、
etl
我正在尝试找出合适但简单
的
工具,我可以将自己托管在亚马逊EC2中,它将允许我从
SQL
Server2005中提取数据并推送到
Amazon
Redshift
。基本
上
,我在
SQL
Server中有一个视图,我在该视图上执行SELECT *操作,我只需要将所有这些数据放入
Redshift
。最大
的
担忧是有很多数据,这需要是可配置
的
,这样我就可以对其进行排队,作为夜间/连续作业运行,等等。 有什么建议吗?
浏览 1
提问于2014-05-21
得票数 2
1
回答
如何以编程方式在
RedShift
sql
脚本
文件
上
运行
c#
、
sql
、
.net
、
amazon-redshift
有没有办法使用Java或C#在
Amazon
Redshift
上
运行
SQL
脚本
文件(例如,位于S3
上
)?我可以使用AWS SDK和Npgsql for .NET执行独立命令,但我找不到运行独立文件
的
方法。
浏览 0
提问于2014-11-28
得票数 2
2
回答
如何将红移表数据卸载到excel格式
的
s3存储桶中
amazon-web-services
、
amazon-redshift
我有表存储在s3中,我想和我
的
同事分享excel格式
的
数据。我知道如何分享在csv格式,但不是excel格式。请帮帮忙。
浏览 29
提问于2021-06-03
得票数 1
1
回答
在Azure数据库
上
设置PostgreSQL驱动程序
python
、
postgresql
、
amazon-redshift
、
databricks
、
azure-databricks
如何修改以下代码以安装
SQL
驱动程序而不是MS PostgreSQL?我
的
目标是使用pyodbc从Azure Databricks连接到
Redshift
数据库。我以为默认情况下数据库运行时中已经安装了ODBC JDBC驱动程序,但是当我运行pyodbc.drivers()时,我得到
的
结果是"'ODBC driver 17 for
SQL
Server'“,所以我猜没有如果更简单,我们可以使用
Amazon
推荐
的
用于
Redshift</
浏览 0
提问于2021-09-04
得票数 1
3
回答
RDS与
Redshift
的
区别
amazon-web-services
、
amazon-redshift
、
amazon-rds
谁能列出
Amazon
Redshift
和RDS之间
的
主要区别?我知道两者都是关系数据库,但为什么选择一个而不是另一个呢?
浏览 2
提问于2016-04-19
得票数 5
1
回答
在
Redshift
中,有没有办法在表之间复制或克隆授权?
sql
、
amazon-redshift
、
grant
由于
Redshift
的
仅附加特性,我们经常需要合并表格以删除重复记录并显示记录
的
最新版本。为了准备这个过程,重命名了基表,并制作了它
的
副本。将执行一个
脚本
来扫描插入表,并将最新
的
唯一记录移动到新
的
基表中。但是,如果该表在此过程开始之前已经运行了一段时间,则在创建克隆时可能不会复制该表
上
的
某些授权。我们通常没有原始表DDL,尽管我们能够通过https://github.com/awslabs/<e
浏览 5
提问于2019-04-30
得票数 4
1
回答
AWS
Amazon
红移驱动程序错误,在子句in中包含列表
java
、
spring
、
amazon-redshift
、
driver
我使用带有
Redshift
的
spring类,当参数类型为List/Set且没有元素或只有一个元素( weir!)时,我有一个bug/崩溃。_This是我
的
艺术品 <groupId>com.
amazon
.
redshift
</groupId> <versio
浏览 5
提问于2020-06-04
得票数 1
2
回答
转置表格,然后将其导出为CSV文件
sql
、
postgresql
、
csv
、
amazon-redshift
我有一个包含3列
的
SQL
表:我想在亚马逊红移(运行CSV 8.0.2)中编写一个
脚本
,将上面的表导出为转置
的
PostgreSQL文件。通过转置,我
的
意思是我想为CSV文件中
的
每个cobrand ( cobrand_id列中有4个不同
的
值)创建一个新列。为了说明我想要什么,我添加了一张图片(这些值只是说明性
的
):当我尝试
的
时候: COPY temp_08.jwn_calc TO 'P:/<e
浏览 1
提问于2016-11-13
得票数 1
2
回答
如何检查
Redshift
维护窗口
amazon-redshift
* Query Processing Error AM5:07:01[
SQL
State=HY000, DB Errorcode=500051] * Connection Error AM5:07:27.79[
Amazon
](500150) Error setting/closing connection: Connection refused: conne
浏览 5
提问于2021-08-08
得票数 0
2
回答
AWS数据迁移服务可以用来集成非AWS
SQL
服务器和
Redshift
吗?
sql-server
、
replication
、
migration
、
aws
、
redshift
我有一个
SQL
Server 2012托管在一个独立
的
机器
上
。我想将它迁移到我
的
AWS (已经存在
的
数据仓库)。我也对其他有效
的
移徙方法持开放态度。目前,我正在执行以下步骤上传到AWS-S3。我希望这些数据出现在我
的
数据仓库中,即。
浏览 0
提问于2018-02-14
得票数 0
5
回答
如何使用SQLAlchemy连接到亚马逊红移中
的
集群?
python
、
postgresql
、
amazon-web-services
、
sqlalchemy
、
amazon-redshift
在
Amazon
的
中,可以使用与PostgreSQL兼容
的
SQL
工具连接到
Amazon
集群。from sqlalchemy import create_engine engine = create_engine(
浏览 3
提问于2016-01-26
得票数 11
回答已采纳
1
回答
是否可以使用python包使用大容量复制命令加载
redshift
。我看不出有什么办法
boto
、
amazon-redshift
是否可以使用python包使用大容量复制命令加载
redshift
。我看不出有什么办法做到这一点。似乎需要一个JDBC客户端。
浏览 1
提问于2014-11-26
得票数 0
1
回答
AWS弹性MapReduce和AWS红移有什么区别?
hadoop
、
amazon-web-services
、
amazon-ec2
它们
的
不同用例是什么? 支持与多种应用程序
的
客户端连接,包括商业智能(BI)、报告、数据和分析工具。(
Amazon
)是一个托管集群平台,它简化了在AWS
上
运行大数据框架(
如
Apache和Apache )来处理和分析大量数据
的
过程。
浏览 1
提问于2016-06-04
得票数 15
回答已采纳
1
回答
亚马逊红移优化器(?)和分布方式
amazon-web-services
、
amazon-redshift
我正在使用Sybex官方学习指南学习,在第173页有几个短语: 2)如果1)是真的,并且执行完全不同
的
新查询:计算节点中
的
旧数据会发生什么变化?( 3)你能更好地解释我
的
3种发行风格(偶数,键,全部),特别是关键风格。1)领导节点是否有记录?
浏览 2
提问于2017-11-19
得票数 0
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Apache DolphinScheduler 正式发布3.0.0 版本
Navicat Premium-智能数据库设计器
数据库开发工具 Navicat Premium v 简体中文版
基于所有SQL引擎,200倍速度,分析查询加速神器出世?
云技术的发展会让数据仓库呈现哪些新趋势?
热门
标签
更多标签
活动推荐
运营活动
广告
关闭
领券