腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
Snowflake
中
的
动态
,
传递
到
阶段
、
我有一个从s3存储桶中选择
的
查询,但我需要从每个季度中选择
的
值都会发生变化-下面用{}表示。雪花里有没有我可以写成最新季度
的
逻辑? Select $1:date '@lake.lake./s3key/{variable}/data.json.gzip' ); 我想要variable = 2021Q3,然后在下个季度2022Q1等 这个是可能
的
吗?或者我必须让python参与进来?
浏览 9
提问于2021-11-16
得票数 1
1
回答
通过JDBC与COPY_INTO + GET批量卸载雪花数据
、
我对从
Snowflake
连续批量卸载数据
到
本地存储感兴趣。使用JDBC直接发出SELECT查询,然后使用COPY_INTO复制
到
Snowflake
内部
阶段
,然后使用GET命令从内部
阶段
()下载,从
Snowflake
批量卸载有什么缺点吗?通过JDBC进行select查询似乎更直接,而不必使用中间内部
阶段
的
Snowflake
存储容量。
浏览 3
提问于2021-08-25
得票数 0
2
回答
Snowflake
阶段
的
动态
文件路径
我正在将数据从
Snowflake
表复制
到
S3外部stage: COPY INTO '@my_stage/my_folder/my_file.csv.gz' FROM ( COPY INTO我
的
问题:如何在
浏览 30
提问于2020-09-02
得票数 1
回答已采纳
1
回答
Snowflake
stage文件路径,包括今天
的
日期
、
、
我正在向操作
中
写入一个副本,以便写入
到
Snowflake
阶段
。
Snowflake
阶段
的
文件路径来自YAML编写
的
配置文件。如何使用YAML将今天
的
日期传入
Snowflake
stage
的
文件路径?我
的
查询开始如下: 复制
到
@{STAGE_NAME}/{ENVIRONMENT}/{VARIABLE_1}/{VARIABLE_2}_ 我希
浏览 14
提问于2021-08-05
得票数 0
1
回答
使用绑定变量在
Snowflake
中加载数据
我们正在使用Python接口为
Snowflake
构建
动态
数据加载语句。复制
到
标识符( %(table_name)s )(SRC,LOAD_TIME,ROW_HASH) FROM (SELECT t.$1,CURRENT_TIMESTAMP
浏览 0
提问于2021-02-26
得票数 1
2
回答
如何将数据从内部stage连续拷贝
到
雪花表?
我已经在
snowflake
中加载了内部/names stage
中
的
数据,现在想不断地将数据从内部stage复制
到
snowflake
表
中
。我读到通过雪管
的
连续加载只支持外部
阶段
,而不支持内部
阶段
。那么从内部stage连续加载数据
到
雪花表
的
方法是什么呢? 提前谢谢。Amrita
浏览 2
提问于2020-08-24
得票数 1
2
回答
使用Azure数据工厂不分
阶段
地将数据从Azure数据湖复制
到
SnowFlake
、
、
、
Azure Data将数据从2复制
到
SnowFlake
的
所有示例都使用一个存储帐户作为平台。如果没有配置这个
阶段
(如图所示),即使我
的
源是Azure数据湖
中
的
csv文件,我也会在dataset
中
得到此错误--“只有当源数据集为DelimitedText、Parquet、JSON以及AzureBlob存储或S3 S3链接服务时,才支持将数据直接复制
到
雪花片,对于其他数据集或链接服务,请启用暂存”。 同时,
SnowFlake<
浏览 5
提问于2021-07-27
得票数 0
回答已采纳
1
回答
数据库->雪花: SQL编译错误: Stage:'XYZ‘不能是管道定义
中
的
临时
阶段
、
、
、
、
我试图将数据库
中
的
流具体化
到
雪花表
中
:选项包含对雪花进行身份验证所需
的
所有细节我检查了预先
浏览 3
提问于2019-11-07
得票数 0
1
回答
雪花-在每次合并时自动创建哪种类型
的
stage表?
、
、
、
、
我想写一个火花DataFrame
到
一个雪花表。我为Spark使用了一个查询,并将通过MERGE into语句
传递
一个“”选项,如下所示: merge_query = "merge into target_table using stage_table,然后将其合并到目标表
中
。但我不太明白在这种情况下我应该使用哪种类型
的
阶段
。
Snowflake
表
阶段
上
的
没有指定在使用MERGE INTO时适合哪种类型。我需要一些东西,像是由雪花自动创建<em
浏览 3
提问于2020-08-10
得票数 1
2
回答
将DB级数据从内部部署
到
Snowflake
DB
我正在寻找将2 TB
的
数据从本地移动到
snowflake
的
最佳方法。数据是在每个大小约150 MB
的
压缩文件
中
,类似的文件将在运行
的
基础上生成。此外,我们希望使用公共互联网来建立从本地网络
到
云上
的
雪花数据库
的
连接。(没有可用
的
VPN或直接连接或使用第三方工具)我们如何最好地确保数据在从本地传输到云上
的
雪花数据库
的
过程
中
是安全
的
。在不使用S3或Az
浏览 85
提问于2021-02-04
得票数 0
2
回答
我在DEV (雪花)中有内部
阶段
数据,但想要将相同
的
数据移动到PROD,而不是再次从源加载(不想再次使用PUT )
table_name/000000_0.csv.part.00.gz (internal stage file uploaded using PUT into DEV database)我如何在
snowflake
中
实现这一点?
浏览 0
提问于2020-04-15
得票数 1
1
回答
使用Python代码通过AWS Lambda函数调用
Snowflake
过程
是否可以通过AWS Lambda函数调用
Snowflake
过程(它有一个将数据从Stage复制
到
snowflake
主表
的
Merge语句)?我希望在我们将文件推送到S3
阶段
时立即触发该函数。我们有一个雪堆选项来复制数据,但我不希望像这样
的
另一个表将数据从S3存储桶复制
到
雪花
阶段
,然后将其合并到主表,而是我有一个merge语句,它直接将来自S3存储桶
中
的
文件
的
数据合并到雪花主表
中
。
浏览 16
提问于2020-09-14
得票数 0
1
回答
Azure ADF V2:将数组类型
的
管道参数
传递
给触发
Snowflake
过程
的
Azure函数
、
我们目前从Azure Sql
到
Snowflake
的
迁移项目是使用ADF V2作为编排工具。我们需要通过ADF管道调用雪花过程,该管道是参数化
的
(例如:管道有一个数组作为参数,其中包含要
传递
给管道内ADF活动
的
表和语句
的
列表)。由于ADF存储过程活动不支持
Snowflake
过程调用,我们有一个变通方法来使用Azure函数调用
Snowflake
sql语句,我们能够创建一个并在ADF管道中使用它来调用过程。这个过程必须通过接受管道参数<e
浏览 1
提问于2021-07-12
得票数 1
3
回答
如何将数据从AWS S3加载到
Snowflake
Internal Stage
、
我们正在尝试从亚马逊网络服务S3 (外部
阶段
)获取数据,并将其加载到雪花内部
阶段
。
Snowflake
应该作为我们
的
数据湖,可以减少我们从AWS使用
的
存储量。有没有内置
的
功能可以从外部stage -->内部stage传输数据? 目标是将数据加载到内部
Snowflake
阶段
,然后从AWS
中
删除数据。我们希望
Snowflake
成为数据湖。
浏览 49
提问于2020-07-28
得票数 0
1
回答
甲骨文将
Snowflake
数据采购
、
我
的
工作是在雪花中创建数据湖,来源是Oracle DB。将数据从Oracle DB采购
到
Snowflake
的
最佳方式是什么?
浏览 3
提问于2021-09-20
得票数 0
1
回答
在使用stage +存储集成与直接存储集成进行数据加载/卸载时,
Snowflake
是否具有性能影响?
如果我有一个亚马逊网络服务S3存储集成和一个指向该
阶段
的
阶段
: storage_integration = my_storage_integration
浏览 1
提问于2020-03-27
得票数 0
2
回答
从
snowflake
java UDF读取外部
阶段
文件
、
、
我已经创建了一个java UDF来从我
的
外部工作台读取word文档。我使用imports子句导入了我所有的外部
阶段
文件,并在我
的
java UDF中使用了它们。它看起来不适合我。是否有其他方法可以从stage
中
动态
读取文件?
浏览 29
提问于2021-08-25
得票数 0
回答已采纳
1
回答
使用后在雪花中移除/丢弃
阶段
、
我已经在
snowflake
中
创建了一个内部临时
阶段
,并在使用了其中
的
数据之后。我想把舞台移走。我将stage创建为:当我这样做
的
时候database_name schema_name type
浏览 0
提问于2021-06-01
得票数 0
1
回答
使用"pd_writer“将数据写入雪花时出错--”不是所有在字符串格式化期间转换
的
参数“
、
、
在调用"pd_writer“方法时获取此错误: sf_data = self.salesForceAuth.query_all(self.queryColumns) try: cursor=<em
浏览 2
提问于2021-08-22
得票数 0
回答已采纳
1
回答
数据存储
的
积分-雪花
阶段
Snowflake
账户是否对存储在内部和外部
阶段
的
数据收费?是或否。 我认为这很棘手。我想是不。我
的
理解/意见是,
Snowflake
显然会向您收取内部
阶段
的
费用,但对于外部
阶段
,我不确定是
Snowflake
向您收取存储费用,还是云提供商(AWS/Azure/GCP)向您收取费用。根据定义,命名外部
阶段
是在模式
中
创建
的
数据库对象。此对象存储云存储中文件<
浏览 15
提问于2021-09-17
得票数 0
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
jQuery实例:jQuery Ajax中的data如何传递到php后端
C+中的值传递和引用传递
GO HTTP中context的传递
线程的消息传递功能正在测试中
高级文明的动态星图,同步的平行宇宙,地球生命的信息保存和传递
热门
标签
更多标签
云服务器
ICP备案
对象存储
云直播
腾讯会议
活动推荐
运营活动
广告
关闭
领券