我们有几个本地数据库，到目前为止，我们的数据仓库也是本地的。现在，迁移到云和数据仓库将在Snowflake进行。但我们仍然拥有比云中更多的预设源系统，因此希望坚持使用我们的预置ETL解决方案。因此，我们遇到的问题是，使用Snowflake JDBC驱动程序的PDI表输出步骤对于批量加载到Snowflak
浏览 12提问于2020-02-26得票数 0
回答已采纳
我对从Snowflake连续批量卸载数据到本地存储感兴趣。使用JDBC直接发出SELECT查询，然后使用COPY_INTO复制到Snowflake内部阶段，然后使用GET命令从内部阶段()下载，从Snowflake批量卸载有什么缺点吗？通过JDBC进行select查询似乎更直接，而不必使用中间内部阶段的Snowflake存储容量
浏览 3提问于2021-08-25得票数 0
我需要通过从oracle数据库中获取数据来更新snowflake中的表。有没有办法从snowflake连接到oracle数据库？如果答案是否定的，我如何使用oracle中的数据更新snowflake中的表。
浏览 34提问于2020-04-10得票数 0
回答已采纳
我在谷歌BigQuery表/视图中有数据，在谷歌云存储存储桶中。我已经为这个存储桶创建了一个集成和外部阶段，并且可以在Snowflake中查看存储桶中的文件。现在如何将数据从谷歌BigQuery表加载到Snowflake表中？
浏览 13提问于2020-05-02得票数 0
3回答
我们是否可以直接将数据写入雪花表，而无需使用Python？
首先编写阶段，然后将其转换，然后加载到表中，这似乎是一项辅助任务。它能否一步完成，就像RDBMS中的JDBC连接一样。
浏览 10提问于2020-08-27得票数 4
回答已采纳
我尝试将一堆数据从我的SCADA系统加载到CrateDB (4年，多个CSV文件，大约87 of，大约数十亿个数据点/行)。在我的系统中，我只能每秒钟加载大约1500值(8GB内存、4GB
浏览 0提问于2017-07-30得票数 0
我已经实现了一个符合的API。如果记录的数量较少，我们可以丰富表格。如果我们试图丰富300万条记录，那么在特定的时间之后，我们的TAPI开始发送HTTP 429。这是一个指示器，它告诉我们的lambda函数减慢Snow
浏览 2提问于2021-10-08得票数 4
我使用的是雪花数据库和HiQ FRENDS集成平台。据我所知，FRENDS没有Snowflake插件。我在运行Frends服务器的Windows平台上安装了sbnowflake ODBC驱动程序。我正在寻找一种方法，使批量上传从FRENDS到雪花。我知道我应该将我的数据文件上传到Snowflake中的stage区域，然后使用COPY命令将其附加到DB中。但是我还没有找到通过
浏览 24提问于2021-02-13得票数 3
我对Snowflake是个新手，真的找不到答案--从托管在GCP上的Snowflake卸载数据到亚马逊网络服务S3存储桶的正确/推荐方法是什么？这是否与从已经托管在亚马逊网络服务上的雪花卸载到S3的过程相同，如突出显示的？是否有任何额外的安全问题或需要授予的权限？
在这种情况下，您如何协调不同云提供商之间的出口/入口？您是否可以使用sn
浏览 3提问于2020-06-30得票数 0
我正在使用talend bulk execution将数据从s3加载到snowflake。Talend tFileArchive将文件转换为gzip格式，file.csv.gz并上传到s3存储桶。通过talend批量组件执行的副本如下所示。它不会抛出错误或其他东西，但也不会加载数据。如果我尝试在没有zip的情况下加载csv文件，它可以正常工作。即使我通过snowflake UI执行上面的命令，它也会
浏览 3提问于2020-07-31得票数 0
可以不通过亚马逊S3 (使用Talend)直接将数据上传到亚马逊Redshift吗？
浏览 0提问于2018-02-16得票数 0
我正在制作一个应用程序，能够显示日志文件和通过它们搜索，在C#中。我需要数据提供程序，可以插入30万条记录真的很快。有人有什么建议吗？我目前使用的是Microsoft Compact server3.5，运行速度非常慢。我尝试了sqlite，但它的执行速度很慢，因为我不能进行批量插入。
浏览 0提问于2009-07-15得票数 2
我们可以在snowflake中使用存储的proc将文件从文件位置加载到internalstage吗？我知道我们这里不能使用put命令。热心的帮助
浏览 0提问于2021-07-09得票数 0
我在我的服务器中将MonetDBe实现为一个集成的DB。我希望能够将批量数据加载到数据库中。查看MonetDB文档，有一个csv命令，它允许从CopyInto文件加载批量数据。由于MonetDBe嵌入到我的应用程序中，理想情况下，我希望将数据从内部数据数组批量加载到MonetDB中。
我的数据通常来自我
浏览 4提问于2021-02-28得票数 0
3回答
我使用PDI(水壶)从mongodb提取数据到greenplum。我测试了是否将数据从mongodb提取到文件中，速度更快，每秒大约10000行。但是，如果提取到绿梅，它只有大约130每秒。我修改了格林梅的下列参数，但没有明显的改善。gpconfig -c log_statement -v none如果我想要添加输出表的数量。它似乎被挂断了，而且很长一段时间内不会
浏览 17提问于2022-04-16得票数 0
嗨，我正在使用模式文件创建表，并通过jdbc从数据文件加载表。我正在使用PreparedStatement和executeBatch进行批量上传。数据文件内容类似于以下结构：X 11:40 1 A现在，我能够成功地在数据库中加载表但是，我想测试/验证加载到数据库中的同一
浏览 3提问于2013-08-05得票数 0
回答已采纳
假设我在存储数据的服务器上运行python脚本。有什么更快的方式在我的数据之间有火花数据：谢谢
浏览 4提问于2020-06-30得票数 4
(提交以下线程以帮助其他雪花用户了解AWS Glue将使用什么)
spark-snowflake_2.12-2.5.2-spark_2.4snowflake-jdbc-3.9.1Glue版本-Spark2.4，Python3 (Glue Version 1.0)py4j.protocol.Py4JJavaError$init$(Lscala/Product;)V
at
浏览 5提问于2019-10-15得票数 0
回答已采纳
根据文章，如果我们使用executeBatch方法，那么插入将会更快( Netezza JDBC驱动程序可能会检测到批量插入，并且在幕后将其转换为外部表加载，外部表加载将会更快)。我不得不执行数百万条insert语句，而且每个连接的最大速度仅为每分钟500条记录。有没有更好的方法通过jdbc连接更快地将数据加载到netezza？我使用spark和jdbc连接通过加
浏览 19提问于2017-07-21得票数 1
云服务器
ICP备案
云直播
对象存储
实时音视频
腾讯云开发者
