我们希望将海量的数据从Mongo迁移到Firestore。
我知道我们可以通过编程来完成这个任务，但是有什么工具吗？
浏览 0提问于2019-01-03得票数 0
回答已采纳
需要提示:使用Alteryx设计器，我将从Server (10M行)中提取一个大型数据集，并需要迁移到Greenplum中我可以在Server和Alteryx上进行控制或修改，以提高性能，但在格林梅中不行你好，艾瑞克
浏览 0提问于2018-09-05得票数 0
回答已采纳
我们现有的数据库大小约为200 if，如果我们可以使用一致的并行备份方法。为了测试，我使用mysqldump选项将开发Db从5.5迁移到5.6，但对于生产，我正在寻找一种方法，可以在最短的停机时间内将mysql prod Db升级到5.6。
浏览 2提问于2013-11-27得票数 0
2回答
我有多个海量(几十亿字节)的数据集需要导入到Rails应用程序中。这些数据集目前都在我的开发机器上各自的数据库中，我需要读取它们，并根据它们包含的信息在我的Rails数据库的表中创建行。我的Rails数据库中的表将与源数据库中的表不完全相同。我在考虑迁移，但我不确定如何将迁移连接到数据库，即使这是可能的，也会慢得离谱吗？
浏览 4提问于2010-03-13得票数 1
1回答
我得到了一项将数据从DB2迁移到SQL Server的工作。能够通过命令提示符连接DB2数据库和IBM DB2客户端。我们已经在C#中使用ASP.NET SQL批量复制将Oracle数据迁移到SQL server。需要根据每日更新定期迁移DB2数据。还需要有关如何在C#中使用海量复制同步DB2数据的信息。提前感谢您的回答！
浏览 5提问于2017-02-16得票数 0
1回答
我刚开始在一家新公司工作，该公司拥有一个数据仓库，它使用一些用PHP构建的bizzare专有ETL。
唯一真正的缺点是，许多数据源是web，返回单个逐行记录，与标准ETL相比，PHP更容易通过这些记录
浏览 2提问于2015-04-01得票数 1
4回答
有没有什么好的方法来设计一个海量数据录入的网页？Datagrids似乎是处理这种类型的数据输入的最佳方式，我认为像Access或SQLite+Frontend这样的客户端应用程序比web更适合这种情况。
链接到具有数据输入页面的网站将非常感谢。
浏览 2提问于2009-02-10得票数 4
我在找一个很好的参考资料我知道很多好的clojure编程书籍(Programming Clojure，Joy of Clojure，...)和很多好的数据挖掘教科书(挖掘海量数据集，管理of，...)。然而，我没有注意到有任何引用专门针对“使用clojure”这一部分对我来说相当重要，原因如下：
* most theoretical analysis uses，无论数据是存储在内存中还是延迟地从磁盘读取--通
浏览 3提问于2012-06-19得票数 10
回答已采纳
1回答
我使用bcp (sybase海量插入)插入数百万条记录，但我的公司正在迁移到甲骨文。
我不确定是否应该使用数组绑定或sql加载程序。我记忆中有很多数据。我可以1.用数据创建一个文本文件并使用sql-加载程序插入它，或者2.使用数组绑定库插入数据。我不知道哪一个更适合我的申请。两者之间有什么区别。对于某些应用来说，一个更好吗？
浏览 1提问于2014-07-01得票数 0
回答已采纳
1回答
这意味着我们需要时不时地对我们的数据进行一些非常大的迁移。我的问题不是关于编写迁移本身，而是关于在Heroku上运行它们。
浏览 0提问于2011-12-14得票数 1
回答已采纳
到目前为止，我已经更改了数据模板以及步骤(从300到60)和心跳(从600降到120)，我还将cron作业从*/5更改为*/1，最后，在“设置”下，我将Poller间隔更改为每分钟，并将cron间隔更改为每分钟据我理解，编辑数据模板并不影响现有的RRDs，它只是设置将来将创建的RRDs--因此，我认为错误是因为RRD文件默认只有5分钟的步骤，而不是我需要的60分钟的步骤。最重要的是，现有数据并没有丢失，但是，如果不可能合并，则可以将其存档--到目前为止，我已经尝试创建第二个仙人掌服务器，以便迁移现有<e
浏览 0提问于2012-10-30得票数 7
1回答
我在oledb数据库中有3个表，每天将数据从SSIS包中提取到mssql服务器。在绝大多数情况下，这些数据是好的，不需要修改，但是大约每个月我会获得两次空值，短时间内我想用最后一个已知的好值或其他生成的值来替换它。是否有一种方法可以在SSIS中实现这一点，而不必像我现在这样在数据流任务之后使用CTE命令运行几个sql查询？
浏览 4提问于2015-10-29得票数 0
回答已采纳
1回答
Pandas库有一个非常好的函数，叫做.fillna()，可以用来填充空值我使用Datatable库来完成我的新任务，因为在Datatable中加载和处理海量数据的速度非常快
浏览 12提问于2020-12-23得票数 2
好的，我有两个程序使用相同的海量数据文件，位于/public_semrep/DATA/DB/
是否可以将这些路径中的一个映射到另一个文件夹，这样我就不必保存这些大型文件的两个副本了
浏览 0提问于2014-05-13得票数 3
回答已采纳
实际上，由于服务器端的海量数据处理，我面临着“内存不足”的问题，但现在我已经解决了这个问题，我使用CallbackRowHandler来处理数据块。这很好用。现在，我再次面临同样的“内存不足”问题，因为我正在向客户端传输处理过的数据。我正在考虑使用json将处理后的数据传输到客户端。请告诉我这是好的方法还是我走错了方向？谢谢你，吉蒙
浏览 1提问于2012-04-18得票数 0
1回答
在我的公司，我们从每个客户都有单独的数据库到每个客户都有一个大型数据库。我们已经完成了用ASP编写迁移脚本以将数据迁移到新数据库的艰巨任务。此迁移脚本一直在运行，直到有大量数据要迁移的特定客户。有4个特定的表，它们之间大约有650万行要迁移。此外，我想知道是否有更好的方法来迁移如此海量的数据？一个存储过程(尽管我讨厌在写完这么大的ASP脚本后还要写这么大的过程)会
浏览 1提问于2011-08-18得票数 0
回答已采纳
作为从SchemaA.table1到SchemaB.table2的数据迁移的一部分，我尝试在同一个Oracle数据库中进行插入追加。由于Table2的重构，在迁移过程中会出现某种形式的数据转换。由于数据量巨大，这可能需要10个小时到30个小时。我不想因为表空间不足而导致迁移失败。Oracle中是否有一种方法可以根据table1中数据的大小预先确定空间需求，这样我就可以以正确的方式让用户增加表空间了吗？或者，当我将数据移到table1中
浏览 0提问于2011-04-24得票数 2
1回答
最近，我听到一些人说，numpy是处理海量数据的一个很好的模块。我知道，我们大多数人都不是科学家和研究人员，在什么情况下，矮胖能给我们带来好处？你能和我分享一个好的练习吗？
浏览 2提问于2014-07-26得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
腾讯会议
云直播
对象存储活动推荐
腾讯云开发者
