2回答
我有多个海量(几十亿字节)的数据集需要导入到Rails应用程序中。这些数据集目前都在我的开发机器上各自的数据库中，我需要读取它们，并根据它们包含的信息在我的Rails数据库的表中创建行。我的Rails数据库中的表将与源数据库中的表不完全相同。我在考虑迁移，但我不确定如何将迁移连接到数据库，即使这是可能的，也会慢得离谱吗？
浏览 4提问于2010-03-13得票数 1
我们希望将海量的数据从Mongo迁移到Firestore。
我知道我们可以通过编程来完成这个任务，但是有什么工具吗？
浏览 0提问于2019-01-03得票数 0
回答已采纳
我们现有的数据库大小约为200 if，如果我们可以使用一致的并行备份方法。为了测试，我使用mysqldump选项将开发Db从5.5迁移到5.6，但对于生产，我正在寻找一种方法，可以在最短的停机时间内将mysql prod Db升级到5.6。
浏览 2提问于2013-11-27得票数 0
1回答
我得到了一项将数据从DB2迁移到SQL Server的工作。能够通过命令提示符连接DB2数据库和IBM DB2客户端。我们已经在C#中使用ASP.NET SQL批量复制将Oracle数据迁移到SQL server。需要根据每日更新定期迁移DB2数据。需要有关如何在任何编辑器中运行sql查询的详细信息，如SQL plus for DB2或Management Studio for SQL Server。还需要有关如何在C#中使用
浏览 5提问于2017-02-16得票数 0
1回答
我使用bcp (sybase海量插入)插入数百万条记录，但我的公司正在迁移到甲骨文。
我不确定是否应该使用数组绑定或sql加载程序。我记忆中有很多数据。我可以1.用数据创建一个文本文件并使用sql-加载程序插入它，或者2.使用数组绑定库插入数据。我不知道哪一个更适合我的申请。两者之间有什么区别。对于某些应用来说，一个更好吗？
浏览 1提问于2014-07-01得票数 0
回答已采纳
1回答
这意味着我们需要时不时地对我们的数据进行一些非常大的迁移。我的问题是-如何有效地做到这一点，而不必保持终端连接打开几个小时，进行heroku run rake db:migrate，并尽可能少的停机时间。我的问题不是关于编写迁移本身，而是关于在Heroku上运行它们。
浏览 0提问于2011-12-14得票数 1
回答已采纳
1回答
我刚开始在一家新公司工作，该公司拥有一个数据仓库，它使用一些用PHP构建的bizzare专有ETL。
唯一真正的缺点是，许多数据源是web，返回单个逐行记录，与标准ETL相比，PHP更容易通过这些记录
浏览 2提问于2015-04-01得票数 1
1回答
我们正在创建Cassandra的所有keyspace的快照。而且还需要创建一个包含solr索引的备份海量数据，这在Solr索引中很有用。。我试着用下面的命令这对于小数据来说工作得很好，而对于海量数据则需要更多的时间。有人能建议我如何创建solr索引的备份和恢复吗？
浏览 2提问于2016-04-19得票数 0
我有超过1.500.000个数据条目，而且随着时间的推移，它将逐渐增加。这些海量数据将来自150个地区。
现在，我是否应该创建150个表来管理这些日益增长的海量数据？这会有效率吗？我需要快速手术。
浏览 9提问于2009-09-28得票数 1
1回答
的问题是，当我必须提供“多搜索、排序和分组”的功能时，我应该如何创建索引.创建多列索引甚至不特定于我的情况。如何进行缩放，以及如何快速搜索。目前对1500万份数据进行了评估。
欢迎提出建议。
浏览 2提问于2011-10-07得票数 0
我正在尝试创建一个函数，该函数将采用两组波，比较它们，并根据给定的参数创建第三个波。 wave1是海量数据，每个数据点都有值。Wave2也是海量数据，但有些数据点是零。我需要比较Wave1和Wave2，对于Wave2具有非零值的数据点，第三波需要是Wave1减去wave2的差值。因此，第三波将具有与wave2中的非零数据点数量匹配的数据点数量。
浏览 13提问于2020-07-28得票数 0
3回答
web服务是捆绑在一起并封装为小的、独立的实体的小功能或数据的想法非常清楚，并且很有意义。但是，服务如何与它们使用或提供接口的数据库相关呢？例如，当从具有处理所有事务的大型数据库的单片、2层体系结构迁移到基于服务的体系结构时，数据库会受到怎样的影响？数据库是分成较小的数据库并通过服务与每个数据库连接，还是每个服务只与原始的海量数据库交互？另外，如果数据库get被分成，比方说，一个用
浏览 2提问于2009-03-16得票数 4
回答已采纳
需要提示:使用Alteryx设计器，我将从Server (10M行)中提取一个大型数据集，并需要迁移到Greenplum中我可以在Server和Alteryx上进行控制或修改，以提高性能，但在格林梅中不行你好，艾瑞克
浏览 0提问于2018-09-05得票数 0
回答已采纳
1回答
在我的公司，我们从每个客户都有单独的数据库到每个客户都有一个大型数据库。我们已经完成了用ASP编写迁移脚本以将数据迁移到新数据库的艰巨任务。此迁移脚本一直在运行，直到有大量数据要迁移的特定客户。有4个特定的表，它们之间大约有650万行要迁移。此外，我想知道是否有更好的方法来迁移如此海量的数据？一个存储过程(尽管我讨厌在写完这么大的ASP脚本后还要写这么大的过程)会
浏览 1提问于2011-08-18得票数 0
回答已采纳
我们需要的数据是前100个项目的每周。52周将为我们提供5200行数据，而不是我们现在拥有的海量数据。如何修改代码来执行这样的任务？我是SAS的新手，知道如何获取和创建基本的过滤器，但对此深入的了解超出了我的理解。
浏览 1提问于2018-03-03得票数 0
作为从SchemaA.table1到SchemaB.table2的数据迁移的一部分，我尝试在同一个Oracle数据库中进行插入追加。由于Table2的重构，在迁移过程中会出现某种形式的数据转换。由于数据量巨大，这可能需要10个小时到30个小时。我不想因为表空间不足而导致迁移失败。Oracle中是否有一种方法可以根据table1中数据的大小预先确定空间需求，这样我就可以以正确的方式让用户增加表空间了吗？或者，当我将数据移到table1中
浏览 0提问于2011-04-24得票数 2
我在我的项目中使用了两种数据库，mysql和neo4j。mysql中的内容，neo4j中的关系。2、mysql全文搜索的性能如何？与neo4j相比？
浏览 3提问于2013-11-16得票数 0
1回答
MySQL能处理这么大的数据吗？( 3)其他数据库可以处理得更好吗？4)在接触到多少用户之后，我应该迁移到其他更好的数据库，如Mango DB、Cassandra等。
我的问题只是关于数据库技术。假设我们提供了处理海量数据所需的服务器硬件。同时假设我们以最佳的编码质量优化了数据库设计。
浏览 7提问于2017-04-08得票数 0
1回答
处理大量数据
、、、
因此，我正在使用参数化能量模拟，并最终得到存储在.CSV文件中的数据的500GB+。我需要能够处理所有这些数据来比较结果，并深入了解不同参数的影响。但是现在(有了所有这些数据)没有足够的内存来做这件事。谢谢您抽时间见我。
浏览 3提问于2016-10-01得票数 0
当您创建这些海量信息的分支时会发生什么？假设主分支中存在一个文件A.txt。当创建分支(X分支)并考虑到A.txt不会有更改时，perforce服务器是否会复制A.txt (一个保留主要更改，另一个保留X分支)？对于海量的数据，这变得很重要，因为这将意味着复制几十Gb的数据。那么这到底是如何工作的呢？
浏览 1提问于2013-05-30得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
