海量数据迁移怎么卖 - 腾讯云开发者社区

文章/答案/技术大牛

发布

1回答

如何将数据从Mongo迁移到Firestore？

firebase、google-cloud-firestore、google-cloud-datastore

我们希望将海量的数据从Mongo迁移到Firestore。我知道我们可以通过编程来完成这个任务，但是有什么工具吗？

浏览 0提问于2019-01-03得票数 0

回答已采纳

2回答

将mysql (5.5)生产数据库升级到5.6并最大限度减少停机时间的最佳方法是什么

mysql、upgrade、mysqldump、database-administration

我们现有的数据库大小约为200 if，如果我们可以使用一致的并行备份方法。为了测试，我使用mysqldump选项将开发Db从5.5迁移到5.6，但对于生产，我正在寻找一种方法，可以在最短的停机时间内将mysql prod Db升级到5.6。

浏览 2提问于2013-11-27得票数 0

2回答

将海量数据集导入到Rails应用程序的最聪明的方法？

ruby-on-rails、database、import、dataset、migration

我有多个海量(几十亿字节)的数据集需要导入到Rails应用程序中。这些数据集目前都在我的开发机器上各自的数据库中，我需要读取它们，并根据它们包含的信息在我的Rails数据库的表中创建行。我的Rails数据库中的表将与源数据库中的表不完全相同。我在考虑迁移，但我不确定如何将迁移连接到数据库，即使这是可能的，也会慢得离谱吗？

浏览 4提问于2010-03-13得票数 1

1回答

IBM DB2到SQL Server的迁移

c#、sql-server、db2、database-migration、sqlbulkcopy

我得到了一项将数据从DB2迁移到SQL Server的工作。能够通过命令提示符连接DB2数据库和IBM DB2客户端。我们已经在C#中使用ASP.NET SQL批量复制将Oracle数据迁移到SQL server。需要根据每日更新定期迁移DB2数据。还需要有关如何在C#中使用海量复制同步DB2数据的信息。提前感谢您的回答！

浏览 5提问于2017-02-16得票数 0

1回答

你为什么要使用行业标准ETL？

api、ssis、etl、informatica

我刚开始在一家新公司工作，该公司拥有一个数据仓库，它使用一些用PHP构建的bizzare专有ETL。唯一真正的缺点是，许多数据源是web，返回单个逐行记录，与标准ETL相比，PHP更容易通过这些记录

浏览 2提问于2015-04-01得票数 1

1回答

Oracle:数组绑定和sql加载器有什么区别？

oracle、oracle11g、sybase、bcp、sql-loader

我使用bcp (sybase海量插入)插入数百万条记录，但我的公司正在迁移到甲骨文。我不确定是否应该使用数组绑定或sql加载程序。我记忆中有很多数据。我可以1.用数据创建一个文本文件并使用sql-加载程序插入它，或者2.使用数组绑定库插入数据。我不知道哪一个更适合我的申请。两者之间有什么区别。对于某些应用来说，一个更好吗？

浏览 1提问于2014-07-01得票数 0

回答已采纳

1回答

检查是否有与输入图像完全相同的图像。

python、compare、subtraction

我想知道如何在海量数据中找到一个图像(一个文件夹中有很多图像)，我希望找到与输入图像完全相同的图像(给定来自另一个文件夹的输入图像，而不是数据文件夹中的输入图像)，并将输入图像与所有海量数据进行比较，如果它找到了完全相同的图像但我不知道在蟒蛇身上怎么做

浏览 0提问于2018-08-04得票数 4

回答已采纳

1回答

如何在Heroku上进行海量数据迁移？

ruby-on-rails、heroku、migration

这意味着我们需要时不时地对我们的数据进行一些非常大的迁移。我的问题不是关于编写迁移本身，而是关于在Heroku上运行它们。

浏览 0提问于2011-12-14得票数 1

回答已采纳

1回答

从文件中读取行的范围

c#、c#-4.0

谁能让我知道最快的方式来显示一个5 GB大小的文件中的线范围。例如:如果文件的大小为5 5GB，并且具有行号，则文件中有一列。假设文件中的行数是100万，我有开始索引行#和结束索引行#。假设我想读取一个大文件的第25行到第89行，而不是读取每一行，有没有什么最快的方法可以读取从第25行到第89行的特定行，而不是在C#中从头开始读取整个文件

浏览 1提问于2014-10-06得票数 0

2回答

海量文本相似度问题？

gensim、数据

最近在做文本查重2.用gensim 或者 TfidfTransformer求相似的话，对海量数据不太适应求大神们推荐下应该怎么做

浏览 868提问于2018-06-19

2回答

Alteryx -从Server批量复制到格林梅-需要提示以提高性能

sql-server、greenplum、bulk-load、alteryx

需要提示:使用Alteryx设计器，我将从Server (10M行)中提取一个大型数据集，并需要迁移到Greenplum中我可以在Server和Alteryx上进行控制或修改，以提高性能，但在格林梅中不行你好，艾瑞克

浏览 0提问于2018-09-05得票数 0

回答已采纳

1回答

在两个数据库之间迁移数据时出现致命错误

sql-server-2008、asp-classic、data-migration

在我的公司，我们从每个客户都有单独的数据库到每个客户都有一个大型数据库。我们已经完成了用ASP编写迁移脚本以将数据迁移到新数据库的艰巨任务。此迁移脚本一直在运行，直到有大量数据要迁移的特定客户。有4个特定的表，它们之间大约有650万行要迁移。此外，我想知道是否有更好的方法来迁移如此海量的数据？一个存储过程(尽管我讨厌在写完这么大的ASP脚本后还要写这么大的过程)会

浏览 1提问于2011-08-18得票数 0

回答已采纳

3回答

作为从SchemaA.table1到SchemaB.table2的数据迁移的一部分，我尝试在同一个Oracle数据库中进行插入追加。由于Table2的重构，在迁移过程中会出现某种形式的数据转换。由于数据量巨大，这可能需要10个小时到30个小时。我不想因为表空间不足而导致迁移失败。Oracle中是否有一种方法可以根据table1中数据的大小预先确定空间需求，这样我就可以以正确的方式让用户增加表空间了吗？或者，当我将数据移到table1中

浏览 0提问于2011-04-24得票数 2

1回答

Hbase shell -查找不存在列的所有行

hbase、hbase-shell

我已经设置了Hbase 0.98的海量数据。作为noSQL数据库，HBase允许每行在一个列族中有不同的列集。要过滤特定的列，我可以使用以下命令如果我必须反转条件，即获取"ad“不作为列族中的列存在的所有行，该怎么办？

浏览 4提问于2020-03-12得票数 2

5回答

我们应该使用实体框架吗？

asp.net、asp.net-mvc、entity-framework、webforms

我们目前有以下堆栈：Web表单IIS 6VS 2010Server 2008我的问题是，当我们使用VS 2010迁移到MVC时，我们应该使用实体框架(或另一个ORM)、微ORM (比如海量)，还是仅仅使用普通的SQL？我所读到的关于VS 2010的所有教程都是针对使用实体框架进行数据事务的，但是在可预见的未来(5+年)会不会出现这种情况呢？如果有关系，我们客户端的应用程序可以有10,000个活动用户。

浏览 0提问于2011-10-19得票数 31

回答已采纳

2回答

在localhost上设置Rails项目，postgresql问题

ruby-on-rails、ruby、git、postgresql、ubuntu

我得到登陆页面的本地主机:3000，并可以通过网页，而不直接调用数据库。但是，当我转到从db获取数据的任何页面时，它会给出以下错误： PG::Error: ERROR

浏览 4提问于2014-02-05得票数 2

回答已采纳

1回答

如何将计算机格式化为不可恢复？

data-recovery、19.04、format

我的笔记本电脑里有一个500 no的硬盘，我想卖它，所以我想问我是否可以格式化它，这样就没有人能够恢复我的旧数据，如果是的话，我该怎么做呢？提前感谢

浏览 0提问于2019-06-13得票数 0

1回答

Spring :检测到的无效映射模式://swagger/如何解决它

spring、spring-boot、spring-mvc

怎么再卖？描述：在您的应用程序中修复此模式，或使用'spring.mvc.pathmatch.matching-strategy

浏览 4提问于2021-12-18得票数 0

回答已采纳

2回答

随机X观测样本的绘制

我目前正在处理Boston数据。所以我下载了图书馆(海量)数据(波士顿)。我该怎么做？

浏览 3提问于2021-08-31得票数 0

回答已采纳

1回答

SQL NOSQL混合可能还是不可能？

sql、nosql

我有一个关系数据库上的应用程序，为了保存更多的数据，它需要进行更改。我的问题是，只有2个表将存储更多的数据(多达数十亿个条目)，其中一个表通过fk“链接”到其他表。我可以放弃这些表的关系模型。我希望保持数据库的其余部分不变，只更改这两个表。我还对这些表进行了大量查询--从简单的selects到group by和子查询--因此出现了更多问题。我使用NoSQL的经验有限，所以我想知道它的哪一个(如果有的话)适合我的需求：-海量数据-复杂查询-与SQL数据库集成。这不像前两个

浏览 1提问于2012-11-25得票数 7

点击加载更多