向mysql数据库添加批量数据

文章/答案/技术大牛

发布

2回答

mysql、node.js

我有一个控制台程序，用户在其中扫描序列号，这些序列号被添加到数据库中。const mysql = require('mysql2'); } }

浏览 21提问于2019-01-16得票数 0

回答已采纳

1回答

ActiveRecord:：StatementInvalid: Mysql2:：Error:关闭MySQL连接

mysql、ruby-on-rails、delayed-job

我试图在MySQL中批量插入500万条记录，但得到了ActiveRecord::StatementInvalid: Mysql2::Error: closed MySQL connection错误。我正在使用延迟的作业来批量插入500万条记录到数据库中。出于测试目的，我点击了5个HTTP请求，每个请求都包含将100万条记录批量插入数据库的请求，因此总共有500万条记录将被插入到数据库中。我正在运行5个延迟作业的实例来执行批量<

浏览 1提问于2015-12-07得票数 0

1回答

如何避免MySql死锁？

mysql、database-deadlocks、jooq、batch-insert

我说的是一个使用数据库抽象层的MySql数据库。我一直收到以下错误：这是在向表中大容量插入大约很可能会从不同的线程一次尝试多个这样的批量插入。是什么导致了死锁，我如何避免它？

浏览 9提问于2012-08-19得票数 2

回答已采纳

1回答

如何使用C#大容量插入到MySQL中

c#、mysql、bulkinsert

我以前使用过SQLBulkCopy类将数据加载到MS SQL Server数据库中。结果非常好，并且完全按照我的预期工作。现在，我正在尝试使用SSIS中的脚本任务，通过ODBC或ADO.NET连接将数据批量加载到MySQL (5.5.8)数据库中(推荐？)。我的数据集中的列与MySQL表中的列相对应。将数据集批量插入到MySQL数据库的最佳方法是什么？

浏览 2提问于2011-02-03得票数 7

5回答

MySql大容量插入

java、mysql、bulkinsert

我想在MySql数据库中插入一些4K的行。我不想触发4k 'insert‘查询。有没有什么方法可以让我只执行一次insert查询来在数据库中存储这4k行。我在互联网上到处搜索，我发现用户正在从文件批量插入到数据库中。在我的例子中，数据在内存中，我不想先将数据写到文件中进行批量插入。如果我这样做了，那么我将在程序中添加延迟。

浏览 5提问于2011-04-03得票数 10

1回答

批量导出多个mysql数据库

shell、batch-file、ssh、mysqldump、database-backups

我正尝试在我的web服务器上备份我的15个MySQL数据库。这个数据库列表将随着我的不断增长(希望如此！)增加客户群。显然，我可以使用以下命令进行mysql转储： mysqldump --add-drop-table -h host -u username -p"password" databasename > filename.sql我的问题是，有没有办法批量导出MySQL数据库(同样，批量导入)？是否强制我对每个数

浏览 3提问于2013-05-12得票数 0

回答已采纳

1回答

使用python在MySQL中插入多线程数据

python、mysql、database、multithreading

我正在做一个项目，涉及插入到数据库中的大量数据。我想知道是否有人知道如何在数据库中填充2或3个表在相同的time.An示例或伪解码将是有帮助的。谢谢

浏览 1提问于2010-04-10得票数 2

1回答

我已经使用LINQ将Excel文件加载到.NET中，现在如何将数据批量插入到DB (oracle)表中？

c#、linq、entity-framework-4.1

ExcelQueryFactory(@"c:\test.xls"); select c;附注:我是.NET 4学习的初学者，我已经通过其他链接谈论批量插入，但不知何故无法连接。

浏览 1提问于2012-10-09得票数 2

2回答

从服务器应用程序访问MySQL表

android、mysql、linux

我正在进行一个项目，在这个项目中，我正在构建一个android客户端应用程序，该应用程序向服务器发送请求(该服务器处理繁重的逻辑代码)。然后，这个服务器从我的Linux获取数据，对其进行格式化并将其中继到客户端。现在，我的服务器应用程序将位于连接到我的linux盒的物理服务器上。我使用的发行版是FreePBX，并且在内部设置了一个MySQL服务器，用于调用日志和我想要访问的所有相关数据。在我的服务器代码(Java)中，我是否必须连接到发行版中的数据库，或者我是否可以从/var/lib

浏览 3提问于2014-02-14得票数 0

回答已采纳

2回答

在JPA中自动删除相关的@OneToOne

java、hibernate、jpa、jpa-2.0

我在JPA中使用了以下内容：class ParentClass { @GeneratedValue ... mappedBy = "parentClass") ..class ChildClass { ParentClass parentClass;

浏览 0提问于2011-02-10得票数 2

回答已采纳

2回答

数据库设计(库存数据库)

database、sqlite、database-design

我试图克服的主要障碍是如何在products数据库中跟踪批量项目与单个项目。例如，如果购买了一个散装物品，假设购买了24包焦炭，我如何在产品数据库中维护散装物品，并且它包含24个单独的物品。到目前为止，我已经提出了多次扫描数据库以获取所有信息的多遍方法。representing the quantity SKU: INT// Other stuff but that is the essential 当我向库存中添加</

浏览 10提问于2011-07-08得票数 4

回答已采纳

1回答

使用节点JavaScript将批量数据插入MySQL

mysql、node.js、node-mysql

我正在尝试从SQL server获取数据并插入到MySQL中。我已经拿到了1lac的记录。记录的获取是正确的，但是在将记录插入到MySQL中的过程中，它不会立即插入数据。我需要刷新MySQL才能看到新记录。var sql = require('mssql'); user : 'sa',

浏览 1提问于2015-12-01得票数 0

4回答

如何将XBRL数据导入MySQL？

mysql、database、import、xbrl

我在一个单独的MySQL数据库中有与这些XBRL文档相关的数据，我想将XBRL数据添加到MySQL中，以便将所有内容存储在一个数据库中。我一直在寻找关于这些问题的教程，但找不到任何提供基本介绍的东西，只有大量的高级信息。

浏览 5提问于2016-06-30得票数 13

3回答

MySQL + PHP:大约500kb的JSON文件-将数据加载为表和字段，而不是单个序列化变量

php、mysql、json、optimization、entity-attribute-value

该网站将需要加载这些文件和操作数据。在现代计算能力下，将这些文件作为单个序列化字段加载到数据库中，然后每次使用时都可以加载和解码，这样做可行吗？

浏览 2提问于2019-01-14得票数 1

1回答

在主从设置中，哪个更适合使用本地队列或立即将更改写入远程？

mysql、replication

我有一个用于读取的本地数据库(mysql )和用于写的远程主数据库，但我想知道这样做是否更好。使用1 i 想，我有更多的控制，但是有延迟，它使用每个传出表一个连接/线程但2可以是任何cpu/内存的使用，没有控制，但变化是实时更新。我目前使用#1，但现在，由于我的项目使用更多表，我批量插入10+连接，并且我计划进行水平可伸缩性和10+连接，因此每个实例最终都可能加起来，所以请告诉我

浏览 0提问于2016-06-09得票数 2

4回答

SQL Server到MySQL的数据传输

mysql、sql-server、connection、odbc、oledb

我正在尝试从SQL Server数据库向MYSQL数据库传输基于常量和连续的批量数据。我想使用SQL Server的SSMS的复制，但这显然只用于SQL Server到甲骨文或IBM的DB2连接。目前，我们正在使用SSIS来转换数据并将其推送到MYSQL数据库中的一个临时位置，在那里将其复制过来。我想要最快的方式来传输数据和复杂的几种方法。我有一个新的方法，我计划转换数据，我相信这将解决大多数时间问

浏览 0提问于2011-08-16得票数 9

回答已采纳

2回答

如何使用Spring-Batch进行大容量插入？

java、spring、hibernate、spring-batch、spring-data-jpa

我使用spring-batch和spring- data -jpa来读取大型csv数据文件，并使用hibernate将现有条目持久化(或更新)到postgresql数据库中。如何配置spring才能使用批量/批量插入？

浏览 2提问于2014-12-11得票数 1

2回答

bulk_insert_buffer_size和InnoDB

mysql、innodb、myisam

我在这一页上读到了以下内容bulk_insert_buffer_sizeMyISAM使用一个特殊的树状缓存来使批量插入更快.选择插入..。值(.)、(.)、.和加载数据信息。此变量限制每个线程缓存树的大小(以字节为单位)。将其设置为0将禁用此优化。注意:此缓存仅在向非空表中添加数据时使

浏览 0提问于2013-09-11得票数 3

1回答

NoSql到mysql数据库的转换

mysql、google-app-engine、nosql

有没有什么简单的方法可以把google的nosql转换成本地的mysql数据库？我已经用下载了所有的数据。如何从这些批量数据中分离出所需的实体。稍后，我想将所有实体转换为mysql数据库。

浏览 1提问于2013-01-31得票数 0

回答已采纳

2回答

如何在magento核心资源中设置utf8字符集？

php、mysql、magento、utf-8、special-characters

我从API response.This批量产品导入大量产品，将使用mysql核心资源连接查询处理大量数据更新。所以在这种情况下，系统会收到来自Api响应的一些特殊字符，特殊字符应该如下所示。由于批量更新的原因，我们使用直接更新查询来访问mysql数据库，而不是使用本机magento适配器。这些特殊字符在直接进行utf8转换时不进行update.But更新，如果使用magento产品导入适配器，它将作为值在mysql数据库中进行转换和保存。我尝试在ma

浏览 7提问于2015-09-15得票数 0

回答已采纳

点击加载更多