如何提高mysql LOAD XML本地INFILE表导入性能？

文章/答案/技术大牛

发布

1回答

mysql、xml、performance、import、load-data-infile

69M import.xml我读到人们正在使用LOAD INFIL

浏览 19提问于2017-06-30得票数 0

回答已采纳

1回答

MySQL加载XML导入性能

mysql、xml

使用LOAD XML将MySQL数据导入MySQL表是个好主意吗？在后来的MySQL版本(我使用的是5.5.34)中，是否存在已知的问题或显着的性能改进？我目前的测试使用了大约50 MB的XML和简单的空InnoDB表，每个表都有一个索引，这表明性能非常糟糕--在带有SSD的Core笔记本上，大约每秒写3到8次或8KB。考虑到这种性能，导入我的所

浏览 2提问于2013-09-26得票数 1

回答已采纳

1回答

来自的数据

mysql、xml、load-data-infile

Helly大家好，<LoetProtokoll> <LoetProtElement LoetProtElementTyp="LfdNr" LoetProtElementName="LoetProtElement LoetProtElementTyp="Traeger" LoetProtElementName="Werkzeugtraeger" Loet

浏览 1提问于2018-03-15得票数 0

3回答

如何在不使服务器崩溃的情况下将非常大的文件上传到MySQL？

mysql、sql、phpmyadmin

我有几个50+ MB大小的csv文件需要导入到我的MySQL服务器。我尝试使用PhpMyAdmin导入一个，Apache服务器崩溃了。我已经尝试了几个窗口工具，比如MySQL工作台，但是没有找到导入csv的选项。我不知所措。我能做什么?

浏览 1提问于2011-03-19得票数 2

回答已采纳

1回答

将列名映射到字段名LOAD XML LOCAL INFILE

mysql、xml、postgresql、local、load-data-infile

我刚刚从phpPgAdmin导出了一个XML格式的数据表。我想将此文件加载到本地mysql数据库中。两个数据库的表结构是相同的。我知道mysql允许使用下面的示例xml结构导入xml数据：<field name='column1'>value1</field> <co

浏览 0提问于2012-06-18得票数 0

1回答

在本地使用geonames服务

google-maps-api-3、geocoding、geonames

我计划使用geonames API，但实际上，在本地使用geonames而不是使用他们的web API似乎要明智得多。所以我的问题是，有没有人知道如何在本地连接geonames数据？我是否需要手动将其导入到数据库中，然后像引用普通DB一样引用它？

浏览 0提问于2013-05-29得票数 7

回答已采纳

1回答

将CSV或XML导入到MySQL

mysql、xml、database、csv

我有两个巨大的数据库，两种格式的CSV和XML，我想导入到MySQL的数据库。我尝试使用: LOAD DATA INFILE，但收到此错误消息:error1064 (42000)：您的SQL语法中有一个错误；请查看与您的MySQL服务器版本对应的手册，了解在第1行'‘附近使用的正确语法日志版本:5.1.56- MySQL我使用这个查询作为根，将XML<

浏览 0提问于2012-01-30得票数 0

回答已采纳

1回答

从S3加载XML？

mysql、amazon-web-services、amazon-s3、amazon-rds

由于Aurora不支持RDS空闲层(它不支持微实例)，所以我使用的是MySQL服务器。我有一个脚本，它生成数据(目前是XML)，可以导入到MySQL中，然后将其写入S3桶。我本来打算使用LOAD XML FROM S3命令从桶中导入它，但当我尝试时，会出现语法错误。我看过AWS数据管道，但它似乎很难维护，因为据我所知，它只支持CSV，而且每当数据库的结构发生变化时，我都必须编辑SQL查询来手动导入行。这是XML的一个优点；L

浏览 4提问于2019-11-29得票数 0

2回答

在MySql中加载带有位字段的XML

mysql

NOT NULL, ) ENGINE=InnoDB AUTO_INCREMENT=6 DEFAULT CHARSET=latin1$$ <list><row t="0" /></list> LOAD XML LOCAL INFILE 'c:/temp/data.<e

浏览 2提问于2012-01-19得票数 2

回答已采纳

2回答

如何在大.CSV文件中拆分行并导入数据库

php、mysql、loops、csv、split

当导入到我的数据库中时，需要花费太多的时间，有时它会显示错误，比如Time 。为了避免这种情况，我希望先读取100行并导入数据库，以此类推。如何在PHP中操作？有什么简单的方法吗？

浏览 6提问于2016-07-28得票数 1

3回答

分区会提高MySQL插入速度吗？

mysql

我在MySQL 5.0上通过LOAD DATA INFILE做了很多插入操作。如果数据流到单独的分区表中，MySQL 5.1中的分区是否可能提高性能？

浏览 0提问于2009-11-16得票数 9

回答已采纳

1回答

将XML数据导入MySQL的标准方法是什么

mysql、xml

我研究了如何使用工作台将XML数据导入到MySQL中。1.创建表(这是我不清楚的部分)-有没有一种方法可以只从XML数据文件创建表？LOAD XML</e

浏览 1提问于2015-11-20得票数 2

1回答

如何快速地将非常大的csv文件导入mysql？

mysql、performance、csv、import、row

例如，如果我有1GB的csv文件，并且我想快速地将它导入mysql，我该怎么办？我以前试过导入1GB文件，它花费了大约1.5小时的时间。我使用16 GB内存的计算机。

浏览 4提问于2015-04-18得票数 5

回答已采纳

1回答

Mariadb错误:此MariaDB不允许使用的命令

php、mysql、mariadb

在mariadb中，当我在php脚本中使用"load data local infile“时，会得到以下错误消息： local-infile=1 如果我使用"load data infile"，我可以将csv文件导入到我的MySQL表中，但是csv文件必须位于/var&

浏览 0提问于2018-10-25得票数 0

2回答

mysqldump vs select vs outfile

mysql

我在mysql中使用select * to outfile选项将数据备份到选项卡分隔格式的文本文件中。我把这句话放在每一张表上。并且我使用load data infile为每个表将数据导入mysql。现在我要面对一些问题： mysqldump是一个选项

浏览 4提问于2013-04-02得票数 4

7回答

将大型MySQL表导出为多个较小的文件

mysql、export

我在本地开发服务器上有一个非常大的MySQL表:超过800万行数据。我使用LOAD DATA INFILE成功地装载了表。我知道如何</

浏览 2提问于2012-10-29得票数 11

1回答

加载数据本地文件，将csv导入mysql表不能正常工作

mysql

我正在使用load data infile将数据从csv导入到mysql表，但是数据没有正确插入。将数据本地infile 'my.csv‘加载到表mytable字段中，字段以'，’结尾，'"‘行以'\n’结尾请帮帮忙

浏览 0提问于2011-10-14得票数 0

回答已采纳

3回答

将CSV导入MySQL

mysql、csv、load-data-infile

我已经创建了一个数据库和一个表。我还创建了我将需要的所有字段。我已经创建了46个字段，其中一个是我的行ID。CSV不包含ID字段，也不包含列的标题。我对这一切都是新手，但我一直在努力弄清楚这一点。我正在尝试弄清楚如何导入CSV，但让它从第二个字段开始导入数据，因为我希望auto_increment会填写ID字段，这是我创建的第一个字段。我尝试了这些说明，但没有成功。有人能提供一些见解吗？

浏览 49提问于2010-06-12得票数 20

回答已采纳

3回答

PHP导入/分析XML文件内容保存到数据库

php、xml、parsing、import、xml-parsing

试图将sms日志导入php，以便在mysql db中进行解析。无法解析单个数组值，无法获取所有记录的完整数组。// Load xml file else check connection$con = json_encode($xml</e

浏览 3提问于2022-05-01得票数 0

回答已采纳

1回答

将数百万行从teradata传输到mySQL

java、mysql、sql、bigdata、teradata

我必须将大约500万行数据从Teradata传输到MySQL。有人能建议我在不使用文件系统的情况下通过网络最快地完成这个任务吗？我对是新手。我已经使用JDBC编写了代码，从Teradata获取记录并将它们插入到MySQL中。但是它非常慢，所以我希望使代码更高效。CLIENT_OFFER_ID")); } 在mySQL

浏览 4提问于2013-12-06得票数 0

点击加载更多