使用bash将多个.csv文件导入mysql

文章/答案/技术大牛

发布

1回答

mysql、bash、mysqlimport

我想使用bash脚本首先将文件从google驱动器复制到本地驱动器并重命名(删除空格并添加前缀)，然后将这些.csv文件导入mysql数据库。这些.csv文件具有不同的列，因此我需要从每个.csv文件中获取列名，并使用这些列名创建一个表，然后导入数据。如果有任何帮助，我将不胜感激。我发现一些代码在这里的https://eri

浏览 31提问于2019-09-07得票数 0

回答已采纳

1回答

通过多个文件导入填充MySQL表

mysql、bash、import

我有一个需要通过LOAD DATA INFILE命令定期更新的MySQL表，该命令从.csv文件中获取结构化数据。最初，对于单个.csv文件，我每周只需执行一次加载数据命令，现在情况正在好转，我需要每周多次从多个.csv文件导入数据。我不认为MySQL本身有一种机制，可以遍历目录的内容，找到所有的.csv文件，然后在进入下一个文件之前加载每个文件

浏览 0提问于2018-03-17得票数 0

1回答

忽略可变CSV列将CSV批量导入MySQL

mysql、bash、csv

我正在尝试通过bash (Windows)实现MySQL数据库中多个CSV文件的批量导入。我遇到的问题是我的CSV文件(500+)有两个不同的列数。CSV 1型1,-26.976823,21.836022,"1608",,"0649SB",902.0,"Fl

浏览 2提问于2015-04-16得票数 1

回答已采纳

1回答

MySQL无法从jq生成的CSV中检测换行

mysql、bash、jq

我编写了一个小型Bash脚本，将JSON文件读入CSV，以便导入到MySQL中。下面的示例是我们所拥有的简化版本-- JSON非常复杂，因此很难直接导入MySQL。CSV将允许我们将数据导入到临时表中，并以多种不同的方式使用数据并进行验证等。我们的问题是，MySQL使用'\n'无法识别生成的CSV<

浏览 3提问于2019-12-22得票数 0

回答已采纳

10回答

如何将多个csv文件导入MySQL数据库

mysql、import、phpmyadmin

有没有办法同时将多个csv文件导入到MySQL数据库中？某种批量导入？我有185个csv文件需要导入到MySQL表中。我可以使用phpMyAdmin的导入选项卡单独导入它们，但这将花费很长时间。有人知道有没有更好的方法吗？

浏览 14提问于2011-12-17得票数 14

5回答

将sqlite文件转换为mysql

mysql、ubuntu、sqlite

我有一个.sqlite文件，我想把它转换成mysql。那么有没有办法把它转换成mysql呢?我用的是ubuntu。那么有没有什么shell脚本可以改变它呢？任何帮助都将是非常值得感谢的。

浏览 3提问于2011-07-16得票数 5

1回答

将数据从csv导入mysql的脚本

mysql、bash、shell、csv

我有一个脚本，应该是从.csv导入数据到mysql数据库表。1 A3 D我如何首先检查列名是否重复(例如，不超过一个B)，以及我应该采取什么方法来使此过程工作。

浏览 12提问于2017-08-16得票数 0

回答已采纳

5回答

如何将RedShift上的表卸载到单个CSV文件？

mysql、amazon-web-services、amazon-redshift

我想将一个表从RedShift迁移到MySQL，但是使用“卸载”会生成多个数据文件，这些文件很难直接导入到MySQL中。是否有任何方法将表卸载到单个CSV文件，以便我可以直接将它导入MySQL？

浏览 4提问于2013-12-02得票数 23

回答已采纳

4回答

将多个csv数据导入到一个主表中

php、sql、csv、import

我有一个MySQL数据库，我想从多个csv文件导入数据。对于数据，我提供了一个表，我希望在该表上将多个文件合并为一个文件(join)。不幸的是，我有一个问题，那就是我的数据太大了，因此在我将所有数据都存储到表中之前，这是相当耗时的。因此，问题是:处理海量数据的最佳方法是什么？我为每个csv文件创建了一个临时表，并将数据加载到其中。然后，我连接了所有的表，并希望将查询结果插入到大表

浏览 4提问于2019-09-16得票数 1

1回答

将csv导入到sql

mysql、sql、bash、csv、zsh

我正在尝试编写bash脚本来删除数据库中的所有表，然后导入给定目录中的所有csv文件。不过，我有几个问题：错误1064 (42000)在第2行:您的SQL语法有错误；请检查与您的MySQL服务器版本对应的手册，以获得正确的语法，以便在第1行使用/sql/PAF-sample.csv”和( FIELDTERMINATOR =‘’) 如何告诉m

浏览 1提问于2014-01-09得票数 1

2回答

在使用mysqlimport时添加列

mysql、mysqlimport

我正在使用mysqlimport使用bash脚本将5个不同的csv文件导入到一个公共数据库表中。lines-terminated-by="<br />\n" -uusername -ppassword --local tablename /path/${File[i]}.txt现在，我想向公用表中添加一个额外的列，每个文件都有一个唯一的例如：对于one.csv的

浏览 2提问于2012-12-01得票数 1

回答已采纳

4回答

SQLite3导入CSV* &排除/跳过头*

sqlite、csv、import

我正在尝试将我的数据文件(其中大约有十几个)放入SQLite中的表中。每个文件都有一个头文件，在接下来的一年中，我会收到它们几次，所以我想：避免使用shell脚本或Python来完成此操作。我定义我的表并导入数据..。我本以为在调用.import时可以很容易地跳过标题行，因为文本文件中有标题行是相当常见的情况。

浏览 5提问于2012-11-27得票数 22

回答已采纳

1回答

使用包含换行的长文本字段将CSV导入到MySQL

mysql、import、csv

我试图将CSV文件(';‘分隔的)导入到MySQL表中。Normaly，我使用类似于：INTO TABLE tmp_table它对我来说一直都很好，但是现在我有了一个CSV，它有一个文本字段，包括许多'

浏览 0提问于2015-08-07得票数 2

回答已采纳

2回答

-本地-infile=1使用MySQL工作台？

mysql、mysql-workbench

当我启动MySQL bash客户机时，我一直使用--local-infile=1启动它，以便可以从.csv文件中导入数据。在MySQL工作台中有任何方法可以做到这一点吗？

浏览 0提问于2012-05-15得票数 3

回答已采纳

1回答

使用查询将多个excel文件摄取到MySQL

mysql、excel

我正在尝试将excel文件中的数据加载到MySql中的表中。有400个.xlsx格式的excel文件。我已经成功地将一个文件摄取到表中，但问题是需要手动将excel文件转换为csv文件，将其保存在某个位置，然后运行查询以使用LOAD LOCAL INFILE加载。如何对其余的文件执行此操作。如何加载文件夹中的所有400个.xlsx文件，而不是手动

浏览 29提问于2020-06-23得票数 0

2回答

将多个CSV文件导入mysql

mysql

我有大约28个csv文件，我需要将其作为28个表导入数据库。我试了很多方法，但就是找不到办法。

浏览 4提问于2012-03-14得票数 1

回答已采纳

3回答

如何知道mysql数据库需要多少空间

mysql、csv

假设我将多个csv文件导入到mysql中。我如何才能知道这个数据库需要多少空间(据我所知，它的大小似乎与csv文件大小不同)？

浏览 1提问于2009-08-07得票数 1

回答已采纳

2回答

MySql备份和截断表

mysql、database-backups

如何将mysql数据库备份作为csv文件，然后定期截断表。如何仅使用mysql实现这一目标。任何类型的帮助都将不胜感激。

浏览 6提问于2014-10-22得票数 3

回答已采纳

1回答

JSP/Servlet:如何上载zip文件、解压缩它并提取CSV文件

java、mysql、servlets、csv、zip

想知道如何在JSP/Servlets中执行以下操作：注意: mySQL表已经设置，并为CSV文件输入做好准备。

浏览 1提问于2010-09-22得票数 2

回答已采纳

2回答

使用PHP和mysql将大型数据导入多个外键表

php、mysql、zend-framework、doctrine-orm

用外键从CSV向DB中的多个表插入大数据的更好方法是什么？有人能建议一种更好的方法将数据上传到多个表中吗？在这里，我使用</e

浏览 5提问于2018-05-30得票数 1

点击加载更多