将csv文件大容量插入到SQL server中

文章/答案/技术大牛

发布

1回答

存储扩展事件的所有记录的计数

sql-server、count、extended-events

我想得到所有存储在扩展事件中的记录的计数，但是该文件是一个巨大的文件，在它上运行一个查询需要几分钟，并且不能满足我的需要。我想知道在sql服务器中有什么地方可以获得这些数据吗？

浏览 4提问于2022-01-31得票数 0

1回答

将csv文件导入Server数据库表的Powershell函数

sql-server、powershell、csv、import

我创建了一个PowerShell函数，它可以从.csv文件中批量复制数据(第一行是标题)，并将数据插入到Server数据库表中。$i = 0} 不过，我希望修改上面的内容，以便.csv文件中的列名与Server数据库表中的列名相匹配。他们应该是一样的。目前，数据正在导入到不正确的数据库列中。

浏览 0提问于2019-05-01得票数 4

1回答

使用R将存储在S3桶上的数据导入Server的最有效方法

r、sql-server、amazon-s3

我在亚马逊的S3桶上存储了大量的大型CSV文件(每个文件的容量从1.2-1.5GB不等)。我想将这些文件导入/加载到数据库中。我一直在尝试使用R中的aws.s3包来处理这个问题，但我希望了解如何在将数据加载到内存/将数据保存到物理驱动器方面最有效地做到这一点。我也愿意听取其他关于如何在R.之外处理这件事的建议，谢谢！

浏览 0提问于2019-01-28得票数 0

回答已采纳

2回答

用于将数据从excel 2003-2007导入到sql server表的sql查询。

sql、sql-server、excel

我尝试将数据从excel导入到数据库中的sql server表中，我的sql server是sql server 2014，我尝试了以下代码。

浏览 5提问于2017-10-28得票数 0

1回答

sql、sql-server、csv、bulkinsert

我尝试使用bulk insert将csv文件中的值插入到SQL中。下面是csv文件的外观：Apple 2 $2 Orange 9Qty Int, ) FROM '\\APPFS\user

浏览 8提问于2017-07-22得票数 0

回答已采纳

6回答

sql server大容量插入

sql-server

我想插入带有特殊字符的csv文件，如何将csv文件插入到带有特殊字符的sql server数据库中

浏览 3提问于2009-11-04得票数 0

1回答

使用Python而不使用pyodbc将数据大容量装载到SQL Server的最佳方法

python、sql-server

我想将数据从我们的云环境(pivotal cloud foundry)加载到SQL Server中。数据从API获取并保存在内存中，我们使用tds将数据插入到SQL Server中，但在文档中我看到的使用批量加载的唯一方法是加载文件。我不能使用pyodbc，因为我们在云环境中没有odbc连接。如何从字典中直接进行大容量插

浏览 0提问于2019-12-06得票数 0

1回答

SSIS insert大容量是否与大容量插入相同

sql-server、ssis

我正在使用SSIS包(不是我构建的)将CSV文件批量插入到SQL Server2005中insert bulk [dbo].[stage_dht]( ..... ) 但是该语句中没有FROM子句，所以我很好奇它是如何获取数据的，这种所谓的快速加载是将数据大容量加载到SQL中的最佳

浏览 3提问于2009-05-13得票数 5

回答已采纳

1回答

在Server* 2008中截断后，批量插入中的重复主键？*

sql-server-2008、ssis、bulkcopy

我使用SSIS将SQL Server 2008 prod数据库中的数据转储到平面文件，然后使用大容量插入将这些平面文件加载到Server 2008 dev数据库中。SSIS包在大容量插入之前运行截断表语句，但当我运行它时仍然会收到以下错误：“该语句已终止。违反主键约束。无法插入重复键。”为什么

浏览 0提问于2012-08-03得票数 3

回答已采纳

2回答

从CSV文件到远程服务器中的表的大容量插入

sql、sql-server、powershell

我使用SQL server 2012和windows powershell。我想出了$customerSizeQuery = "BULK INSERT dbo.test FROM '$path' WITH (FIELDTERMINATOR然后，我尝试将文件内容放到一个变量中，但仍然有错误。它似乎在说$var不是一张桌子 $path= "C:\UT\testdata.<em

浏览 0提问于2014-07-02得票数 3

1回答

如何将Excel日期格式(mm/dd/yyyy)插入到SQL* Server格式(yyyy-mm-dd)中？*

sql-server

Excel表中已存在dd/mm/yyyy日期格式的预输入数据。如何以yyyy-mm-dd日期格式将.csv文件中的Excel值大容量插入SQL Server表？

浏览 60提问于2021-02-06得票数 0

1回答

大容量汉字插入

encoding、utf-8、insert、bulk

我想将包含汉字的csv数据文件大容量插入到sql server 2012。csv数据文件的原始编码为utf8，fmt文件由bcp工具生成。问题是，如果我通过记事本将csv数据文件的编码从utf8转换为unicode (用记事本打开数据文件，然后选择'save‘并选择'unicode’格式)，则可以将<

浏览 6提问于2015-11-30得票数 0

回答已采纳

1回答

如何在delphi TClientDataset中设置“已修改”记录？

delphi、tclientdataset

我需要将TClientDataSet中加载的所有已修改记录设置为强制保存。我该怎么做呢？Delphi XE8

浏览 1提问于2015-07-16得票数 1

2回答

如何忽略在管道分隔的csv文件中在列值中添加逗号时添加的双引号？

sql-server

我有一个管道分隔的 csv文件，它的数据将被插入到服务器中。在excel中打开该文件，在列值中添加逗号。以下是添加逗号后的notepad++中的数据。然后将该文件大容量插入到sql server中。=’AS03\AppData\ErrorFiles\PipeDempi

浏览 13提问于2022-08-31得票数 -2

2回答

将逗号分隔的字符串插入到SQL中的表

sql、sql-server

我需要将其放入现有的表中：║ SomeNum ║ SystemType║ Date ║ ╠══════════╬═══我必须说我对SQL知之甚少，所以请原谅我接下来的那些愚蠢的问题，谢谢你:)

浏览 0提问于2017-03-30得票数 0

3回答

大容量插入Sql* Server数百万条记录*

c#、sql-server、windows-services、bulkinsert

00000002....00198562和我必须根据序列将它们解析并插入到数据库表中。我的问题是，将这些数据插入数据库的最佳(最有效)方法是什么？我曾尝试使用一个简单的方法打开一个SqlConnection对象，然后生成一个SQL插入脚本字符串，然后使用SqlCommand对象执行该脚本，但是这种方法花费的时间太长了。我读到我可以使用Sql BULK INSERT，但它必须从文本文件中读取，这种情况下可以使用BULK

浏览 5提问于2012-05-24得票数 11

2回答

将XML数据大容量插入SQL* Server数据库*

c#、sql-server、xml、restore

我的工作是备份和恢复SQL Server中的选择性数据。我使用以下解决方案：然后用我想要的数据创建一个xml。现在如何创建一个函数来将这些数据恢复到SQL Server数据库？

浏览 0提问于2013-04-05得票数 0

1回答

为什么对内存优化的非持久表的大容量插入速度与持久表相同？

sql-server、memory-optimized-tables

当在持久内存优化表和非持久内存优化表中运行大容量插入时，我将获得相同的速度。大容量插入到非持久内存优化表的速度不应该比持久内存优化表更快吗？如果是这样的话，我在这里做错了什么？这是在Server 2016 SP1上进行的。大容量插入来自我生成的csv文件中的1000万行。SQL CREATE

浏览 3提问于2017-05-05得票数 0

回答已采纳

1回答

使用pyodbc:无法找到文件批量插入Server表

python、sql-server、python-3.x、pyodbc

我正在将csv文件大容量插入到Server表中，但是我得到了如下所示的错误：df_output.to_csv('new_file_name.csv', sep=',', encoding='utf-8') conn = pyodbc.connect(r'DRIVER={SQL Server<

浏览 1提问于2018-02-13得票数 1

回答已采纳

1回答

Server中列数不同的CSV文件的条件大容量插入

sql-server、tsql、sql-server-2008-r2、bulkinsert、bcp

我生成了一个BCP格式文件(xml)，用于将CSV文件导入到SQL SERVER表中。有IIS文件(代表100+网络日志)。有些网站收集5列数据，有些网站收集6列数据。前五列是相同的。是否存在，我可以先检查CSV文件有多少列，然后才执行大容量插入命令？，这样，我就可以选择与命令一起使用的正确格式文件，而不会出现错误，说明列丢失了

浏览 4提问于2013-06-10得票数 1

回答已采纳

点击加载更多

存储扩展事件的所有记录的计数

将csv文件导入Server数据库表的Powershell函数

使用R将存储在S3桶上的数据导入Server的最有效方法

用于将数据从excel 2003-2007导入到sql server表的sql查询。