大容量导入会损坏数据

文章/答案/技术大牛

发布

2回答

sql-server

我正在使用批量导入将制表符分隔的UTF-8数据装载到一个表中。

浏览 3提问于2017-03-14得票数 0

回答已采纳

1回答

当插入带有排序键的表时，需要排序查询结果？

amazon-web-services、amazon-redshift

我的理解是，我需要在select上使用"order“，以便数据按排序顺序进入(空)目标表，但我看到了一些行为，表明情况可能不是这样。

浏览 3提问于2019-09-03得票数 1

1回答

如何修复此MSS 2008批量插入日期时间精度错误？

sql-server、datetime、precision、bulkinsert

对datetime列的MS SQL Server2008大容量插入会在数据库中输入文件变成2009-09-19 15:02:41.327的秒数部分的第三个小数位引入错误: 2009-09-19 15:02以下是输入文本文件包含的内容：下面是大容量插入后的表：2> go primary_key

浏览 0提问于2009-09-19得票数 0

回答已采纳

1回答

Server 2008在导入文本文件时不支持UTF8编码的代码页65001

sql-server-2008

似乎Server 2008在使用大容量插入时不支持代码页65001。如果使用其他代码页，则导入数据时会损坏数据。是否有方法在Server 2008中使用脚本正确插入我的UTF8数据？

浏览 0提问于2010-02-04得票数 0

1回答

如何在永远运行python脚本时不会耗尽内存

python-3.x、memory-leaks、infinite-loop

我有一个脚本，可以解析csv，删除旧数据，并在CentOS vm中不断地将新数据插入mongodb。我似乎在几天后耗尽了内存，脚本崩溃。如果没有这个问题，我怎么才能永远运行它。

浏览 8提问于2019-05-14得票数 0

1回答

我是一个开发人员，我正在开发一个嵌入板载USB和SDCard的产品，它的工作方式也像SDCard阅读器。SDCard的内容可以通过PC机或单板的微处理器进行修改。当装有windows操作系统的PC修改SDCard的内容(例如创建、删除、移动、重命名文件)时，单板的微处理器可以查看这些更改，但如果单板的微处理器对SDCard的内容进行了更改，则PC不会检测到这些更改。我尝试刷新显示文件的窗口或开发自定义应用程序，但看不到更改。查看更改的唯一方法是拆卸并连接USB中的USB。提前谢谢你。

浏览 1提问于2015-10-14得票数 0

1回答

用一些有管道的数据字段分隔的SQL导入管道

sql、sql-server、sql-server-2008-r2

我遇到的问题是，有时会有包含管道的记录，然后作为交换，大容量插入会将其分解成两个不同的记录。Location我上面的例子，第二条记录，大容量插入将分割地址字段

浏览 3提问于2015-01-30得票数 0

回答已采纳

1回答

具有大容量插入和单行插入的表的数据库设计

sql-server、oracle、database-design、performance

稍后，相同的记录还需要对状态进行大容量更新。从“待定”到“完成”。首选DB是Oracle

浏览 0提问于2014-08-05得票数 2

1回答

使用sqlcmd将表查询保存到CSV，不能重新导入到同一个表定义中吗？

sql-server、database、csv、bulkinsert

我有一个非常大的数据库，我需要发送给开发人员，这个表有超过1.2亿行。所以我打算使用sqlcmd -s -d -Q "select top 10000 * from table“-S，”-o“C：\temp\filename.csv，而不是立即截断--我会写出表，重命名并测试大容量插入，然后尝试使用从'c:\temp\filename.csv‘开始的大容量插入表(字段终止符= '，'\n’) 这以“第1行的大容量

浏览 2提问于2015-08-20得票数 0

回答已采纳

1回答

使用实体框架执行许多插入会导致=>物理连接不可用

c#、sql-server、entity-framework、stored-procedures

我使用最新的实体框架，并通过存储过程插入大约425000个实体。码{ { } private static void CreateAttribute(XmlProduct xmlProduct, ProductBase newProdB,

浏览 3提问于2015-10-08得票数 3

1回答

lambda预先创建了比预期更少的parallelStream数据

java、lambda、java-8、parallel-processing

到目前为止，在没有并行流的情况下，foreach迭代创建了写入数据库的预期数据量。基于我在代码中标记的关于非线程安全部件的答案(以及注释中的提示)，我按照以下方式实现了它，最后给出了预期的数据量。性能已经

浏览 4提问于2019-01-29得票数 5

回答已采纳

1回答

BCP问题-我哪里出错了？

sql-server、bcp

有人更改了我正在处理的BCP文件中的行和列分隔符。实际上，clumn过去是连行都听不清的，不需要说明。我现在似乎无法在文件上运行BCP而没有错误。--这里是我的命令语法，我只是更改了密码，等等：-eD:\Error.txt -w -t"|^|" -r"|!|" -Usomename -Psomepass

浏览 2提问于2012-05-19得票数 0

回答已采纳

1回答

使用C#在SQL Server中保存数据的最快方法是什么？

c#、.net、sql-server

我目前正在用C#开发一个小的.NET应用程序，它通过一些web服务来获取数据。我对任何可能支持这一点的框架都是开放的，但我还没有找到任何关于这方面的基准测试，例如在实体框架上。迭代数据和执行每行插入只会很慢，那么将数据转储到文件中，然后使用SSIS进行大容量导入会</e

浏览 0提问于2013-01-06得票数 2

回答已采纳

1回答

弹性搜索大容量插入失败的回滚

python、elasticsearch、bulkinsert、rollback

用例:现在我正在使用表单大容量插入。我尝试了，除了包装在我的批量插入代码，但每当出现任何例外，弹性搜索不会回滚插入的文档。并且也不尝试插入除引发异常的损坏文档之外的其他文档。

浏览 4提问于2017-11-17得票数 0

回答已采纳

1回答

大容量插入会导致事务中止或超时。

c#、sql、sql-server、entity-framework、bulkinsert

问题使用EntityFramework 6数据上下文，我在数据库上运行一个SqlCommand。任何额外的数据，您的要求，以帮助提供一个答案，将给予。

浏览 4提问于2015-04-12得票数 2

2回答

C#将成千上万的行从文本文件快速添加到数据库中

c#、sql-server、sql-server-2008、web-applications、webforms

我让他们在大约10分钟内全部上传到本地数据库，现在对每一行进行更新，以便在此过程中删除所有0分的玩家，并更新自上次更新以来发生更改的所有玩家。问题是，到目前为止，仅仅更新就花了10多分钟。

浏览 2提问于2011-02-16得票数 1

2回答

通过Eclipse连接调试时，如何安全地断开手机连接？

eclipse、debugging、android-emulator、android

所以我不想对我的手机造成任何损坏或伤害。当我连接我的手机时，它显示"USB调试已连接“和”已在媒体传输模式下连接“。如何断开连接？请到公司来。谢谢!

浏览 1提问于2012-03-04得票数 4

3回答

SQL Server是否保证准确的数据存储？如果是这样的话，是怎么做的？

sql-server

我的简短问题是，SQL Server如何保证当我请求将"ABCDE“写入数据库时，"ABCDE”被写入，而不是"ABECD"？有人建议对数据进行重读和比较，以保证相同的结果，并造成明显的性能损失。我工作的公司正在为我们推出一个大容量的产品(每天大约35,000件)，我们将为其收集数据，存储在SQL Server中。以前，低容量产品将数据存储在行中，本地存储在Server数据库中，然后使用跨服务器事务定期复制到服务

浏览 0提问于2010-09-20得票数 8

1回答

如何获取从sql server 2008中导出的csv表或文本文件的数据类型

sql、sql-server、odbc

如何获取批量导出时从SQL Server导出为txt或csv文件的表的数据类型详细信息？谢谢，哈尔

浏览 0提问于2013-02-15得票数 0

回答已采纳

1回答

树莓皮无外硬靴

boot、usb、sd-card、ubuntu-mate

Raspberry Pi 3是使用操作系统Ubuntumate16.04我想使用raspberry作为一个外部硬盘驱动器，而不使用sd卡。有办法吗？我安装了ubuntu-mate-16.04.2-desktop-armhf-raspberry-pi.img

浏览 0提问于2018-05-29得票数 0

回答已采纳

点击加载更多