插入PYTHON中CSV记录表中不存在的记录

文章/答案/技术大牛

发布

0回答

python、mysql、database、pymysql

如果在csv文件中没有什么新的东西，我希望插入查询不做任何事情，如果是的话，我只想插入这个，而不是所有的csv，任何建议都会很棒！PS:它与其他问题没有重复，因为这里我们有"%s“没有稳定的值，而在python中它的语法是不同的！varchar(255),web varchar(255),PRIMARY KEY(id))" cursorobject.execute(sql

浏览 1提问于2018-07-18得票数 0

2回答

MySQL比较现有记录

mysql、csv、import

我只想得到关于做以下事情的最佳方法的建议:我有一个csv文件，这个文件包含用户及其信息。在我将其输入到MySQL数据库之前，我需要将CSV文件的电子邮件列与数据库中的电子邮件列进行比较，如果存在，则不插入，如果不存在，则插入。除了手动以外，我还能如何完成此过程？我会非常感谢你的想法。我只想提一下，我的方式是手动的(我知道这很愚蠢，但我不太擅长SQL)我所做

浏览 1提问于2013-10-13得票数 0

2回答

替换表的最佳方法

sql、postgresql

我有一个web应用程序运行一个从csv文件生成的数据库表。落地活桌

浏览 1提问于2018-08-28得票数 1

回答已采纳

2回答

检查MYSQL中是否存在要插入或更新的记录

php、mysql、csv、left-join

每周我都需要将50K~200 K的记录从一个原始的CSV文件加载到我的系统中。目前，我的解决方案是将CVS加载到临时表(进程结束后将其清空)，然后运行我的存储过程，将数据操作到系统中的不同相关表。如果已经存在的记录将运行update查询( CSV中80%的记录已经在我<em

浏览 2提问于2015-09-21得票数 1

1回答

ActiveRecord::RecordInvalid:验证失败:加载CSV的时，项必须存在

ruby-on-rails、ruby、api、csv

当我尝试运行我的rake任务时，rake import:master当我尝试运行单独的rake任务：rake import:item时，我将进入rails控制台，它将不显示任何已加载的项。这是我的rake文件：namespace :import do desc "Imports all C

浏览 0提问于2018-11-29得票数 0

1回答

在MySQL中批量导入CSV文件删除重复项，同时从CSV导入动态colmns

mysql、sql、sql-server、database、export-to-csv

我必须在我的系统中为不同的客户端导入CSV文件，其中一些带有、一些…等分开了。总是很大的文件。导入时我需要过滤重复的记录，重复的记录不应该插入到dB中。客户端1数据库： 95%的数据总是相同的每一个新的</

浏览 1提问于2015-09-01得票数 1

3回答

如何防止SSIS从数据库中已存在的文件中导入数据？

sql、ssis

每天我都会将一些csv数据加载到我的表中。并且我的表有日期列，现在我需要使用回滚函数，这样，如果数据已经存在于我的表中，它必须回滚，否则它必须根据我的Asofdate参数进行插入。我的表有eid，ename，has data列，现在当我每天插入新文件时，它必须根据截止日期来查看该文件是否已经存在于该表中，如果数

浏览 3提问于2012-04-25得票数 2

1回答

如何在MySQL表中捕获新的插入

python、mysql

我想捕获提交到Python表中的新插入，并在MySQL中处理这些记录。例如:在一个"Order“表中，每次客户下订单时都会插入一条新记录。我想实时捕捉对Table所做的更改，并在Python中处理它，以便例如将此记录写入csv文件。要做到这一点，最佳的方法是什么？我在考虑每秒运行

浏览 10提问于2021-07-28得票数 0

回答已采纳

2回答

.csv (44k记录)导入到MySQL数据库时出现代理错误

php、mysql、drupal、csv、import

我正在尝试将巨大的.csv文件导入数据库。它是Drupal数据库，我将产品导入到节点、content_type_和uc_products表中。但这与性能优化无关，因为我停止使用Drupal函数node_load和/或node_save，我直接通过SQL命令插入/更新记录。从本地服务器读取整个csv文件(大约。>如果不存在，插入它(3插入，1更新) 6.1。如果记录</e

浏览 9提问于2012-01-11得票数 0

1回答

基于另一个表ReferenceID更新/插入大表记录。

php、mysql、database、codeigniter、database-trigger

，并从商家的CSV文件中导入新的库存数据(大约600万条记录)。所需的功能是，每天我需要运行一个脚本，将循环通过库存表记录，并为MODELNO更新库存表上的库存，如果库存表中的记录不存在，那么它需要添加。到目前为止，我尝试的是一个PHP脚本，它可以。a.首先，在库存表中将所有记录的状态设置为

浏览 1提问于2017-01-31得票数 0

2回答

使MySQL数据库与轮询数据保持同步

php、mysql、sql、database、pdo

我有一个有趣的情况，我经常从服务器轮询数据。我无法控制它提供的内容，所以我只能处理它提供给我的内容。例如，在某一时刻，我可能有3个I 1001、1002、1003。我可以很好地将它们插入到数据库中，但是，如果我现在有1001和1003会怎么样呢？更新数据库以反映这

浏览 1提问于2014-01-11得票数 0

2回答

R- dbWriteTable还是MySQL删除查询？

mysql、r、database、dataframe

这对于创建表的初始运行非常有用，但是每次运行之后，我都需要执行一个insert或update，这取决于表中的记录是否已经存在。数据帧中的第一列是主键，其他记录包含的数据可能在每次我提取csv的新副本时都会改变。每次我提取CSV时，如果主键已经存在，我希望它用新的数据更新记录，如果主键不存在(例如:自上次运行以来

浏览 0提问于2015-11-22得票数 0

回答已采纳

1回答

如何加快postgresql中插入值的执行

python-2.7

" VALUES (%s, %s, %s)", (row.split('::')[0],row.split('::')[1],row.split('::')[2])) 我在.dat文件中有1000万条记录，我正在使用python将它们加载到表中。有什么可以缩短时间的吗？

浏览 2提问于2015-09-13得票数 2

回答已采纳

1回答

在SQL Server中使用CSV文件进行大容量插入

sql、sql-server、csv

我有一个包含10000行的.CSV文件。这些行需要插入/更新到SQL Server数据库表中。一种可能的解决方案是，我可以逐行读取，检查数据库中的条目，并相应地构建插入/更新查询

浏览 0提问于2014-04-12得票数 1

回答已采纳

2回答

修正Innodb完整性约束违反: 1452

php、mysql、magento、foreign-keys、constraints

我可以使用什么Innodb查询来纠正以下问题？

浏览 0提问于2012-09-27得票数 3

1回答

选择结果中的SELECT表变量

sql-server、tsql、variables、insert

我有一个(旧的) ICD代码表，我想将新记录(~90k记录)插入到旧记录中。如果不存在ICD代码，则插入，如果是更新。问题是要插入的数据来自一个表调用IcdImportData (从.csv文件导入)，我需要创建一个变量表，其中包含旧表和新ImportData表的比较值。我要问的内容：希望从返回多条记录

浏览 0提问于2014-03-27得票数 0

回答已采纳

4回答

无法插入数据的外键冲突

sql、asp-classic、foreign-keys

我有两个表，有以下字段：学生硕士stu_id(primary key)classsub_id(foreign_key)主题sub_id(primary key)但是，当我在表单中插入条目时，它会出现以下错误。冲突发生在数据库"test2“、表"dbo.subject”、列‘sub’**中。请帮忙我哪里错了？？

浏览 4提问于2012-09-06得票数 1

3回答

我需要创建一个新的ETL C#进程，其中包含大量的.CSV文件到SQL表中，添加/更新记录

c#、sql-server、csv、upsert

我需要将许多.CSV文件引入到唯一的键控SQL表中(表名和列名从一个源匹配到另一个目标)。我开始研究像Cinchoo这样的libs，但是我需要做一个"Upsert“，意思是如果记录不存在的话，更新如果记录存在的话。我不确定Cinchoo或其他lib是否内置了这个特性。例如，假设表中有一些记录，Cust#是一个主键1鲍勃CSV文件如下所示： C

浏览 2提问于2021-02-24得票数 0

回答已采纳

1回答

如何解决此错误- ORA-02291:违反完整性约束(YXK.SYS_C0010166) -找不到父键

sql、oracle

如何解决代码导致的以下错误？这是我的错误：* ERROR at line

浏览 0提问于2020-08-20得票数 0

3回答

避免向SQL表中插入重复记录

c#、sql

我有一个windows服务，它基本上监视文件夹中的任何CSV文件。CSV文件中的每条记录都插入到SQL表中。如果将相同的CSV文件放在该文件夹中，可能会导致表中的记录条目重复。如何避免重复插入到SQL表中？

浏览 3提问于2013-06-27得票数 0

回答已采纳

点击加载更多