Spring JDBC模板batchUpdate在一个数据库中更新成千上万条记录

文章/答案/技术大牛

发布

1回答

Spring JDBC -批量删除和插入

java、jdbc、spring-jdbc、jdbctemplate

在我的应用程序中，我有一个包含大约200K条记录的表，我需要在数据库中更新这些记录。与其检查数据库中是否存在匹配的记录，然后插入或更新，我认为更快的方法是删除数据库中所有匹配的记录并插入它们。我使用的是Spring JDBC框架。对于delete，我使用了带有ParameterizedPrep

浏览 3提问于2013-10-04得票数 1

1回答

java、oracle、sql-update、spring-jdbc、batch-updates

我有一个正在尝试通过spring jdbc模板的batchUpdate方法执行的更新查询。此更新查询可能会匹配EVENT_DYNAMIC_ATTRIBUTE表中需要更新的数千行。更新表中的数千行除了超时之外，还会在生产数据库中引起任何问题吗？例如，它会使数据库崩溃或降低其他connections...etc的整个数据库引擎的性能

浏览 17提问于2017-12-10得票数 0

1回答

使用Web应用程序将Excel工作表数据导入到Mysql

mysql、excel、jakarta-ee

我需要上传数据在一个excel表到数据库使用java。excel工作表将由用户使用web应用程序(Servlets和JSP)每月上传一次。excel工作表将有成千上万条记录/行，例如大约15000条或更多。在数据库中上传这些海量数据的最快方法是什么？我们使用简单的JDBC (Spring的JDBC模板)。

浏览 7提问于2018-05-09得票数 0

9回答

为什么Spring的jdbcTemplate.batchUpdate()速度这么慢？

java、mysql、spring、spring-batch、jdbctemplate

在此之后，我尝试以如下方式使用jdbcTemplate.batchUpdate：min900ms，avg1100ms，每批max2000ms 那么，有谁能向我解释，为什么jdbcTemplate在这种方法中做分离的插入呢？为什么方法的名称是batchUpdate？或者

浏览 86提问于2013-12-03得票数 36

1回答

Spring NamedParameterJdbcTemplate batchUpdate -一次错误的插入导致整个批次失败

java、spring、oracle、jdbc、spring-jdbc

我正在使用spring的NamedParameterJdbcTemplate batchUpdate向Oracle11g数据库插入批处理。我构建了参数数组，并将它与sql一起传递给batchUpdate方法，如下所示：这个行为是可配置的吗？我希

浏览 19提问于2013-11-02得票数 1

0回答

如何在batchUpdate期间覆盖Spring JDBCTemplate的事务超时值

java、spring、spring-jdbc、jdbctemplate

我正在调用batch batchUpdate，它通常在一次调用中发送超过50个查询，每个更新查询可能会更新10,000条记录。整个过程很耗时，最终会失败，并出现事务超时异常。在springContext.xml中定义的数据源通过@Qualifier注入到JdbcTemplate中，在springContext.xml中定义的事务超时适用于整个应用程序，但在这个特定的事务中，我想在调用batc

浏览 8提问于2017-12-13得票数 0

回答已采纳

1回答

如何在jdbcTemplate中获取带有替换通配符的完整sql脚本？

java、spring、spring-jdbc、jdbctemplate

nJdbcTemplate.batchUpdate(query, mapSqlParameterSourcesArray); } 我想得到完整的，有效的插入SQL脚本插入到另一个数据库中。有没有办法在spring jdbc模板中实现它？

浏览 137提问于2019-03-07得票数 1

3回答

Hibernate和批量更新

hibernate、jdbc、batch-processing

我正在迭代一个document对象列表，对于每个文档，我需要用Document对象中的一个属性更新一个DOCUMENT_METADATA表。我可以使用标准的JDBC 2.0批处理更新来完成这项工作。然而，JDBC的使用将与我在整个应用程序中使用Hibernate的软件标准背道而驰，我不愿例外。为了使用Hibernate，我必须首先在给定document ID的情况下从我迭代的Document对象中获取Documen

浏览 8提问于2011-10-11得票数 3

回答已采纳

4回答

如何使用spring* JDBC模板批处理在数据库中进行多次插入？*

spring-jdbc

我需要一次在数据库中插入数千条记录。我在我的应用程序中使用了spring JDBC模板。 final int batch

浏览 0提问于2012-03-05得票数 23

回答已采纳

1回答

org.springframework.jdbc.core.jdbcTemplate.batchUpdate对JdbcBatchItemWriterBuilder

spring、spring-boot、spring-batch、spring-jdbc、jdbctemplate

据我所知，jdbcTemplate.batchUpdate用于在一次通信中将多条记录发送到数据库。假设我有1000条记录要更新，而不是从应用程序到数据库的1000条通信，应用程序将在请求中发送1000条记录。来到JdbcBatchItemWriterBuilder，它在作业中的任务组合。我的问题是，如果有1000个记录要通过JdbcBatchItemWriter

浏览 1提问于2020-09-17得票数 0

回答已采纳

1回答

用java多线程方式在数据库中插入或更新多条记录

java、sql、multithreading、jdbc、jdbctemplate

我正在更新数据库中的多个记录。现在，每当UI发送要更新的记录列表时，我必须只更新数据库中的记录。为此，我使用JDBC模板。早期病例jdbcTemplate.batchUpdate(Query, List<object[]> params) 每当出现异常时，我都会回滚整个事务。(更

浏览 0提问于2011-09-22得票数 1

回答已采纳

2回答

Spring :事务不能回滚

spring、jdbc、transactions、rollback

我正在尝试使用基于Spring3.0注解的事务来处理我的服务层。我对spring的事务支持进行了如下配置：我正在使用DataSourceTransactionManager进行事务处理。<bean id="summaryDailyTXManager" class="org.springframework.jdbc.datasource.DataSourceTransactionManager

浏览 0提问于2012-02-20得票数 0

4回答

Spring JDBCTemplate与Plain JDBC在插入大量记录方面的比较

spring、jdbc、jdbctemplate

我们必须在多个表中插入两百万条记录，现在我们正在写入CSV文件，并使用db2导入将其加载到数据库中。我们希望将此逻辑更改为某种JDBC。在研究多个选项时，我混淆了Spring JDBC模板和普通JDBC。假设我想要将100万条记录插入到10个表中，每个表将有10万条记录，并且所有这些都是简单的JDBC语句(不

浏览 8提问于2010-12-14得票数 2

2回答

Spring JdbcTemplate batchUpdate处理异常

spring、jdbc、jdbctemplate、spring-jdbc、batch-updates

目前我们的代码使用JdbcTemplate的batchUpdate方法进行批量插入。片段在这里。<Item> listOfItems) { getJdbcTemplate().<

浏览 11提问于2012-03-22得票数 5

1回答

在Spring + mysql中具有酸性特性的BatchUpdate

java、mysql、spring、jdbctemplate

在使用SimpleJdbcTemplate.batchUpdate(List<Object[]>)的批处理插入过程中，输入批处理中将有重复的记录(基于我们要输入的表的主键)。在重复记录的情况下，是否可以 2)完全回滚batchInsert，不应插入记录？我们能够使用mysql的“插入忽略”部分实现第一个要求。但是SimpleJdbcTemplate.<em

浏览 4提问于2012-07-11得票数 1

回答已采纳

1回答

批量插入spring* jdbc模板标识失败的记录*

spring、insert、bulk

我使用spring jdbc模板将数据批量插入到数据库中。我可以做正向插入，但要识别失败的记录，因为我有一个场景，将失败的记录插入到错误表中，将正记录插入到另一个表中。找到下面的代码，我正在尝试。bulkDataList.size() : j + batchSize); resultCount =

浏览 19提问于2019-09-27得票数 1

1回答

如何将对象列表传递给Spring* Controller以进行多行插入？*

javascript、html、spring、jdbctemplate

有一个输出HTML5页面的jsp。HTML5有两个按钮-“添加”和“保存”。HTML5本地存储功能用于存储离线数据。单击“添加”按钮可添加一条记录。因此，如果用户在jsp页面上填充字段5次，并单击"Add“按钮5次，则会向HTML5表中添加5条记录。当单击"Add“按钮时，会运行一个javascript，它会将记录添加到结果集中。因此，对于5次单击，javascript结果集包含5条记录

浏览 1提问于2012-09-15得票数 0

回答已采纳

1回答

Spring Kafka JDBC连接器兼容性

spring-boot、spring-kafka、apache-kafka-connect、confluent-platform

Kafka JDBC connect兼容Spring-Kafka库吗？我确实关注了，但仍然有一些困惑。

浏览 4提问于2020-07-04得票数 0

2回答

将数百万条记录从一个数据库复制到另一个数据库- Spring + Spring

java、spring、spring-boot、spring-jdbc

在一个小示例中，必须将数百万条记录从复制到Oracle。将数据插入到目标数据库Oracle中。在来自源数据库的SQL查询中使用teradata的“top 1000”。这个视图有4000万个记录，如果它运行的话，spring引导应用程序就会窒息。还在目标Oracle DB中插入两个表(主表和备份表)。：获取和加载/复制4,000万条记录的最佳方法是确保将

浏览 2提问于2017-06-28得票数 1

2回答

有没有办法使用jdbctemplate将从文件中读取的sql批量插入到数据库中？

spring-boot、spring-data-jpa、spring-data、jdbctemplate、vertica

我想批量插入大约50000条记录到vertica数据库中。我在我的应用程序中使用了spring JDBC模板，并且我将所有这些sql保存在一个文件中，我知道有一种方法可以通过注入参数来批量插入，比如使用preparedstatement，但是如何通过sql直接批量插入它们呢

浏览 7提问于2021-05-19得票数 0

点击加载更多

Spring JDBC -批量删除和插入