腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(3628)
视频
沙龙
1
回答
Spring
Batch
-
MongoItemReader
未
读取
所有
记录
spring
、
mongodb
、
spring-boot
、
spring-batch
我创建了一个
Spring
批处理作业,它从MongoDB
读取
订单并进行rest调用以上传订单。但是,即使
MongoItemReader
没有
读取
所有
记录
,批处理作业也会自动完成。
MongoItemReader
读取
{batchProcessed:{$ne:true}}的
记录
,因为我需要多次运行批处理作业,而不是一次又一次地处理相同的文档。@Beanpublic
MongoItemReader
<
浏览 54
提问于2021-04-15
得票数 1
回答已采纳
1
回答
无法解析mongodb.core.ExecutableFindOperation
mongodb
、
spring-boot
、
spring-batch
我正在使用
Spring
boot编写一个
Spring
批处理。读者:它应该从Mongo DB集合中
读取
作者:只需打印一些消息s.c.a.AnnotationConfigApplicationContext : Exception<Report> reader() { rea
浏览 0
提问于2018-05-31
得票数 0
1
回答
Mongo弹簧批次
java
、
spring
、
mongodb
、
spring-data-jpa
、
spring-batch
我用mongodb创建了
spring
批处理应用程序,我使用了
MongoItemReader
和MongoItemWriter,我的批处理应用程序工作正常,知道我的怀疑是,一旦我运行该批处理,它正在正确地处理
记录
,但是如果我再次运行同一批
记录
,它将显示Job status as completed,根据我对非跨国数据库(如mongodb
spring
batch
)的了解,不会创建元表,就像我的数据库中也没有创建元表一样
浏览 2
提问于2018-06-17
得票数 0
回答已采纳
1
回答
在
Spring
中创建名为“batchConfigurer”的bean时出错
spring
、
mongodb
、
spring-boot
、
spring-batch
我有一个使用
spring
编写的
Spring
批。我的批处理只从MongoDB
读取
并打印
记录
。在我的pom.xml中,我添加了下面的依赖项:
spring
-boot-starter-data-mongodb下面是我的批处理配置类:@EnableBatch
浏览 0
提问于2018-06-01
得票数 1
回答已采纳
1
回答
对于
Spring
Batch
MongoItemReader
上的属性,无法将Query类型的值转换为必需的类型“java.lang.String”
java
、
spring
、
mongodb
、
spring-batch
、
spring-data-mongodb
我正在编写一个
Spring
批处理作业,它使用开箱即用的
MongoItemReader
。我的工作是通过XML配置的。org.springframework.beans.AbstractNestablePropertyAccessor.convertIfNecessary(AbstractNestablePropertyAccessor.java:585) <bean id="
mongoItemReader
"
浏览 48
提问于2019-08-21
得票数 2
1
回答
Spring
MongoItemReader
没有
读取
单次执行时的
所有
记录
mongodb
、
spring-batch
).writer(orderWriter())@Beanpublic
MongoItemReader
<OrderCollection> orderReader() throws Exception { reader.setTempl
浏览 7
提问于2017-08-10
得票数 2
回答已采纳
2
回答
如何在
spring
batch
中通过
MongoItemReader
使用聚合查询
java
、
mongodb
、
spring-batch
我的聚合查询已经准备好了,但是不确定如何在
spring
batch
中使用它
mongoItemReader
.setTemplate(myMongoTemplate);
mongoIte
浏览 3
提问于2017-08-24
得票数 4
1
回答
Spring
Batch
如何使用web服务,以及如何
读取
web服务输入?
web-services
、
spring-batch
我是
Spring
Batch
的新手。我想知道
Spring
batch
如何使用web服务,以及如何让
spring
batch
从web服务(如transaction_id = 125 )
读取
输入 为了清楚起见,我希望
spring
batch
从web服务(ID = 125)
读取
输入,查询输入,然后对该
记录
进行一些计算,最后更新
记录
浏览 8
提问于2013-04-23
得票数 2
1
回答
如何让itemWriter创建文件?
java
、
gradle
、
spring-batch
我的项目应该从Mongo接收信息,然后
读取
它,处理它,然后创建.txt文件并将信息存储在该文件中。我做错了什么或者我错过了什么?private PaymentPortalJobListener listener;private MongoTemplate mongoTemplate; public
MongoItemReader
<PaymentAudit> reader = new
MongoItemReader
<PaymentAudit> reader.se
浏览 0
提问于2018-10-31
得票数 0
1
回答
Spring
Batch
块处理
java
、
spring-batch
当在
Spring
Batch
中使用块处理(指定提交间隔)处理步骤级别时,是否有一种方法可以在写入器中知道何时
读取
了文件中的
所有
记录
,processed.My的想法是一旦
读取
了
所有
记录
,就将从文件
读取
的
记录
集合传递到
浏览 3
提问于2015-07-29
得票数 0
3
回答
执行CommandLineRunner -
Spring
批处理失败
spring
、
spring-boot
、
spring-batch
嗨,我是
Spring
batch
的新手,我得到了以下我无法解决的异常:at org.springframework.boot.autoconfigure.
batch
.JobLauncherCommand
浏览 19
提问于2018-05-05
得票数 6
回答已采纳
2
回答
Spring
Batch
多线程vs分区
spring-batch
我有一个需求,我想在下面的场景中使用
Spring
batch
框架。 我有一个对交易日期列进行分区的表。我想使用
Spring
batch
框架的
读取
器、处理器和写入器来处理这个表的
记录
。我想做的是创建单独的线程
读取
,写入和处理基于交易日期。假设有4个交易日期,然后我想创建4个单独的线程,每个单独的交易日期。在每个线程中,
读取
器将从表中
读取
该交易日期的
记录
,在处理器中丰富
记录
,然后在写入器中发布/
浏览 0
提问于2014-07-07
得票数 0
1
回答
使用
Spring
Bach处理百万条
记录
,包括模式匹配
spring
、
design-patterns
、
matching
我的用例如下: 1)从Db2数据库中
读取
2000万条
记录
,并从Db2中
读取
筛选条件,其中涉及多个列,其中一些列的模式类似于值为%EMP%的列A。2)现在,对于规则的每个组合,过滤20M数据集上的数据,同时更新具有指示此
记录
被过滤掉的标志的数据库列。3)在过程结束时,我们将调用Informatica工作流,该工作流将获取20M的
未
过滤
记录
并对其进行处理。我们不希望将过滤逻辑放在Informatica上,因为这样做的代价很高,所以要寻找一个使用
Spring
Batc
浏览 3
提问于2015-02-14
得票数 0
1
回答
用于处理大型处理csv文件的
Spring
批处理
spring-batch
我有一个5 5gb的CSV文件,我正在尝试使用
Spring
Batch
处理该文件(
读取
、处理数据,并将其发布到JMS)。要做到这一点,最好的方法是记住不要将文件拆分为较小的文件,并且
所有
记录
都必须处理。
Spring
Batch
是否具有处理和写入来自源的数据的能力?有没有办法告诉
Spring
Batch
从文件中
读取
X行,处理并写入(提交),然后从文件中抓取下一X行,同时跟踪它已经处理了哪些行 请在这方面帮帮我。
浏览 4
提问于2017-12-08
得票数 0
1
回答
如何在像JDBCCursorItemReader这样的
spring
批处理中流式传输web服务中的
记录
stream
、
spring-batch
、
batch-processing
、
chunking
用例是从REST web服务中
读取
大量数据,列出数百万个对象,处理它们,然后将它们写回某个地方。问题是我不想一次
读取
web服务中的
所有
数据。我想从web服务中
读取
总结果的一个子集,一次
读取
几个
记录
/对象,这样我就不会因为从
spring
batch
阅读器中一次性
读取
所有
数据而冒着耗尽内存的风险。有没有办法做到这一点?
Spring
Batch
提供了用于从外部服务(而不是从数据
浏览 1
提问于2015-05-14
得票数 0
2
回答
关于事务管理的问题
java
、
multithreading
、
spring-batch
我正在尝试用
Spring
实现一个业务需求,但在事务管理方面遇到了一些问题。1)使用某些条件查询数据库(#1)。4)作为前3步的结果,将
记录
插入另一个数据库(#2)。 我需要这4个步骤是传递性的。例如,如果第四步失败,则应回滚第二步中写入平面文件的最后一项。我的导师建议我在这类项目中一般使用
Spring
Batch
。然而,考虑到
Spring
Batch
使用“面向块的处理”
浏览 2
提问于2011-03-03
得票数 3
2
回答
Spring
Batch
-N次循环
读取
器、处理器和写入器
spring
、
spring-mvc
、
spring-boot
、
spring-data
、
spring-batch
在
Spring
Batch
中,如何将
读取
器、处理器和写入器循环N次?我有"N“否。客户/客户。对于每个客户/客户,我需要从数据库(Reader)获取
记录
,然后我必须处理(处理器)客户/客户的
所有
记录
,然后我必须将
记录
写入文件(Writer)。 如何将
spring
批处理作业循环N次?
浏览 1
提问于2017-08-29
得票数 1
1
回答
当我们在
Spring
Batch
中使用singleItemPeekableItemReader来
读取
csv时,是否可以使用多线程?
spring
、
multithreading
、
spring-batch
当我们在
Spring
batch
中使用singleItemPeekableItemReader来
读取
CSV时,是否可以使用多线程?我有一个包含100000条
记录
的CSV文件,需要使用
Spring
Batch
读取
该文件并将其加载到数据库中。我已经为它使用了4个线程。但是现在我有一个需求,那就是根据条件组合行,并一次
读取
。为此,我使用了
Spring
Batch
的SingleItemPeekableItemReader。但
浏览 0
提问于2018-06-11
得票数 1
1
回答
Spring
Batch
分区DBtoFile Java配置示例
spring-batch
、
partitioning
我目前正在使用
Spring
Boot和
Spring
Batch
应用程序从数据库中
读取
200,000条
记录
,处理它并生成XML输出。我编写了单线程
Spring
批处理程序,它使用JDBCPagingItemReader从数据库中批量
读取
10K条
记录
,并使用StaxEventItemReader生成此输出。整个过程需要30分钟。我想通过使用
Spring
Batch
本地分区来增强这个程序。有没有人可以分享Java配置代码来完
浏览 13
提问于2017-07-10
得票数 0
1
回答
文件中的
spring
批处理随机访问以实现二进制搜索
java
、
file
、
spring-batch
我能够使用Itemreader
读取
文件并找到行,但问题是我有100万条
记录
要处理,所以时间复杂度很高。 (一)线性搜索需要更多的时间,因为文件有大量的数据。
浏览 0
提问于2019-02-06
得票数 2
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
一个关于“程序猿”的好消息—Spring Batch入门知识
Spring Batch 在大型企业中的最佳实践
深入浅出MyBatis:MyBatis与Spring集成及实用场景
什么是事务、事务特性、事务隔离级别、spring事务传播特性
Spring事务相关总结
热门
标签
更多标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
活动推荐
运营活动
广告
关闭
领券