腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
Spring
Batch
:
读取
多个
json
文件
,
逐个
处理
、
、
我有一个巨大的
JSON
文件
在一个大约200的
文件
夹中,每个大约300MB。我需要编写
Spring
batch
来
读取
文件
并
逐个
进行
处理
。基本上意味着一次
读取
一个
文件
,然后运行
处理
器,然后运行写入器,然后
读取
下一个
文件
,该
文件
基本上是客户数据和活动转储,每个
文件
包含几个用户数据和许多
文件
。},{
浏览 24
提问于2019-03-22
得票数 0
1
回答
Spring
Batch
分区DBtoFile Java配置示例
、
我目前正在使用
Spring
Boot和
Spring
Batch
应用程序从数据库中
读取
200,000条记录,
处理
它并生成XML输出。我编写了单线程
Spring
批
处理
程序,它使用JDBCPagingItemReader从数据库中批量
读取
10K条记录,并使用StaxEventItemReader生成此输出。整个过程需要30分钟。我想通过使用
Spring
Batch
本地分区来增强这个程序。有没有人可以分享Java配置代码来完
浏览 13
提问于2017-07-10
得票数 0
1
回答
我可以使用
spring
batch
单机版的
spring
ItemProcessor吗?
、
、
我的要求是使用
spring
控制器通过
文件
上传功能
读取
CSV、XML、
JSON
、excel格式的
文件
。
读取
文件
转换并保存到数据库中。我想使用像
Spring
Batch
ItemProcessor这样的genericItem
处理
器来
读取
上面的
文件
格式。我的转换逻辑将对所有人通用,然后将其保存到数据库中。有没有什么方法可以在不创建批
处理
作业的情况下以独立的方式使用<em
浏览 20
提问于2020-01-10
得票数 0
2
回答
如何使用MultiResourceItemReader
读取
多个
文件
?
、
、
我有一个tar.gz档案,里面有大约100万个
文件
。我想使用MultiResourceItemReader从
spring
-
batch
读取
这些
文件
。但是我不想在导入开始之前初始化所有的1mio
文件
。相反,我希望让MultiResourceItemReader
逐个
文件
读取
归档
文件
,并通过批
处理
导入传递每个
文件
,而不是在启动时分配所有
文件
。
浏览 2
提问于2016-01-07
得票数 1
2
回答
java 8并行流与
spring
batch
的比较
、
、
、
使用
spring
调度器,每5秒轮询一次所有消息,然后使用Java8的并行流在数据库中持久化,因为所有流都是独立的。2.)有人建议使用
spring
batch
,但不幸的是,我没有得到关于使用
spring
batch
的充分解释。 你能提出一些建议和解释来帮助我吗,比如哪一个更有用,哪个更好?
浏览 0
提问于2017-10-14
得票数 2
3
回答
从Aws S3中
读取
春季批
处理
文件
、
、
、
我正在尝试从AWS S3
读取
文件
并使用
Spring
处理
它:<bean id="itemReader" class=""org.springframework.
batch
.item.file.FlatFileItemReader
浏览 7
提问于2015-06-14
得票数 10
1
回答
春季批
处理
-将资源名称从MultiResourceItemReader > FlatFileItemReader传递给StepExecutionListener
、
、
我有一个
Spring
批
处理
作业,需要执行以下操作
读取
文件
并委托给MultiResourceItemReader的FlatFileItemReader。FlatFileItemReader使用LineMapper,F
浏览 1
提问于2014-07-18
得票数 2
1
回答
如何在
Spring
批
处理
模块中一次
读取
多个
文件
?
、
、
我希望我的
Spring
批
处理
模块一次
读取
多个
文件
。目前,我的批
处理
模块一次只能
读取
一个
文件
,但是我可以从批
处理
模块
读取
多行。我如何实现这一点?<core type="BatchCreate" class="com.
batch
.BatchCore" concurrency="1" start="20" stop=&q
浏览 1
提问于2018-01-30
得票数 2
1
回答
spring
批量
读取
多个
目录的
文件
我需要从
多个
目录
读取
文件
,然后
处理
数据并将其存储到数据库中。目前我正在使用块多资源阅读器,它在1个目录下运行良好。但现在我必须从
多个
目录中
读取
文件
。如何使用
spring
batch
完成此操作
浏览 1
提问于2016-03-18
得票数 1
2
回答
如何用
spring
batch
解析
json
文件
?
、
、
、
我有一个以
json
格式写入
文件
的序列化实体列表。我需要使用
spring
batch
从
文件
中
读取
它们(然后
处理
它们并写入DB)。 我发现
spring
batch
只提供了平面
文件
、DB和Xml阅读器。解析
json
的正确方法是什么?它不会违反任何
spring
-
batch
原则吗?或者我应该使用另一个?
浏览 0
提问于2013-03-04
得票数 2
2
回答
Spring
batch
逐个
读取
文件
。
文件
内容不是常量
、
MultiResourceItemReader按顺序
读取
所有
文件
。因为
文件
内容不是恒定的,所以我不能使用块大小。对于决定
文件
内容结尾的区块策略有什么想法吗?
浏览 0
提问于2020-08-05
得票数 0
1
回答
在SpringBoot +
Spring
Batch
中
读取
多个
文件
并
处理
、
、
我正在使用
Spring
batch
和
spring
boot。我在
处理
多个
文件
时遇到问题。Sourcefile1.txt:ajay, 22, 2000Sourcefile2.txt:name, addressajay, uk 我想使用
spring
boot和
spring
<
浏览 0
提问于2017-05-24
得票数 0
1
回答
Spring
Batch
:仅适用于消防服务的作业
、
、
、
我目前有
多个
Quartz轮询器,它们检查数据库中的
多个
标志,如果标志为真,则触发服务,并且我还有一个
spring
batch
项目
读取
文件
,然后调用服务来相应地更新信息。我想知道的是,是否有可能让
spring
batch
应用程序每隔5分钟调用一次服务(不检查任何信息,只调用
处理
所有业务逻辑的服务),这样我就可以从应用程序中删除Quartz作业,所有作业都在一个地方(
spring
batch
项目)?如果是
浏览 0
提问于2014-12-22
得票数 0
1
回答
Spring
Batch
和Executors框架
、
、
、
、
这两个框架是用于相同目的的吗?如果不是,为什么以及如何在实时应用中使用这些?有没有什么教程可以学习这些。
浏览 26
提问于2017-01-06
得票数 1
回答已采纳
2
回答
Spring
Batch
适合我的服务代码吗?
、
、
批
处理
集成到上述模式中。我一直在看
Spring
getting started guide for
batch
processing here --特别关注BatchConfiguration.java的源代码--我不确定我的应用程序是否适合
Spring
Batch
,也许我对
Spring
Batch
的不完全了解和它的各种实现方式阻止了我对它的概念化。下面的BatchConfiguration.java代码告诉我,
Spring
Batch</e
浏览 0
提问于2017-04-28
得票数 1
1
回答
将
Spring
批
处理
作业重构为使用Apache (解耦
读取
器和作者)
、
、
我目前有一个
Spring
作业,只需一个步骤就可以从Oracle
读取
数据,通过
多个
Spring
处理
器(CompositeItemProcessor)传递数据,并将数据写入不同的目的地,如Oracle (CompositeItemWriter此外,dataReader有一个同步
读取
方法,以确保
多个
线程不会从Oracle
读取
相同的数据。从今天起,这项工作需要1小时30分钟才能完成。我计划将上面的工作分成两个部分,这样阅读器/
处理
器
浏览 3
提问于2020-09-02
得票数 0
1
回答
用于
处理
大型
处理
csv
文件
的
Spring
批
处理
我有一个5 5gb的CSV
文件
,我正在尝试使用
Spring
Batch
处理
该
文件
(
读取
、
处理
数据,并将其发布到JMS)。要做到这一点,最好的方法是记住不要将
文件
拆分为较小的
文件
,并且所有记录都必须
处理
。
Spring
Batch
是否具有
处理
和写入来自源的数据的能力?有没有办法告诉
Spring
Batch
从
文件
中<
浏览 4
提问于2017-12-08
得票数 0
2
回答
Spring
处理
后从目录中删除平面
文件
、
、
在春季批
处理
中,我使用MultiResourceItemReader从目录中
读取
多个
文件
。然后,我使用FlatFileItemReader作为委托来
处理
单个
文件
。我的用法是在
文件
被完全
处理
后删除它(读-写完成了),然后multiResourceitemReader必须选择另一个
文件
,并且它必须继续。我尝试过FileDeletingTasklet删除目录中的
文件
,但是根据
Spring
,执行方法只会被调
浏览 2
提问于2014-04-27
得票数 7
回答已采纳
1
回答
FlatFileItemReader在
处理
完
文件
后会
读取
相同的
文件
、
我正在编写一个
Spring
批作业调度程序。为此,我需要
读取
多个
特定模式的
文件
--我配置了如下所示的xml .问题:当我将代码部署到每15分钟运行一次的应用程序服务器上时,在
读取
一些像FILE1_2015_03_04.txt这样的
文件
之后,
处理
就完成了,并且这些
文件
是archived.Now -- fileLocation没有以前的
文件
或可能有不同的
文件
名,但是
spring
批
处理
尝试
浏览 2
提问于2015-05-07
得票数 0
1
回答
如何使用
spring
batch
从db中的
多个
表中
读取
数据
、
我尝试使用
spring
batch
从一个表中
读取
数据并将数据写入其他表,但现在我的要求是从
多个
表中
读取
数据并写入
文件
,因此我们可以通过定义
多个
作业来实现这一点,但我想使用单个作业来实现,这意味着单个
读取
器、单个写入器和单个
处理
器。
浏览 1
提问于2015-06-12
得票数 1
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Spring Batch之批处理实践
Spring Batch 在大型企业中的最佳实践
Spring Boot与Kotlin Web应用的统一异常处理
一个关于“程序猿”的好消息—Spring Batch入门知识
Java近期新闻: JReleaser 1.2、Spring Batch、PrimeFaces、Quarkus、JobRunr与Apache Beam
热门
标签
更多标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
活动推荐
运营活动
广告
关闭
领券