首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >问答首页 >JSR 352: Java Batch的最佳实践是什么,以确保最大的性能和效率?

JSR 352: Java Batch的最佳实践是什么,以确保最大的性能和效率?
EN

Stack Overflow用户
提问于 2016-07-18 19:40:51
回答 1查看 610关注 0票数 3

我正在从数据库中执行典型的读取操作,并且我将在具有数百万(>1000万)条记录的数据集上处理和写入文件步骤。

从设计或架构的角度来看,有什么需要牢记的吗?

另外,是否有需要牢记的Java批处理特定的编码实践?(除了一般的java最佳实践之外)

我使用的是IBM在Websphere using上实现的JSR352。

EN

回答 1

Stack Overflow用户

发布于 2016-07-18 19:46:33

  1. 不执行可重复读取。如果您确实要确保所有内容都在内存中。考虑一级缓存。
  2. 确保您没有N+1选择。
  3. 快速网络访问对于性能至关重要-考虑10G cache并行化。并行读取数据库,不要并行文件访问,除非你知道你的文件系统上有1个以上的磁盘可以并行工作。
  4. 是你的数据模型关系-是的考虑hibernate,不考虑从数据库中分成大块的Jdbc template.
  5. Read。如果在写入文件之前对数据进行了后处理,请为此分配足够的内存。
  6. 。如果你有一个来自数据库的只读操作,那就执行
  7. 。你不需要可恢复性。操作已完成或失败。如果您不需要为工作选择保留中间状态,这将为您提供额外的性能提升。
票数 3
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/38435821

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档