上载超过1000条记录时的ADFDI性能问题
上载超过1000条记录时的ADFDI性能问题
提问于 2020-04-29 18:33:43
我已经开发了ADF DI excelsheet通过它上传批量数据。但是，虽然我保存它上传1000个数据，但它需要大量的时间，近35分钟。
我已经尝试将批量大小从500减少到50，然后是10。
但是upload部分没有改进。我试着从excel表格中生成日志文件来监控这个过程。在这种情况下，在批处理71提交之后存在日志暂停。
这里处理了批次71 - 10 * 71 = 710个数据。它可以是错误常量，也可以是成功。
任何改进的建议都将受到感谢，并非常有帮助。
回答 1
Stack Overflow用户
发布于 2020-05-22 06:45:27
通常，应将提交批处理大小保留为100。基本日志文件(文档ID 2094378.1)将提供一些上传统计信息。确保您使用的是最新版本的加载项(文档ID 2244542.1)
上传吞吐量的主要决定因素是后端业务逻辑，特别是模型层中昂贵的验证(例如ViewObject)和/或昂贵的SQL查询。
您可以使用JDeveloper对服务器的运行时间进行分析，以查找那里的瓶颈。
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接：
https://stackoverflow.com/questions/61499743
复制相关文章
相似问题
腾讯云开发者
