我使用Java代码索引从甲骨文到ElasticSearch的大量记录(200k)。我能够正确地索引它。现在,如果我的Oracle数据库中有任何记录被修改,那么修改后的记录也需要在ElasticSearch中建立索引。
因此,我如何才能只索引修改过的记录,而不是索引整个记录。elastic search中有没有什么功能,它只能识别修改过的文档和只识别特定文档的索引。
我通过网络服务获取我的Oracle数据库记录。
发布于 2018-10-09 23:07:45
我不确定你正在寻找的方法,但我可以给你一些想法,你可以从哪里开始。我在Oracle数据库中的工作经验不多,但我有在MySQL上工作的经验。MySQL有binlog
,它跟踪在数据库上完成的操作,我希望在Oracle数据库中一定有一些类似的行(在本答案的上下文中我将称之为binlong
)。您可以使用此binlog
来跟踪操作,然后将其同步到ES集群。
为了同步到您的ES集群,ES已经公开了其创建、更新、删除和读取API。
添加用于解析MySQL的binlog
的开源库:https://github.com/zalora/binlog-parser
希望这能有所帮助!!
https://stackoverflow.com/questions/52722941
复制相似问题