首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >问答首页 >处理elastic search失败-如何在Dynamodb和Elastic Search中同步记录?

处理elastic search失败-如何在Dynamodb和Elastic Search中同步记录?
EN

Stack Overflow用户
提问于 2018-04-16 21:00:53
回答 2查看 219关注 0票数 0

我正在使用AWS Dynamo DB和Elastic Search。我正在寻找一些方法来保持Dynamo DB数据与Elastic Search同步,如果其中任何一个失败的话。

目前我使用lambda将我的记录推送到Elastic Search中。我知道有可用的plugin - Logstash,但我不能使用它,因为它需要很多更改。另外,我不喜欢扫描DynamoDB表,因为它太贵了。有没有其他方法可以做到这一点?

EN

回答 2

Stack Overflow用户

发布于 2018-04-16 23:53:52

如果您不想使用插件解决方案,您可以继续使用由DynamoDb Streams触发的lambda。通过这种方式,您应该不必扫描表,因为流将具有添加的项,并且您可以重用将其发送到ES的部分。

看看DynamoDB Streams and Lambda triggers吧。

票数 0
EN

Stack Overflow用户

发布于 2018-09-25 13:54:43

您可以使用SQS。将失败的记录移动到SQS,稍后您可以安排一个lambda从SQS读取记录,并将记录发送到ElasticSearch。

票数 0
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/49857988

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档