我正在使用AWS Dynamo DB和Elastic Search。我正在寻找一些方法来保持Dynamo DB数据与Elastic Search同步,如果其中任何一个失败的话。
目前我使用lambda将我的记录推送到Elastic Search中。我知道有可用的plugin - Logstash,但我不能使用它,因为它需要很多更改。另外,我不喜欢扫描DynamoDB表,因为它太贵了。有没有其他方法可以做到这一点?
发布于 2018-04-16 23:53:52
如果您不想使用插件解决方案,您可以继续使用由DynamoDb Streams触发的lambda。通过这种方式,您应该不必扫描表,因为流将具有添加的项,并且您可以重用将其发送到ES的部分。
发布于 2018-09-25 13:54:43
您可以使用SQS。将失败的记录移动到SQS,稍后您可以安排一个lambda从SQS读取记录,并将记录发送到ElasticSearch。
https://stackoverflow.com/questions/49857988
复制相似问题