我有一组亚马逊网络服务实例,其中Apache Hadoop发行版和apache spark被设置。我试图通过Spark streaming访问DynamoDb来读写表,但在编写Spark- DynamoDB代码的过程中,我了解到需要emr-ddb-hadoop.jar来获取DynamoDB输入格式和只存在于EMR集群中的OutputFormat。在查看了一些博客之后,似乎只有使用EMR Spark才能访问它。这是正确的吗?
但是,我使用独立的JAVA SDK来访问Dynamodb,它工作得很好
发布于 2016-05-09 19:14:24
我得到了这个问题的解决方案。我从EMR下载了emr-ddb-hadoop.jar文件,并在我的环境中使用它。请注意:要运行DynamoDB,我们只需要上面的jar。
https://stackoverflow.com/questions/36457912
复制相似问题