将Greenplum与Spring结合使用
有没有Spring项目提供了用于插入或使用Greenplum的模板或实用程序？
据我所知，一种方法是使用Spring Batch，让一个微线程调用Greenplum gpload实用程序，该实用程序然后将指定的文件插入到数据库中。
然而，考虑到Spring Data和Spring XD项目的目标都是抽象数据访问和处理大数据需求，似乎应该为此需求定制一些东西。考虑到Pivotal现在与GreenPlum和Spring的关系非常密切，情况尤其如此。
如果有人有使用Spring和Greenplum的经验，并能提供任何建议或最佳实践，我们将不胜感激。
回答 2
Stack Overflow用户
发布于 2014-01-15 03:57:03
我使用Spring Batch和Greenpulm。只需使用Greenplum jdbc驱动程序即可，因为PostgresSQL数据库基于PostgreSQL，所以它的工作方式是透明的
Stack Overflow用户
发布于 2014-01-24 22:09:40
这是已经出现了几次的东西。这方面的工作已经完成了很长一段时间，但我们还没有将这些代码转移到公共存储库-现在是将这些代码放到github中的好时机。
这是一个文档，描述了可用的内容。
https://drive.google.com/file/d/0B2yhsfF9zZ71VTV2bzN5TnpzMGM/edit?usp=sharing
其中可能不明显的是(据我所知)我们可以在Java中编程使用gpfdist，而不是使用命令行。我会让这篇文章的作者看看这个帖子来发表评论。
这项工作没有一个名为Greenplum gpload实用程序的微线程，但这确实是一个好主意。我们刚刚完成了FTP微线程的第一次传递，它将一个文件写入HDFS，这应该是一个很好的基础。
我很有兴趣听到您在这方面的更多想法。一种想法是使用批处理分区作业，以便位于xd容器节点的本地文件系统上的文件可以并行发生。
期待您的回复。
干杯，马克
https://stackoverflow.com/questions/20952269
复制相似问题
腾讯云开发者
