首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >问答首页 >将大型机IMS数据注入Hadoop

将大型机IMS数据注入Hadoop
EN

Stack Overflow用户
提问于 2020-02-04 06:00:28
回答 4查看 144关注 0票数 0

我正在尝试将IMS大型机数据注入Hadoop。我想知道有没有可能通过以下任何一个)阿帕奇火花或MapReduce工作。B)任何其他工具/技术。

主要目标是我们希望每天/每周接收将按计划运行的IMS大型机数据

EN

回答 4

Stack Overflow用户

发布于 2020-02-04 16:18:33

由于IMS大型机有一个Sqoop连接器,因此使用 https://www.ibm.com/support/knowledgecenter/en/SSEPH2_13.1.0/com.ibm.ims13.doc.apg/ims_odbjdbcintro.htm将是一个很好的起点。(绝对不是只读文档的IMS专业人员)

从Spark 中,您将在hadoop hdfs上写入数据,然后能够在Spark上使用它。Sqoop允许您执行完全导入或增量导入。在我看来,我会推荐使用sqoop 1而不是版本2。有了Cron作业,你就可以按照你想要的方式进行调度。

票数 1
EN

Stack Overflow用户

发布于 2020-02-07 13:20:34

您的首选(a) Apache Spark可用于z/OS。在完全商业支持的形式中,它称为IBM Open Data Analytics for z/OS,有时缩写为IzODA。IzODA当然支持直接访问IMS数据,但性能比远程IMS访问要好得多。IzODA的IBM Program编号是5655-OD1,IBM提供了一个基于云的试用,因此您可以看到它是如何工作的。

票数 1
EN

Stack Overflow用户

发布于 2020-11-16 02:56:48

我建议对DB2使用JDBC连接器,对DL/I数据库使用高性能卸载。

存在用于持续数据捕获的产品- Attunity和Optim就是其中的两个。

如果您不想要全部内容,可以让IMS系统提供包含有趣内容的MQ或Kafka消息。

票数 0
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/60047778

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档