我正在尝试将IMS大型机数据注入Hadoop。我想知道有没有可能通过以下任何一个)阿帕奇火花或MapReduce工作。B)任何其他工具/技术。
主要目标是我们希望每天/每周接收将按计划运行的IMS大型机数据
发布于 2020-02-04 16:18:33
由于IMS大型机有一个Sqoop连接器,因此使用的 https://www.ibm.com/support/knowledgecenter/en/SSEPH2_13.1.0/com.ibm.ims13.doc.apg/ims_odbjdbcintro.htm将是一个很好的起点。(绝对不是只读文档的IMS专业人员)
从Spark 中,您将在hadoop hdfs上写入数据,然后能够在Spark上使用它。Sqoop允许您执行完全导入或增量导入。在我看来,我会推荐使用sqoop 1而不是版本2。有了Cron作业,你就可以按照你想要的方式进行调度。
发布于 2020-02-07 13:20:34
您的首选(a) Apache Spark可用于z/OS。在完全商业支持的形式中,它称为IBM Open Data Analytics for z/OS,有时缩写为IzODA。IzODA当然支持直接访问IMS数据,但性能比远程IMS访问要好得多。IzODA的IBM Program编号是5655-OD1,IBM提供了一个基于云的试用,因此您可以看到它是如何工作的。
发布于 2020-11-16 02:56:48
我建议对DB2使用JDBC连接器,对DL/I数据库使用高性能卸载。
存在用于持续数据捕获的产品- Attunity和Optim就是其中的两个。
如果您不想要全部内容,可以让IMS系统提供包含有趣内容的MQ或Kafka消息。
https://stackoverflow.com/questions/60047778
复制相似问题