无法通过增量lastmodified合并part-m-0000*
无法通过增量lastmodified合并part-m-0000*
提问于 2017-11-05 06:05:12
我首先通过以下方式导入表
sqoop import --connect jdbc:mysql://192.168.1.18/mysql --table mytable \
--username raj --password root --target-dir /find1/1t -m 1然后，我尝试使用下面的命令创建一个增量的lastmodified追加作业
sqoop job --create tasy \
-- import --connect jdbc:mysql://192.168.2.13/mysql --table mytable \
--username raj --password root --incremental lastmodified --append --check-
column lastUpdated --last-value "2017-11-05 02:43:43" --target-dir /find1/3t
-m 1并使用以下命令触发该作业
sqoop job --exec tasy然后，我尝试使用以下命令将的零件文件合并到新目录中
sqoop merge --merge-key lastUpdated --new-data \
/find1/3t/part-m-0000* --onto /find1/1t --target-dir \
/find5 --class-name mytable \
--jar-file /home/user/Desktop/mytable.jar但是每次它抛出一个错误
This was the error This is my table schema
当我使用
sqoop merge --merge-key lastUpdated --new-data \
/find1/3t/part-m-00001 --onto /find1/1t --target-dir \
/find5 --class-name mytable \
--jar-file /home/user/Desktop/mytable.jar它可以工作，但我需要合并所有的零件文件
回答 1
Stack Overflow用户
发布于 2017-11-05 12:18:23
证明像/find1/3t/part-m-0000*这样的路径是不正确的。请指定目录路径/find1/3t/，而不是提供文件名。
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接：
https://stackoverflow.com/questions/47116076
复制相关文章
相似问题
腾讯云开发者
