专栏首页张浩的专栏Sqoop在导入的时候生成的MR代码教你怎么指定路径去存放
原创

Sqoop在导入的时候生成的MR代码教你怎么指定路径去存放

最近常用Sqoop导入一些数据到HDFS中。但是执行完成后,总是会在我执行sqoop命令的文件夹下生成一些MR代码。总是需要去手动清理。感觉比较困扰,然后就看Sqoop的文档。发现有一个配置可以指定生成MR代码的路径。如果能指定让这个MR代码存放到系统的/tmp/目录下,我就不用手动清理了吗,让操作系统帮我去清理。

这个配置就是--outdir

通过导入的时候配置--outdir <dir> 会让生成的代码在这个dir目录下。

下面是我的导入语句,这个导入语句生成的MR代码会在/tmp/sqoop/下

原创声明,本文系作者授权云+社区发表,未经许可,不得转载。

如有侵权,请联系 yunjia_community@tencent.com 删除。

我来说两句

0 条评论
登录 后参与评论

相关文章

  • Hive的数据类型

    ZHANGHAO
  • Spark 中 Kafka Offset 管理

    Spark在spark-streaming-kafka-0-10的API中实现了对Kafka Offset提交的API,在Spark消费过消息之后,提交消费过消...

    ZHANGHAO
  • 基于Avro文件和Avro Schema构建Avro Hive表

    ZHANGHAO
  • 麻将游戏的听牌算法

    测试测试!!~~~~这两周都是在测试各种BUG,没事情的时候自己在网上学学新知识,也为下个月的游戏改版预热。最近呢我也开始了我的shader之旅,估计也是这充满...

    李海彬
  • python 学习总结1

      计算机硬件所依赖的集成电路规模参照摩尔定律发展规律,即计算机单位面积集成电路可容纳的晶体管数量每两年会比之前翻一番。

    py3study
  • 深入理解Spring系列之十四:@Autowired是如何工作的

    Spring框架的便利让我们很容易的使用@Autowired注解实现依赖注入,本篇将深入Spring源码解析@Autowired注解的工作原理。

    JavaQ
  • redis入门——Spring整合篇

    因为集群需要的服务器至少是6台,使用Redis集群的成本很高,所以如果没有业务要求,不会使用Redis集群。 而使用Redis集群的公司,为了节省成本,一般只...

    用户5640963
  • R语言实现主成分和因子分析

    主成分分析(PCA)是一种数据降维技巧,它能将大量相关变量转化为一组很少的不相关变量,这些无关变量称为主成分。 探索性因子分析(EFA)是一系列用来发现一组变量...

    机器学习AI算法工程
  • R语言主成分和因子分析

    主成分分析(PCA)是一种数据降维技巧,它能将大量相关变量转化为一组很少的不相关变量,这些无关变量称为主成分。 探索性因子分析(EFA)是一系列用来发现一组变...

    机器学习AI算法工程
  • js判断浏览器是否支持flash的方法

    传统浏览器可以使用window.ActiveXObject检查浏览器是否启用相关的控件。检查浏览器是否启用flash控件,需要先检查浏览器是否支持ActiveX...

    用户6167509

扫码关注云+社区

领取腾讯云代金券