腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(2184)
视频
沙龙
1
回答
使用
oozie
将
lastvalue
打
印到
新
行
的
Sqoop
、
、
下面是我在
oozie
中
的
sqoop
命令。<action name="
sqoop
_test" retry-max="${maxretry}" retry-interval="${retryinterval}"> <job-tracker>${jobT
浏览 13
提问于2019-06-18
得票数 0
1
回答
在
sqoop
导入语句中
使用
追加和最后修改
、
、
我们
使用
sqoop
将
数据从Oracle数据库提取到HDFS。人们习惯于定期更新和添加
新
行
到SQL表中。我知道
sqoop
、增量导入、--append和--last modified选项。我
的
问题是,我们是否可以在相同
的
导入语句中
使用
这两种选项?例如,
sqoop
--incremental import --lastmodified --append --check-column 'lastmodified&
浏览 2
提问于2017-09-23
得票数 1
回答已采纳
2
回答
sqoop
--connection-param-file路径可以是hdfs路径
、
、
我能够成功地运行
sqoop
导出
sqoop
export --connection-param-file /user/xgr0naru/
sqoop
.properties --connect jdbc:oraclethin:@//XXx --用户名xx --密码xx --表导出目录/data/raw/oltp/cogen/oraclexport/TZ5CK/2015-08-18/ --输入字段终止于'\0
浏览 1
提问于2015-09-15
得票数 1
4
回答
不能通过-kill命令杀死
oozie
作业
、
、
、
我想杀了一个像这样
的
协调员工作:我熟练地分了几个工作,然后部署了
新
代码更新到
oozie
上,开始了
新
的
工作。由于旧
的
工作无法被淘汰,现在有许多
浏览 4
提问于2013-09-24
得票数 1
回答已采纳
1
回答
如何
使用
linux脚本自动化
Sqoop
中从DB到HBase
的
增量导入
、
、
、
、
使用
sqoop
作业,我们可以
使用
HBase对--lastval进行增量加载。提前感谢您
的
帮助!!
浏览 2
提问于2016-09-28
得票数 2
回答已采纳
1
回答
按照建议更新了shell脚本代码:在替换值时,需要知道"sed“
的
命令
、
、
、
、
我创建了一个包装器,用于通过shellscript中
的
Oozie
使用
sqoop
将
数据从mysql移动到hdfs。我有一个"
Sqoop
_job.property文件“,我在其中提到数据库参数是通用
的
,"
Oozie
工作流”从这个文件中获取要执行
的
值。,它检查DB源代码并从循环中获取值&从‘if- InputFile’分配
的
值,然后创建一个
新
的
Scoop_jo
浏览 10
提问于2017-02-23
得票数 0
回答已采纳
0
回答
从
oozie
导入
Sqoop
配置单元
、
、
我正在
使用
Cloudera快速入门Docker镜像
sqoop
import --connect jdbc:mysql://localhost/retail_db
sqoop
任务创建了一个
新
的
oozie
工作流,但是当我尝试执行该
sqoop
任务时,它可以
将
数据下载到HDF
浏览 20
提问于2016-12-21
得票数 0
回答已采纳
2
回答
oozie
sqoop
选项文件出现找不到文件异常
、
、
我在不同
的
博客中提到,
Sqoop
作业所需
的
选项文件应该放在HDFS位置中。尽管如此,它还是抛出了FileNotFound异常。Im
使用
Hortonworks 2.1发
行
版 4046 [main] ERROR org.apache.
sqoop
.
Sqoop
- Error while expanding:70)我尝试
将
选项文件放在运行
浏览 14
提问于2015-02-18
得票数 0
0
回答
Sqoop
通过bash工作,但不能通过
oozie
工作
、
、
但是当我尝试运行一个
oozie
操作时,它失败了。我尝试同时
使用
bash action和
sqoop
action。这是
Sqoop
操作。我还尝试
使用
<command>import....], exit code [1],对于
sqoop
,我得到
的
错误是[org.apache.
oozie
.action.hadoop.SqoopMain], exit code [1]。当我查看日志时,我找不到任何有用
的
东西。Stderr只有30<e
浏览 2
提问于2017-06-09
得票数 0
回答已采纳
2
回答
命令'
oozie
admin sharedliblist‘
的
共享库为空...
、
我已经安装了
oozie
,并按照这里
的
说明安装了共享库
oozie
-moun-W@mr-node] Error starting action [mr-node]., does not exist] 我
浏览 1
提问于2015-05-25
得票数 1
2
回答
如何在Falcon中为
Oozie
配置job.properties
、
、
、
、
我有一个
oozie
工作流,它调用
sqoop
和hive操作。当我从命令行运行
oozie
时,这个单独
的
工作流工作得很好。由于
sqoop
和hive脚本各不相同,因此我
使用
job.properties文件
将
值传递给workflow.xml。sudo
oozie
job -
oozie
-config job.properties -run 现在我想在Falcon中配置这个
oozie
工作流。下面是猎鹰
的
pro
浏览 6
提问于2015-04-15
得票数 0
6
回答
使用
选项文件导入数据时出现hadoop
sqoop
错误
我是hadoop
的
新手,在练习
sqoop
时,我收到了这个错误消息,我
使用
的
命令是我创建了一个import.txt文件,我
使用
hadoop并将这个文件放到了HDFS上。在导入时,我
使用
--options-file命令将此文件提供给
sqoop
工具。因此,我在命令提示符下给出
的
最后一个命令如下,
sqoop
--options-file /user/cloudera/import.txt --table emp
浏览 2
提问于2013-10-16
得票数 0
1
回答
如何
使用
Sqoop
只导入
新
数据?
、
、
、
、
让我举一个例子:昨天我导出了1TB
的
数据。今天,数据库又获得了1GB
的
数据。如果我今天再次尝试导入数据,
Sqoop
将
导入数据
的
1TB+1GB,那么我
将
合并它。所以是头痛。我只想导入
新
数据并将其附加到旧数据中。通过这种方式,我
将
每天
将
RDBMS数据拖到HDFS中。
浏览 3
提问于2015-06-11
得票数 2
2
回答
如何查看
sqoop
作业中
的
增量更新值?
、
、
、
下面是我创建
的
sqoop
作业
sqoop
job --create
sqoop
_incremental_job -- import --connect jdbc:mysql://quickstart.cloudera/retail_db --username retail_dba --password cloudera --table categories --target-dir /user/cloudera/
sqoop
_incremental
浏览 2
提问于2016-12-01
得票数 0
回答已采纳
1
回答
通过
SQOOP
操作在
OOZIE
中列出MS SQL Server表
、
、
、
、
我能够在CLI中完美地执行以下
SQOOP
命令。-- --schema schma 2057主要错误org.apache.
sqoop
.
Sqoop
-获得运行
Sqoop
浏览 1
提问于2017-05-02
得票数 0
1
回答
这个sql函数
的
正确版本是什么?
将
新
的
id生成为varchar
的
正确方法是什么?在这里,我试图
将
Server转换为MySQL数据库。我试过上网,但它并没有解决我
的
问题。DELIMITER // BEGIN
浏览 1
提问于2019-07-21
得票数 1
回答已采纳
2
回答
奥兹抛出java.lang.ClassNotFoundException
、
、
、
我正在做一个
使用
oozie
来安排Hadoop作业
的
项目。但是最近,
oozie
不时地抛出java.lang.ClassNotFoundException。我检查了错误日志,非常肯定地
将
所有需要
的
jar文件放在hdfs目录lib下。下面是hadoop任务日志,最后10
行
显示我需要
的
jar文件。但是,当我检查节点上
的
远程缓存direcotry时,它是空
的
。因此,我怀疑hadoop清理了远程缓存,并且下一次没有
将</
浏览 0
提问于2014-05-26
得票数 0
回答已采纳
2
回答
保存
sqoop
增量导入id
、
我在AWS EMR中运行了很多
sqoop
作业,但有时我需要关闭这个实例。但我不知道
sqoo
浏览 0
提问于2016-08-24
得票数 0
回答已采纳
1
回答
如何加载增量迁移数据从PostgresSQL到HDFS?
、
、
、
为此,我需要将postgres数据库中
的
数据加载到hdfs。简单
的
方法是
使用
一个批处理作业,该作业每天一次
将
数据库(120 to )
的
内容转储到HDFS。这将是浪费和昂贵
的
。这个是可能
的
吗? 我读过一些关于
sqoop
的
文章,它似乎提供了我想要
的
功能,但它需要对数据库和应用程序进行更改。有没有一种不需要对数据库进行任何更改
的
方法?
浏览 1
提问于2014-12-02
得票数 0
1
回答
Hortonworks-
oozie
、
、
我试图
使用
oozie
在hortonworks集群中运行一个工作流。获取以下错误:有人知道原因吗?至少可以在hortonworks发行版上运行
的
workflow.xml示例将有帮助?
浏览 4
提问于2012-11-05
得票数 1
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
将 Oozie 迁移到 CDP
Sqoop使用实例讲解
10个Hadoop相关工具,收藏了
从入门到精通-Fayson带你玩转CDH
2.3 基于IDEA开发第一个MapReduce大数据程序WordCount
热门
标签
更多标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
活动推荐
运营活动
广告
关闭
领券