腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
Sqoop
是否
支持
从
分区
的
oracle
表
中
提取
数据
sqoop
我有一个非常大
的
oracle
表
,这是一个
分区
表
,我想问
Sqoop
是否
或如何
支持
基于
oracle
分区
进行拆分,例如,一个映射器从一个
oracle
分区
进行导入。
浏览 20
提问于2019-03-02
得票数 0
回答已采纳
1
回答
如何将拆分
的
HDFS文件加载到
Oracle
数据
库?
hadoop
、
hive
、
sqoop
我需要将
数据
从
HDFS上
的
拆分文件加载到
Oracle
数据
库。如果我打开任何文件夹
中
的
文件 hdfs://XXXXXX/split_files/test_folder/test_table_with_partitions/tm=2017-07-24/dept=5他们没有时间&部门
的
信息在他们里面。因此,当我使用
sqoop
时,这些信息不会加载到
数据</e
浏览 5
提问于2017-07-26
得票数 0
回答已采纳
1
回答
从
oracle
和导入
数据
动态创建单元
分区
表
的
Sqoop
hadoop
、
hive
、
sqoop
我在
oracle
中有一个
表
(
表
名为TRCUS),其中包含客户
的
详细信息,根据年份和月份进行
分区
。
Oracle
中
的
分区
名称: PERIOD_JAN_13、PERIOD_FEB_13、PERIOD_JAN_14、PERIOD_FEB_14等 现在,我想直接使用
SQOOP
将这个
表
的
数据
导入到HIVE
中
。
Sqoop
作业应该创建一个hiv
浏览 6
提问于2017-10-16
得票数 1
回答已采纳
3
回答
Sqoop
导出可以创建一个新
表
吗?
export
、
hdfs
、
rdbms
、
sqoop
可以使用
Sqoop
将
数据
从
HDFS导出到RDBMS
表
。但似乎我们需要现有的桌子。
是否
有一些参数可以告诉
Sqoop
做‘创建
表
’
的
事情,并将
数据
导出到这个新装箱
的
表
?如果是,它会与
Oracle
一起工作吗?
浏览 5
提问于2013-04-15
得票数 10
回答已采纳
1
回答
从
数据
库导出
数据
并写入HDFS(hadoop fs)
performance
、
hadoop
、
hdfs
现在我正尝试
从
db
表
导出
数据
,并将其写入hdfs。有没有比写hdfs更好
的
方法呢?因为我认为它没有利用并行主义
的
优势。 谢谢:)
浏览 1
提问于2011-06-10
得票数 1
回答已采纳
4
回答
Sqoop
导入-执行过程
sqoop
我想知道我
是否
能够执行一个过程,并在
Sqoop
import命令
中
得到结果。我在网上找不到任何这样
的
场景。请帮帮忙
浏览 0
提问于2014-04-24
得票数 0
1
回答
使用
Sqoop
导入
的
动态
分区
hadoop
、
sqoop
、
hcatalog
从
sqoop
文档
中
可以看出,
Sqoop
可以用来将
数据
导入到Hive
中
,而动态partition.But无法找到它
的
任何示例。有人试过吗。
Sqoop
HCatalog特性
支持
以下表类型: 具有
数据
库结果集动态
分区
键
的
分区<
浏览 4
提问于2015-08-08
得票数 0
2
回答
Oracle
Hadoop连接器诉
Sqoop
hadoop
、
jdbc
、
sqoop
我使用了
Sqoop
来摄取
从
Oracle
到Hadoop
的
数据
,它运行得很好。只需4分钟就能将8600万条记录
从
Oracle
带到Hive
表
,而无需使用
Sqoop
上
的
分区
。谁能给出一些关于
Oracle
Hadoop连接器
的
细节,它
的
性能会比
Sqoop
更好吗?
浏览 4
提问于2016-10-25
得票数 2
回答已采纳
2
回答
调度和自动化
sqoop
导入/导出任务
shell
、
hadoop
、
automation
、
hive
、
sqoop
我有一个
sqoop
作业,它需要将
数据
从
oracle
导入到hdfs。我使用
的
sqoop
查询是
sqoop
import --connect jdbc:
oracle
:thin:@hostname:port/service --username
sqoop
--password'1' AND rownum < 10001 AND \$CONDITIONS" --target-dir /
浏览 2
提问于2015-06-08
得票数 0
回答已采纳
1
回答
如何将火花流输出推送到
oracle
oracle
、
spark-streaming
、
sqoop
我有一个火花流程序,它将在一个15分钟
的
窗口中聚合和处理
数据
。它
的
输出需要推送到
oracle
表
中
。 这里最好
的
方法是什么?如果我将我
的
数据
写进蜂巢,然后使用
sqoop
将其推送到
oracle
,那么我将不得不将
sqoop
的
工作安排在一定
的
频率上,
sqoop
应该以某种方式了解它以前
提取
的
数
浏览 0
提问于2018-02-09
得票数 0
回答已采纳
1
回答
Sqoop
-基于
oracle
分区
表
模式创建空单元
分区
表
oracle
、
hive
、
sqoop
、
partition
我有一个
oracle
表
,它有80列,id在state列上
分区
。我
的
要求是创建一个具有类似
oracle
表
模式并在状态上进行
分区
的
hive
表
。错误
sqoop
.
Sqoop
:获得运行
Sqoop
: java.lang.IllegalArgumentException:
分区
键状态
浏览 3
提问于2014-10-09
得票数 0
回答已采纳
1
回答
Sqoop
从
HIVE导出到
分区
Oracle
数据
库
oracle
、
hive
、
sqoop
、
partition
我在Hive中有一个非
分区
表
,它使用一个批处理来填充60万条记录。此批处理在填充
表
之前清除
表
中
的
数据
。我正在尝试将这些
数据
导出到
分区
的
oracle
表
中
。当首次导出时,
sqoop
导出是成功
的
。但是,当试图将
数据
导出为另一个
分区
时,我将得到以下错误。 我想在这里实现
的
是,
浏览 3
提问于2022-01-05
得票数 0
1
回答
如何
从
Oracle
Sqoop
导入压缩
分区
Hive
表
split
、
compression
、
sqoop
、
orc
如何在压缩
表
中
Sqoop
导入
Oracle
到Hive 尝试将
Sqoop
从
Oracle
导入到文本
分区
表
中
的
Hive,并成功。当尝试在压缩(SNAPPY、ZLIB、BZIP2)
表
中
执行相同
的
操作时,同时使用
Sqoop
和相应
的
编解码器压缩
数据
时,它会创建文件。(state=,code=0) 测试过程如
浏览 31
提问于2019-05-21
得票数 0
2
回答
如何使用
sqoop
在蜂箱
中
创建多级
分区
hive
、
sqoop
我需要使用
Sqoop
创建具有三个
分区
(年份/月/日)
的
hive
表
。我在
sqoop
中
检查了--hive-partition-key和--hive-partition-value。使用这些参数,我创建了
分区
、和--hive-partition-key year --hive-partition-value '2016',我
的
问题是如何传递
分区
键和
分区
值
的
多个值,以
浏览 10
提问于2016-08-15
得票数 0
回答已采纳
1
回答
sqoop
从
hdfs导出到mysql
是否
保留
分区
?
mysql
、
apache
、
hadoop
、
hive
我打算将存储在HDFS
中
的
数据
导出到关系
数据
库MySQL
中
。我研究了如何使用
Sqoop
来完成这个任务。因此,我发现我需要在MySQL
中
创建一个
表
,该
表
具有相同顺序
的
目标列(如Hive中所示),并具有适当
的
SQL类型。然后使用
sqoop
导出命令。我
的
问题是:如果
表
是在Hive中
分区
的
,如果在MySQL
中<
浏览 2
提问于2013-08-14
得票数 1
回答已采纳
1
回答
在
sqoop
导入语句中使用追加和最后修改
hdfs
、
bigdata
、
sqoop
我们使用
sqoop
将
数据
从
Oracle
数据
库
提取
到HDFS。人们习惯于定期更新和添加新行到SQL
表
中
。我知道
sqoop
、增量导入、--append和--last modified选项。我
的
问题是,我们
是否
可以在相同
的
导入语句中使用这两种选项?例如,
sqoop
--incremental import --lastmodified --append --check
浏览 2
提问于2017-09-23
得票数 1
回答已采纳
1
回答
将特定
的
分区
从
表
导入hadoop
oracle
、
hadoop
、
hdfs
、
sqoop
我使用
sqoop
将
数据
导入hadoop。我使用下面的命令将
表
导入hadoop。
sqoop
import \ --username user \ --table TABS.ADM_LOG0009 \现在,我有了另一个名为IVM_IMAGE
的</
浏览 4
提问于2016-12-04
得票数 0
回答已采纳
2
回答
SQOOP
将导出任务导出到
Oracle
DB
oracle
、
hive
、
hdfs
、
sqoop
当我试图将NOLOGGING包含到我
的
SQOOP
导出任务
中
时,我完全不知所措。
SQOOP
用户指南-说要使用:- Doraoop.nologging=true <name>Doraoop.nologging</name> </property>
浏览 9
提问于2022-02-04
得票数 0
2
回答
如何将Hive
中
的
数据
和元
数据
传输到RDBMS
hadoop
、
apache-spark
、
hive
、
sqoop
在我
的
hive环境中有300多个
表
。我想将Hive
中
的
所有
表
导出到
Oracle
/MySql,包括元
数据
。但是
从</em
浏览 7
提问于2016-10-27
得票数 0
1
回答
sqoop
数据
迁移过程
中
的
错误
oracle11g
、
hdfs
、
sqoop
、
ora-00936
我试图
从
oracle
中
提取
数据
,并希望使用
sqoop
1.4.6将其推入到
sqoop
1.4.6
中
。我要迁移
的
表
包含名为“COMMENT”
的
列(它是
oracle
中
的
保留关键字),但是当我试图使用
sqoop
将
表
推入HDFS时,发生
的
错误是: 15/09/30 14:52:49错误db.DBR
浏览 4
提问于2015-09-30
得票数 0
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Sqoop使用实例讲解
详解大数据采集引擎之Sqoop&采集oracle数据库中的数据
在Oracle中,什么是延迟段创建?
Sqoop使用流程
Oracle Sharding Step by Step(1)
热门
标签
更多标签
云服务器
ICP备案
实时音视频
对象存储
云直播
活动推荐
运营活动
广告
关闭
领券