腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
2
回答
无法验证serde : org.openx.data.jsonserde.jsonserde
java
、
json
、
hadoop
、
hive
我编写了这个查询来在
hive
上创建一个表。我的数据最初是json格式的,所以我下载并构建了serde,并添加了运行它所需的所有jar。但我得到了以下错误: FAILED: Execution Error, return code 1 from org.apache.hadoop.
hive
.ql.exec.DDLTask.
浏览 2
提问于2014-10-30
得票数 7
1
回答
在插入覆盖中禁用配置单元压缩的选项
hive
在hite-site.xml中,
hive
.exec.compress.output被设置为true。我无法执行set
hive
.exec.compress.output=false,因为代码是在自定义构建框架中执行的。是否有像insert overwrite语句的属性那样关闭配置单元压缩的选项?
浏览 18
提问于2020-04-15
得票数 1
1
回答
如何在google dataproc上执行单元作业时使用params/properties标志值
google-cloud-dataproc
我试图使用以下gcloud命令在google中执行一个
hive
作业:gcloud dataproc作业提交单元--集群=msm-测试-集群--文件
hive
.sql -params=bucket1 1=abcd 但是上面的两个命令都不能将'bucket1‘变量设置为
浏览 5
提问于2017-07-07
得票数 0
回答已采纳
3
回答
用于存储数据库/表的
Hive
转移仓库目录路径在哪里?
apache-spark
、
hive
、
apache-spark-sql
、
hdfs
、
apache-spark-1.5.2
我已经在
Linux
机器上安装了带有
Hive
的Spark1.5.2构建。
Hive
转移仓库目录的默认路径是:/user/
hive
/ path。 如果它是一个HDFS路径(很可能),那么我们可以在不安装Hadoop的情况
下
访问它吗?
浏览 5
提问于2016-01-12
得票数 3
1
回答
如何为
Hive
自定义UDF添加JAR,使其在HDInsight集群上永久可用?
hive
、
azure-hdinsight
、
hive-udf
我在
Hive
中创建了一个自定义的UDF,它在
Hive
命令行中进行了测试,运行良好。现在我有了UDF的jar文件,我需要做些什么,以便用户能够创建指向它的临时函数?理想情况
下
,从蜂巢的命令提示符中,我会这样做:-Added [myudf.jar] to class path 通过SSH(
Linu
浏览 8
提问于2016-07-22
得票数 3
1
回答
关于本地路径&将数据加载到
Hive
时的hdfs路径
hive
我在学习
Hive
的DML操作。在本教程中,
hive
> LOAD DATA LOCAL INPATH './examples/files/kv1.txt' OVERWRITE INTO TABLE pokes;
hive
> LOAD DATA INPATH '/user/myname/kv
浏览 1
提问于2014-04-06
得票数 0
2
回答
为什么不对配置单元查询执行mapreduce?
hadoop
、
mapreduce
、
hive
我有一个查询,其中我们创建了
Hive
表,当我们执行select * from table where=< condition>;时,它立即给出结果,而不调用MR job.When。
浏览 6
提问于2016-10-21
得票数 0
1
回答
动态分区
sql
、
hive
、
bigdata
、
partitioning
、
data-partitioning
restaurant name`,'NA')我得到以下错误:可能
Hive
浏览 4
提问于2021-05-17
得票数 0
1
回答
HDFS上的根划痕dir: /tmp/
hive
应该是可写的。当前的权限是:rwx-(在
Linux
上)
apache-spark
、
hive
、
apache-spark-sql
、
spark-dataframe
、
hiveql
上的根划痕dir: /tmp/
hive
应该是可写的。当前的权限是:rwx?。"); df.count();根据异常,HDFS上的/tmp/
hive
应该是可写的,但是我们在本地模式
下
执行星火作业。这意味着本地(
linux
)文件系统中的/tmp/
hive
目录没有可写权限,而不是HDFS。 所以我在命令
下
执行了许可。如果在集群模式
下
执行s
浏览 3
提问于2016-12-18
得票数 6
1
回答
用于MapR/Hadoop/
Hive
的Classpath
java
、
hadoop
、
mapr
我正在为hadoop编译一些java代码,并且需要知道我需要指定哪些类路径。对于cloudera,我在下面使用它,但是我在MapR安装中使用了什么?令人惊讶的是,我只能找到如何在google中设置类路径,而不是将其设置为什么。
浏览 10
提问于2014-07-28
得票数 0
回答已采纳
1
回答
哪里可以从
Hive
中找到Java的标准输出或标准错误
hive
、
cloudera-cdh
我正在用
Hive
编写Java,为了调试,我通过LogFactory.getLog对象将一些消息打印到标准输出。但我想知道我在哪里能看到这些信息。我正在使用CDH 5.4和
Hive
0.12
浏览 7
提问于2015-05-21
得票数 1
1
回答
使用Scala数据from创建带有分区的单元表
scala
、
apache-spark
、
hive
、
apache-spark-sql
、
hiveql
hive
表应该具有按日期分区的S3位置中的ORC格式的底层文件。我用ORC格式将scala数据写入S3。PARTITIONED BY (date string)LOCATION "S3Location"但是
hive
似乎
hive
不认识spark创建的分区。我正在使用Spark2.2.0。 如有任何建议,将不胜感激。
浏览 3
提问于2020-10-30
得票数 0
1
回答
Dataproc
Hive
作业- Tez Java堆OOM
java
、
hive
、
google-cloud-dataproc
... 5 moreSET
hive
.exec.dyn
浏览 2
提问于2021-09-23
得票数 2
3
回答
配置单元无法元存储数据库
hadoop
、
configuration
、
installation
、
hive
Caused by: java.sql.SQLException: Directory /opt/
hive
/bin/metastore_db cannot be created.... 80 more Caused by: ERROR XBM0H: Direc
浏览 2
提问于2016-11-11
得票数 0
1
回答
Hive
如何选择一个作业的减速机数量?
hadoop
、
hive
当我运行一个
Hive
作业(在Amazon EMR,AMI 2.3.3上)时,它有一些大于1的reducers。看看作业设置,我猜是mapred.reduce.tasks设置了一些东西。Estimated from input data size: 500 set
hive
.exec.reducers.bytes.per.reducer=<number> In order to limit the maximum numb
浏览 4
提问于2013-04-25
得票数 17
回答已采纳
1
回答
在HDFS上,我希望显示以ORC格式存储的配置单元表的普通文本
hadoop
、
hive
、
apache-spark-sql
、
hdfs
、
orc
我已经使用orc格式将json dataframe保存在
Hive
中 jsonDF.write.format("orc").saveAsTable(hiveExamples.jsonTest) 现在,我需要在
浏览 22
提问于2020-04-19
得票数 1
回答已采纳
1
回答
从蜂巢中从HDFS中提取数据后得到的空值?
regex
、
hadoop
、
hive
、
hdfs
、
hiveql
到目前为止,我已经在
linux
环境中设置了Hadoop和
Hive
,并试图将HDFS文件中的数据提取到
Hive
表中。日志行是这样的: CREATE EXTERNAL TABLE LogParserSample(ROW FORMAT SERDE 'org.apa
浏览 8
提问于2017-06-27
得票数 0
回答已采纳
3
回答
无法将数据导入/加载到配置单元,为什么?
hadoop
、
permissions
、
hive
、
load
我正在尝试导入数据(包含两列的简单文件,int和string),表格外观:id int当我尝试导入时:
hive
>org.apache.hadoop.security.AccessControlException: Permission denied: user=hadoop, access=ALL, inode="/user/
hive
/warehouse/test":
hive
浏览 7
提问于2012-10-09
得票数 2
4
回答
如何在HiveContext中设置
hive
.metastore.warehouse.dir?
apache-spark
、
apache-spark-sql
、
spark-hive
我将配置单元仓库参数指向本地磁盘位置:默认情况
下
,
应
启用metastore的嵌入式模式,因此不需要外部数据库。但是HiveContext似乎忽略了这个配置:因为我在调用saveAsTable()时仍然会遇到这个错误: MetaException(message:file:
浏览 4
提问于2015-05-29
得票数 8
1
回答
火花+入口+ Kerberos: org.apache.hadoop.security.UserGroupInformation.doAs()
apache-spark
、
hive
、
kerberos
、
hue
、
apache-sentry
(HiveMetaStoreClient.java:466) at org.apache.hadoop.
hive
.metastore.HiveMetaStoreClient.(SessionHiveMetaStoreClient.java:74) . 35 为
Hive
Server2角色“HiveServer2(主机名)”启用了单元模拟。
浏览 0
提问于2016-01-20
得票数 0
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
通过10个例子掌握Linux下lsof命令
Kerberos和Apache Sentry干货实践(下)
Hive 勒索软件新变体:专门以 Linux 服务器作为攻击目标|用 Go 语言编写
Hive数据仓库实践2 环境搭建
Hive的三种安装模式简介及12步安装步骤详解
热门
标签
更多标签
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
活动推荐
运营活动
广告
关闭
领券