腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
2
回答
基于Apache Atlas和
Hive
,
元
数据
存储
在哪里?在Titan Graph Repository还是在RDBMS with
Hive
中?
、
、
、
、
我已经安装了Atlas、
Hive
和Hadoop,并且配置正确。但是我想知道导入
元
数据
后
元
数据
存储
在哪里?如果我同时安装Atlas和
Hive
,
元
数据
会
存储
浏览 0
提问于2016-04-27
得票数 1
1
回答
什么是Metadata DB Derby?
、
、
元
数据
DB Derby的含义是什么。我听说是某种文件系统。但是有谁能说出它到底是什么&它起作用了吗?
浏览 0
提问于2015-06-08
得票数 1
1
回答
如何在hdfs上使用
hive
?
、
而且,我创建了一个名为cx的
数据
库,如下所示:OK
hive
(default)> show databases;cxTime taken: 0.032 seconds, Fetched: 2 row(s)当我使用“描述
数据
库”命令检查
数据
库cx的细节时我发现它的
存储
在本地文件系统上: <em
浏览 3
提问于2016-07-04
得票数 1
回答已采纳
2
回答
如何为Spark SQL建立
元
数据
数据
库?
、
Hive
可以有自己的
元
数据
,并在那里
存储
表、列、分区信息。如果我不想使用
hive
.Can,我们将为spark创建一个与
hive
相同的
元
数据
。我想查询spark SQL (不使用dataframe),就像
Hive
(select,from和where)一样,我们能做到吗?如果是,我们可以使用哪个关系
数据
库来
存储
元
数据
?
浏览 1
提问于2018-12-18
得票数 1
1
回答
Spark和Metastore关系
、
、
我知道
Hive
Metastore用于
存储
我们在
HIVE
中创建的表的
元
数据
,但是为什么spark需要Metastore,Metastore和Spark之间的默认关系是什么为什么即使iam没有使用任何sql库,spark by defaults也会检查
元
存储
区连接?
浏览 8
提问于2017-09-21
得票数 4
1
回答
配置单元元
存储
DataModeling文档?
、
、
配置单元表依赖于它的
元
存储
,它有表,即TBLS,SDS INXD,... 有没有关于
元
存储
的
数据
模型的文档,包括图表和描述?因为它是开源的,所以必须有一个
存储
库,用于维护每个
hive
版本的
Hive
元
存储
数据
建模和文档
浏览 1
提问于2013-06-24
得票数 3
1
回答
从蜂巢到德鲁伊交互时出错
、
、
、
我正在尝试从
Hive
创建一个Druid
数据
源,并为此使用了表
Hive
。 timemachine int, lang String,在Druid上创建一个新的
数据
源。= druid; SET <
浏览 6
提问于2019-10-14
得票数 0
回答已采纳
2
回答
蜂箱的处理库是什么?
、
、
、
也就是说,
数据
可以从任何地方获取,但必须在HDFS中加载,因为
HIVE
使用hadoop的处理引擎来处理
数据
。对吗?内部表中,table's metadata and table's data都可以在
HIVE
的
数据
仓库中使用,而且这个
数据
仓库只在HDFS中。对吗?在外部表中,table's metadata and table's data和NOT都可以在
HIVE
的
数据
仓库中使用,但在HDFS中是可用的。但是,<e
浏览 26
提问于2022-02-05
得票数 1
2
回答
创建外部表但warehose为空?
、
我使用的是
hive
v0.13 我的
数据
存储
在hdfs中,我使用create "CREATE external TABLE"为这些
数据
创建一个表。一切正常,我可以发出"select"语句。问题在仓库目录(
hive
.metastore.warehouse.dir)下,我没有看到添加任何files/data,这正常吗?我知道使用"external"时,表
数据
不会被复制到仓库目录,但是表的
元
数据</
浏览 1
提问于2015-06-04
得票数 0
1
回答
无法从impala/
hive
/spark sql访问"spark注册表“
、
、
我使用scala在spark中创建了一个
数据
源。我有一个case类,并创建了一个RDD并将其注册为表。就像spark文档中给出的例子一样。WHERE age >= 13 AND age <= 19")但是,我不能访问
hive
浏览 0
提问于2014-10-29
得票数 0
1
回答
hdfs快照可用于恢复单元格吗?
、
、
知道
hive
和hdfs一起使用一个亚稳态,是否可以将运行中的hadoop-
hive
集群中的hdfs快照恢复到一个新的hadoop-
hive
集群中?
浏览 5
提问于2014-06-18
得票数 1
4
回答
配置单元元
存储
和名称节点在群集中的作用是什么?
在安装了
Hive
的群集中,metastore和namenode有什么?我知道Metastore拥有所有的表模式和分区细节以及
元
数据
。现在,这个
元
数据
是什么?那么namenode有什么呢?
浏览 1
提问于2013-06-12
得票数 13
1
回答
使用MySQL作为
元
存储
从配置单元查询
元
数据
、
、
、
、
我正在寻找一种使用HiveQL命令查询我的配置单元
数据
的
元
数据
的方法。 我配置了一个ODBC
元
存储
,但必须通过
HIVE
命令查询
元
数据
,因为这样我就需要通过MySQL连接到
HIVE
系统来访问
数据
。
浏览 12
提问于2018-02-14
得票数 1
1
回答
Spark-Sql自定义
元
存储
、
在
HIVE
中,我们可以将不同的RDBMs设置为
元
存储
,并让
HIVE
在其中
存储
所有
元
数据
。除此之外,通过hiveserver2,我们可以让
HIVE
监听请求并为其提供服务。我们可以将Oracle (一个例子)设置为Spark-Sql的
元
存储
吗?如果是的话,有没有人可以帮我设置一下? 谢谢!
浏览 32
提问于2021-07-31
得票数 0
回答已采纳
1
回答
如何利用Hadoop实时处理Postgres
数据
库?
、
、
我有一个Postgres
数据
库,用于生产服务器,需要定期使用Hadoop进行分析。在Hadoop中进行的每一个查询都应该基于Postges
数据
库中可能的最新版本。如何在Hadoop中进行近乎实时的
数据
分析?
浏览 4
提问于2015-05-19
得票数 2
回答已采纳
1
回答
将hdfs文件复制到
hive
表后复制的文件总数
、
、
假设我将hdfs中的一个文件加载到
hive
表中,那么该文件的总副本是多少。在hdfs中,文件被复制了3次,现在复制到
hive
表会产生更多的副本,这些副本总计多达6个副本?
浏览 1
提问于2016-08-24
得票数 0
回答已采纳
1
回答
Hive
与Parquet文件上的星火
数据
集
、
、
对于相同的
数据
,我有两个实例。path_to_file") .as[MyDataSet]我的问题是,在性能和扫描
数据
的数量方面
浏览 0
提问于2018-07-05
得票数 4
回答已采纳
2
回答
蜂巢的桌子存放在哪里?
我是Hadoop的新手,我刚刚开始研究
Hive
,我的理解是它提供了一种查询语言来处理HDFS中的
数据
。使用HiveQl,我们可以从HDFS创建表并将
数据
加载到其中。具体来说,如果我们的HDFS中有100 GB文件,并且我们想从这些
数据
中创建一个单元表,那么该表的大小是什么,它
存储
在哪里呢? 如果我对这个概念的理解是错误的,请纠正我。
浏览 4
提问于2015-03-26
得票数 9
回答已采纳
3
回答
配置单元-where是
存储
的表信息
我在
HIVE
中创建和插入表,文件是在HDFS上创建的,还有一些是在外部
存储
S3上创建的。 假设我创建了10个表,在
Hive
中有没有系统表可以找到用户创建的表信息?
浏览 0
提问于2016-11-23
得票数 1
1
回答
Hadoop 3中的星火和蜂巢: metastore.catalog.default和spark.sql.catalogImplementation的区别
、
、
、
、
我正在使用Hadoop 3开发Hadoop集群(HDP),还安装了Spark和
Hive
。由于星火目录和
Hive
目录是分开的,所以知道如何在Spark应用程序中保存
数据
,以及在何处保存
数据
,有时会有些混乱。我知道,属性spark.sql.catalogImplementation可以设置为in-memory (使用基于session的目录)或
hive
(使用
Hive
目录来
存储
->的持久
元
数据
,但
元
数据</
浏览 4
提问于2020-01-24
得票数 9
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
大数据入门基础系列之浅谈Hive的数据存储和元数据存储
Hive底层数据存储格式详解
【挑战30万年薪】Hive语句详解之DML操作【元数据存储】
分布式存储恢复hbase和hive数据库报告
Hive数据模型
热门
标签
更多标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
活动推荐
运营活动
广告
关闭
领券