腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
Dataproc:局部蜂巢转移的主要用例是什么?
默认情况下,Dataproc使用主节点上的本地
MySQL
(图像版本1.5+)数据库作为
Hive
表元数据存储。使用它的好处和不使用它的缺点是什么?
浏览 2
提问于2021-07-15
得票数 3
回答已采纳
1
回答
hdfs快照可用于恢复单元格吗?
、
、
知道
hive
和hdfs一起使用一个亚稳态,是否可以将运行中的hadoop-
hive
集群
中的hdfs快照恢复到一个新的hadoop-
hive
集群
中?
浏览 5
提问于2014-06-18
得票数 1
2
回答
hadoop/蜂巢亚稳态
我打算使用
mysql
,但我不知道我是否应该使用它。在名称节点上还是在它自己的服务器上?
浏览 0
提问于2009-08-07
得票数 1
2
回答
aws emr蜂窝转移瘤配置
hive
-site.xml
、
、
、
我正在尝试将
hive
-site.xml配置为在EMR上在本地
MySQL
之外的
MySQL
。如何修改现有的
集群
配置以从
hive
-site.xml添加S3?
浏览 1
提问于2015-03-08
得票数 0
2
回答
Dataproc配置单元:错误2003 (HY000):无法连接到'localhost‘上的
MySQL
服务器(111)
、
我正在使用以下命令创建dataproc
hive
集群
。gcloud dataproc clusters create
hive
-cluster \ --image-version 1.3 \:
hive
.metastore.warehouse.dir=gs://project-warehouse/datasets \ --metadata "
hive
-metastore-instance):Can
浏览 3
提问于2018-09-27
得票数 1
1
回答
如何在
集群
之间迁移数据?
、
、
、
、
我必须将
Hive
表复制到另一个
集群
,以保留我的表的模式和层次结构,所以我的问题是:为了将Cluster1的确切表(和数据库)复制到Cluseter2中,最安全和最恰当的方法是什么。我发现了一种全球性的说法: - distcp hdfs:source_Path hdfs:dest_Path -
hive
> MSCK REPAIR TABLE TABLE1; 但
浏览 5
提问于2017-02-01
得票数 2
1
回答
如何比较配置单元和
mysql
的性能
、
、
、
、
我在
hive
和
mysql
中实现了相同的数据仓库星型模式。我认为
Hive
在查询响应时间方面更好。问题是我没有一百万条记录,也没有hadoop的硬件
集群
。 我该怎么做呢?如果我假设有一个由10台服务器组成的
集群
,我可以将
hive
中的查询执行时间除以10?谢谢你
浏览 0
提问于2014-03-12
得票数 0
1
回答
将数据从
MySql
同步到DynamoDb
、
、
目前,我正试图找到一个(很好的)解决方案,说明如何将外部
MySql
数据库中的数据同步,该数据库与任何AWS完全分离为AWS DynamoDb。ERM () AWS似乎是要走的路,但似乎
Hive
脚本无法与外部
MySql
数据库通信?还是我搞错了?我发现很难找到任何可用的
浏览 3
提问于2016-08-24
得票数 1
1
回答
使用预览映像创建dataproc
集群
时未能打开
、
、
、
为1.2,包括
Hive
2.1。
Hive
中的Merge命令仅在2.2版本之前支持。因此,我必须对dataproc
集群
使用预览版本。当我对dataproc
集群
使用1.2版本时,我可以创建
集群
,而不会出现任何问题。在使用预览版本时,我得到了“未能打开Cloud ”这个错误。初始化脚本是。以前有没有人遇到过这个问题?Executing: /lib/systemd/systemd-sysv-install is-enabled
hive
-metastore
m
浏览 1
提问于2018-06-06
得票数 2
回答已采纳
1
回答
从蜂巢到德鲁伊交互时出错
、
、
、
我正在尝试从
Hive
创建一个Druid数据源,并为此使用了表
Hive
。 timemachine int, lang String,SET
hive
.druid.metadata.uri = jdbc:
mysql
:/
浏览 6
提问于2019-10-14
得票数 0
回答已采纳
1
回答
在此用例中使用的是哪个
集群
管理器spark?
、
我有一个包含4个节点的hadoop
集群
。我从存储在hdfs中的文件创建了一些
hive
表。然后,我将
mysql
配置为
hive
metastore,并将
hive
-site.xml文件复制到spark的conf文件夹中。var hiveContext = new org.apache.
浏览 2
提问于2016-05-09
得票数 0
1
回答
在蜂巢上创建表时出错
、
我在
Hive
中创建了这个表: , userId BIGINT失败:执行错误,从org.apache.hadoop.
hive
.ql.exec.DDLTask
浏览 2
提问于2013-02-01
得票数 0
2
回答
EMR群集中的外部配置单元转储问题
、
、
我将我的EMR
集群
的
hive
metastore指向外部
MySQL
RDS实例。我已经创建了新的配置单元数据库"mydb“,并且我在
hive
.DBS表中的外部
MySQL
DB中获得了条目。我在
hive
.TBLS的外部
MySQL
DB中得到了条目。到目前为止,一切都很好。我终止了我的表我第二天回来..我现在启动了新的
集群
,我做了下面的操作,使用MYDB;创建表mytable_2(id int);我得到下面的错误, 执行错误,从org.apach
浏览 4
提问于2017-05-19
得票数 4
1
回答
MySQL
群集顶部的配置单元层
、
、
、
免责声明:我是Hadoop和
Hive
的新手。在这种情况下,我可以结合使用
Hive
和Hadoop来查询数据库和检索数据吗?我的意图是使用配置单元作为
MySQL
集群
的顶层,并使用它对
MySQL
浏览 0
提问于2012-05-29
得票数 1
回答已采纳
5
回答
在AWS EMR上重新启动配置单元服务
、
、
、
、
我对
HIVE
以及AWS-EMR都很陌生。根据我的要求,我需要在群集外部创建配置单元元存储(从AWS EMR到AWS RDS)。我听从了“ 但是我想避免重启
集群
,有什么方法可以重启服务吗?
浏览 1
提问于2015-08-11
得票数 6
1
回答
创建Google
集群
并连接到外部远程蜂巢转移
、
、
、
我正在尝试创建一个dataproc
集群
,并指向一个远程
Hive
转移点,以便从这个
集群
访问
Hive
表。我使用下面的create群集命令来创建一个Dataproc2.0
集群
,并连接到远程
Hive
转移:gcloud dataproc clusters create wl1-cluster-=2.3.0,spark:spark.sql.
hive
.metastore.jars=maven,
hive
:
hive
.
浏览 3
提问于2021-09-10
得票数 2
回答已采纳
2
回答
使用Apache钻头嵌入式连接EMR上的蜂巢
、
、
、
、
到目前为止,我的情况是-根据关于为
Hive
、配置存储插件的文档,我对是使用远程Metastore还是使用嵌入式Metastore感到困惑。接下来,我的EMR
集群
正在运行,以下是
hive
-site.xml的样子- <name>
hive
.metastore.uris</name><&
浏览 7
提问于2015-12-27
得票数 1
回答已采纳
1
回答
用在上使用Presto?
、
我同时使用
Hive
和
MySQL
(通过),我想使用轻松地连接到两者。我已经看到有一个用于Cloud的,但是它不能直接使用Cloud。如何使初始化操作与Cloud一起工作,以便既可以使用
Hive
/Spark,也可以在Presto中使用Cloud?
浏览 3
提问于2015-11-23
得票数 0
回答已采纳
2
回答
在hadoop
集群
中,是否应该在所有节点上都安装
hive
?安装Pig
、
有很多关于在
集群
模式下安装Hadoop的博客。我的问题是: Hadoop安装在所有
集群
节点上。我是应该在所有
集群
节点上也安装Pig,还是只在主节点上安装Pig?
浏览 3
提问于2018-06-11
得票数 0
1
回答
AWS EMR群集的最佳Airflow架构是什么?
、
、
、
我有一个AWS EMR
集群
,其中包含1个主节点、30个核心节点和一些自动扩展的任务节点。现在,成百上千的
Hive
和
mysql
作业由Oozie在
集群
上运行。我搜索了一下,将气流应用到我的
集群
中。我发现所有的dag都应该位于每个节点上,而且Airflow Worker必须安装在所有节点上。而且,如您所知,只有主节点在
集群
上有
hive
/
mysql
应用程序。所以我很困惑。谁能告诉我适用于EMR
集群
的Airflow架构?
浏览 20
提问于2019-09-24
得票数 0
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
大数据集群服务安装-mysql,hive,azkaban,sqoop,spark,python
MySQL Cluster集群搭建
MySQL集群之Galera Cluster
利用sqoop将hive和mysql数据互导入
mysql 的类RAC集群 group replication
热门
标签
更多标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
活动推荐
运营活动
广告
关闭
领券