Loading [MathJax]/jax/output/CommonHTML/config.js

开发者社区

文档建议反馈控制台

文章/答案/技术大牛

发布

社区首页 >问答首页 >是否可以在不同的hdfs群集上设置配置单元进程表？

问是否可以在不同的hdfs群集上设置配置单元进程表？
EN

Stack Overflow用户

提问于 2015-05-06 12:49:51

回答 1查看 826关注 0票数 0

一个配置单元实例是否可以跨hdfs集群存储不同的表。然后在这些桌子上做hive ql？

我的用例是，我在一个hdfs集群上有一个配置单元表。我想用hive ql对其进行一些处理，并将输出写入另一个hdfs集群。我希望只通过hive直接实现这一点，而不需要运行一些转储/复制/导入过程。那么这是可能的吗？我真的不认为这是可能的，然而，我注意到一个设计页面：

https://cwiki.apache.org/confluence/pages/viewpage.action?pageId=27837073

在其中，它说：

请注意，即使在今天，不同的分区/表也可以跨越多个dfs，并且配置单元不会强制执行任何限制。这些dfs也可以位于不同的数据中心

除此之外，我没能在谷歌上搜索到任何相关的东西。

有人对此有什么想法吗？谢谢。

有奖征集｜云上CPU玩转AIGC挑战赛

参加活动赢取洛斐键盘、小米电纸书、智能音响等鹅厂周边！

EN

回答 1

Stack Overflow用户

发布于 2016-03-04 14:01:54

有多种方法可以处理这个问题。你可以使用镜像(使用像Apache Falcon这样的工具)。在这种情况下，数据存储在两个集群中。如果您希望跨具有不同表的集群进行查询而不使用镜像，那么可以使用Apache Drill这样的工具，这些工具可以连接来自不同数据源的数据。目前支持hive、mongo、json、kudu等

票数 0

EN

页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持

原文链接：

https://stackoverflow.com/questions/30077280

复制

相关文章

python类中初始化形式：def __init__(self)和def __init__(self, 参数1，参数2，，，参数n)区别

这种形式在init方法中，只有一个self，指的是实例的本身，但是在方法的类部，包含两个属性，name， grade。

Python学习者

2023/06/07

5730

32-位置参数

注意：位置参数中的数字是字符形式的 import sys print(sys.argv) # sys.argv是sys模块里的argv列表 # python3 position_args.py # python3 position_args.py 10 # python3 position_args.py 10 bob

凯茜的老爸

2018/09/11

4420

python之函数的位置参数

python java 微信编程算法

实际开发过程中，经常会遇到很多完全相同或者非常相似的操作，这时，可以将实现类似操作的代码封装为函数，然后在需要的地方调用该函数。这样不仅可以实现代码的复用，还可以使代码更有条理性，增加代码的可靠性。下面我们来介绍一下python的函数位置参数相关内容。

jiankang666

2022/12/05

5510

解决WebService中System.InvalidOperationException:缺少参数的问题

windows server 接口

此问题在.Net 4.0 IIS7 Windows Server 2008下可能会出现。现象是第一次正常调用，第二次接口报错。删除CacheDuration即可。

从今若

2019/09/18

2.7K1

django_filters TypeError: __init__() got an unexpected keyword argument 'name'

django field filter

django-filter 参数名字已经由 name 更改为 field_name

卓越笔记

2023/02/18

5240

（23）Bash位置参数变量

位置参数变量主要是用来向脚本当中传递参数或数据的，变量名不能自定义，变量作用是固定的。

生信real

2020/08/26

8990

[周末往期回顾]Oracle Data Guard 参数介绍

oracle 数据库 sql javascript node.js

Data Guard作为Oracle提供的一个高可用及灾备解决方案,理解并可以实施它对于DBA来说是非常重要套的技能

bsbforever

2020/08/19

4840

[周末往期回顾]Oracle Data Guard 参数介绍

Django 获取请求参数

django http 编程算法 php

　　我们在使用python做接口测试的时候，通常使用的是requests库。而大家都知道还有一个request东西，很多人对requests与request两个东西傻傻分不清。下面我简单来介绍一下。

全栈测试开发日记

2023/02/02

2.7K0

【说站】python位置参数的使用注意

2、调用函数中指定的实际参数的数量必须与形式参数的数量一致(不能传输多传输少)，否则Python解释器会抛出TypeError异常，并提示缺乏必要的位置参数。

很酷的站长

2022/11/23

5940

【说站】python位置参数的使用注意

Linux之Shell位置参数变量

编程算法 shell bash bash 指令

文章目录位置参数变量 1. 介绍 2. 基本语法 3. 位置参数变量位置参数变量 1. 介绍当我们执行一个 shell 脚本时，如果希望获取到命令行的参数信息，就可以使用到位置参数变量比如： ./myshell.sh 100 200 , 这个就是一个执行 shell 的命令行，可以在 myshell 脚本中获取到参数信息 2. 基本语法 n （功能描述：n 为数字，0 代表命令本身，1-9 代表第一到第九个参数。十以上的参数，十以上的参数需要用大括号包含，如 * （功能描述：这个变量代表命令

兮动人

2021/07/21

5.3K0

Linux之Shell位置参数变量

Django连接MySQL缺少mysqlclient包，Python3.8安装mysqlclient

pip pycharm 解决方案

在https://www.lfd.uci.edu/~gohlke/pythonlibs/#mysqlclient找到适合自己版本的mysqlclient

SingYi

2022/07/14

8840

Django连接MySQL缺少mysqlclient包，Python3.8安装mysqlclient

View的位置参数及其Scroller类的理解

x和y是View左上角的坐标，translationX和translationY是View左上角相对于容器的偏移量。这几个参数都是相对于父容器的坐标。

1025645

2018/08/23

6170

多说单点登录（SSO）介绍（解决缺少client_id参数）

编程算法 http php 网站

多说是目前用的最广泛的一个社会化插件，同时也支持各主流网站的单点登录。官方有详细的开发文档： http://dev.duoshuo.com/docs/5023323ce9b7bde608000012

飞奔去旅行

2019/06/13

1.5K0

多说单点登录（SSO）介绍（解决缺少client_id参数）

【JMeter】参数Parameters和Body Data

编程算法 json http https java

在做接口并发测试的时候，才发现Jmeter中的Parameters和Body Data两种参数格式并不是简单的一个是xx=xx，另外一个是json格式的参数

全栈程序员站长

2022/09/12

1.3K0

【JMeter】参数Parameters和Body Data

PYTHON 中的__init__()方

在类定义时，self和__init__会时常用到。 self 参数，它在所有的方法声明中都存在。它代表实例对象本身，当你用实例调用方法时，由解释器悄悄地传递给方法的，所以，你不需要自己传递self 进来，因为它是自动传入的。

py3study

2020/01/07

5580

dh参数建模_data vault 建模

java https 网络安全

DH法一般用一次就丢，然后后面再需要用的时候就会忘，所以本文整理了DH建模法，方便需要使用的时候进行参考。这里不讲原理，只讲结论和方法

全栈程序员站长

2022/09/29

5340

dh参数建模_data vault 建模

Oracle Data Guard 重要配置参数

Oracle Data Guard主要是通过为生产数据库提供一个或多个备用数据库(是产生数据库的一个副本)，以保证在主库不可用或异常时数据不丢失并通过备用数据库继续提供服务。对于Oracle DG的配置，我们可以通过Grid Control来完成，也可以通过Data Guard Broker以及SQL*Plus来完成。对于前两者方式可以在图形界面上完成，操作简单。而对于使用SQL*Plus命令行方式，我们需要进行大量的配置，尤其是这其中的一些参数。本文主要描述配置Oracle Data Guard 的重要参数。下面关于Data Guard简称为DG。

Leshami

2018/08/13

1K0

python 函数编程的位置参数、默认参数、关键字参数以及函数的递归

首先对于函数调用： !usr/bin/env python _*_ coding:utf-8 _*_ def AQA(INPUT): if INPUT=='hello world': #在输入正确的情况下，不想让其调用hello_again()函数， #法一：可利用返回值（return）进行判断 #法二：可将函数放在else下执行 print('你好，世界') return 'right' else:

学到老

2018/03/19

1.2K0

python 函数编程的位置参数、默认参数、关键字参数以及函数的递归

三维世界中相机的位置参数

javascript 人工智能

上篇文章带读者完成了一个3d弹弹球的加强版，读者顺便了解了下灯光和阴影的基本用法，关于相机的位置参数问题，我们在前文只是简单提过，本篇文章，想和读者分享下相机的位置参数问题。

江南一点雨

2019/03/07

1.4K0

mysql性能优化(四) mysql修改data存放位置

数据库云数据库 SQL Server sql 面向对象编程 ide

mysql性能优化(四) mysql修改data存放位置

Java架构师必看

2021/05/27

2.4K0

mysql性能优化(四) mysql修改data存放位置

相似问题

TypeError：init()缺少一个必需的位置参数：'data‘

110

Django - init()缺少一个必需的位置参数：'request‘

16

init()缺少一个必需的位置参数

60

init()缺少一个必需的位置参数：'self‘

41

TypeError：init()缺少一个必需的位置参数

11

活动推荐

即时通信IM，低门槛快速接入

添加站长进交流群

领取专属 10元无门槛券

AI混元助手 在线答疑

关注 腾讯云开发者公众号

洞察 腾讯核心技术

剖析业界实践案例