腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(1829)
视频
沙龙
0
回答
HDF
NIfi
-
Nifi
是否
在
HDP
节点
上
写入
出处
/
数据
?
、
Hi 我有一个带有3个
Nifi
实例的
HDF
集群,它在
HDP
集群
上
运行作业(Hive/Spark)。通常,
nifi
会将所有信息
写入
本地机器
上
可用的不同存储库。我的问题是-
nifi
是否
写入
任何
数据
,来源信息或在
HDP
节点
上进行溢出(例如,
HDP
群集中的
数据
节点
)访问HDFS、Hive或Spark服务?
浏览 10
提问于2017-06-12
得票数 0
2
回答
将Apache
NiFi
添加到现有的Hortonworks
HDP
集群中
、
、
我有一个运行Hortonworks
HDP
2.5.3和Ambari 2.4.2.0的6
节点
集群不能在已安装
HDP
的系统
上
安装
HDF
。 我想知道如何在集群
上
安装
NiFi
。如果可能的话,我也想和安巴里一起解决这个问题。我
是否
应该继续安装
NiFi
的独立版本,并将端口更改为8080以外的东西
浏览 6
提问于2017-03-08
得票数 1
回答已采纳
1
回答
Nifi
org.apache.thrift.transport.TTransportException
、
、
、
我有
Nifi
1.4.0和Hive 2.3.0。元存储服务运行正常,但由于某种原因,
Nifi
无法执行PutHiveStreaming处理器。 at org.apache.
nifi
.processors.hive.PutHiveStreaming$$Lambda$
浏览 1
提问于2017-11-09
得票数 0
1
回答
PutHiveQL匿名权限被拒绝:用户[ HiveAccessControlException ]没有[SELECT]权限
、
、
、
我向PutHiveQL提供了一个insert sql,并得到了这个错误:当我们
在
HDF
中安装
nifi
,并通过从浏览器访问它时我可以知道
在
配置单元中应该在哪里配置权限吗?
浏览 16
提问于2016-08-02
得票数 0
1
回答
Apache
Nifi
中的工作流
数据
意外消失
我的流工作正常,但是一个小时后流的
数据
就消失了。我已经将堆大小内存从100mb减少到8g它不工作,我的cpu使用率增加到500%,然后我的流的
数据
消失了。我的系统配置:处理器2.3 GHz英特尔酷睿i7这是我的flow 的日志 这是我丢失
数据
并删除content 后的流程
浏览 0
提问于2019-02-18
得票数 2
1
回答
Nifi
PutHiveStreaming向HDFS
写入
数据
,但无法
在
Hive表中看到
数据
、
、
、
我正在使用
HDF
Nifi
1.5和
Hdp
Hive 3.1。
在
蜂巢中创建一个分区和桶形表:
Nifi
日志显示
写入
HDFS路径的
数据
,但我无法查看H
浏览 0
提问于2018-10-30
得票数 1
回答已采纳
1
回答
如何将文件从/user/maria_dev/tutorials/test.csv (
HDP
)复制到/sandbox/tutorial-files/640/
nifi
/input (
HDF
)?
、
、
、
、
在
Docker Desktop
上
使用Hortonworks
HDP
3.0.1和
HDF
Sandbox 我已经登录到
HDP
,并尝试从/user/maria_dev/tutorials/test.csv复制一个文件到
HDF
的/sandbox/tutorial-files/640/
nifi
/input,但不起作用。如何使用HDFS以这种方式将文件从
HDP
复制到
浏览 4
提问于2021-01-14
得票数 0
2
回答
在
现有Hadoop集群的
数据
节点
上
安装
NiFi
(开放源码)
、
、
、
如果在现有的Hadoop集群上有10个datanodes,那么可以
在
4或6个datanodes
上
安装
NiFi
吗?
在
每个
NiFi
datanode (所以是10 )
上
安装
NiFi
是否
更有意义?有10个<e
浏览 2
提问于2019-10-04
得票数 2
1
回答
org/apache/http/nio/protocol/HttpAsyncResponseConsumer和
NiFi
集成错误: java.lang.NoClassDefFoundError:
、
、
在
NiFi
中将随机
数据
推送到输出端口 spark.driver.extraClassPath /usr/
hdf
/3.1.1
浏览 2
提问于2018-07-30
得票数 1
1
回答
迁移Dataflow
NIFI
我
在
一个独立版本中使用了
NIFI
,现在我已经用
HDF
安装了一个集群
NIFI
版本,我想将我的DataFlow从我的独立版本迁移到集群版本。 做这件事最好的方法是什么?
浏览 9
提问于2017-01-04
得票数 1
回答已采纳
1
回答
NiFi
-连接到另一个实例(S2S)
其目的是
在
NiFi
的两个被篡改的实例之间发送
出处
数据
,一个
在
端口8080,另一个
在
端口9090。我创造性地
在
目标
NiFi
上
创建了一个名为"IN“的输入端口,源
NiFi
上
的服务配置是:但是,我得到了以下错误: 由于无法与远程
NiFi
集群通信以确定远程集群中存在哪些
节点
,因此无法刷新远程组的对等
节点
浏览 0
提问于2019-01-08
得票数 2
1
回答
Nifi
处理器的右键选项卡
、
我
在
Kerborized环境中有
Nifi
3
节点
集群(通过Hortonworks
数据
流-
HDF
安装)。作为安装的一部分,Ambari创建了
nifi
服务keytab。嗨如果我
浏览 3
提问于2017-06-09
得票数 1
1
回答
Hortonworks 2.4沙箱
在
Ambari
NiFi
安装中失败
、
、
Ambari/
NiFi
安装在http/Gui
上
失败,消息如下: resource_management.core.exceptions.Fail:执行'unzip /tmp/
nifi
-0.5.1.1.1.2.0解压缩:无法
在
/tmp/
nifi
-0.5.1.1.1.2.0-32.zip或/tmp/
nifi
-0.5.1.1.2.0-32.zip.zip之一中找到zipfile目录,也无法找到/
浏览 3
提问于2017-07-13
得票数 1
1
回答
Nifi
(
HDF
)的多重坚韧?
我有一个
HDF
集群,由安装
Nifi
的3个
节点
组成。我的目标是
在
Nifi
水平
上
实现多重坚韧(也许不是最好的词)。意思是我想要两样东西: 让不同的用户组
在
不同的流上工作,响应一些访问策略。强制不同用户
在
unix系统级别上执行流。这听起来很奇怪,但是目的地(hdfs,hive.)我的流量需要不同的用户在上面写。如果有一个
nifi
用户可能会有问题。到目前为止,我已经成功地使用了
nifi
中的安全和授权配置实现了第一点。不过
浏览 1
提问于2017-02-08
得票数 3
1
回答
将KafkaConnect添加到现有的Ambari服务
、
、
我有一个集群设置并由Ambari管理,但是我想添加一个KafkaConnect停靠程序,并使用ZooKeeper,这已经是通过Ambari安装的。我只能找到对接者的形象,部署卡夫卡-连接到动物园和卡夫卡,但我不需要这些对接。
浏览 2
提问于2018-05-28
得票数 2
回答已采纳
1
回答
Apache
NIFI
安装失败,因为Ambari服务-
在
配置字典中找不到配置参数‘kafka_broker_hosts
、
、
、
我的系统环境如下: 我能理解的是失败背后的主要原因是我已经
在
/usr/
浏览 0
提问于2016-12-08
得票数 0
1
回答
存储自定义
NiFi
处理器所需的
数据
、
HDP
-2.5.3.0,
NiFi
1.1.1lastRunAt ;..} 注意,HDFS不是一个选项,因为
NiFi
可以
在
图片中没有任何Hadoop安装的情况下运行。有什么选择-我想知道,如果动物
浏览 3
提问于2017-02-17
得票数 2
回答已采纳
1
回答
NiFi
集群码头负载平衡配置
、
、
、
我想为通过Docker容器部署的
NiFi
集群
在
docker-compose.yml文件中配置负载平衡。当前LB的停靠-组合参数如下(对于三个
NiFi
节点
中的每个
节点
): -
NIFI
_CLUSTER_LOAD_BALANCE_PORT=6342=4但是,当我尝试
在
队列中使用负载平衡时,我可以选择队列
浏览 6
提问于2022-02-18
得票数 2
回答已采纳
1
回答
Apache
在
packer<number>temp文件夹中创建/tmp文件
、
我将我的
nifi
集群(4个
节点
)的版本从1.12升级到1.13,然后
nifi
开始
在
/tmp文件夹中创建大量文件。该文件的名称在这个模式封隔器(数字)临时。文件示例:packer2431509819824357743temp4个
节点
操作系
浏览 1
提问于2021-07-01
得票数 0
2
回答
主机磁盘使用情况:有关磁盘使用的警告消息
、
我已经下载了Hortonworks沙箱的
HDF
_3.0.2.0_vmware版本。我
在
笔记本电脑
上
使用的是VMWare播放器版本6.0.7。
在
启动/登录到Ambari后不久,我看到以下警报:切断的消息是:“使用的容量: 60.11%,32.3 GB,容量总计:53.7GB,path=/usr/
hdp
”。我希望我能够专注于
NiFi
/Storm的开发,而不是管理沙箱本身,然而它看起来好像VM太小了。下面是用于存储的VM设置。我如何着手纠正引
浏览 0
提问于2018-02-12
得票数 0
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Apache NiFi介绍及使用体验
大数据流处理:Flume、Kafka和NiFi对比
公共安全领域 Kafka 应用实践
10分钟了解Apache Nifi在物联网的使用
Apache NiFi用户指南-数据流的命令和控制
热门
标签
更多标签
云服务器
ICP备案
对象存储
腾讯会议
云直播
活动推荐
运营活动
广告
关闭
领券