腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
Apache
Nifi
:
首先
删除
条目
,
然后
在
MongoDB
中
插入
、
我想在
插入
传入文档之前清空集合。集合应该始终反映与进入处理器的文档完全相同的文档。我可能不得不使用这种方法:使用并使用GenerateFlowFile({}) -> DeleteMongo来
删除
集合
中
的所有
条目
。
浏览 35
提问于2019-07-11
得票数 1
回答已采纳
2
回答
从
NiFi
发布到Azure Cosmos Db
、
我使用
NiFi
作为主要的数据摄取工具,并希望为我的容器提供来自
NiFi
流文件的文档。有没有人可以分享一下从
NiFi
向Azure Cosmos Db发布流文件内容的方法?提前感谢 更新(2019.05.26):最后我使用了Python script,并从
NiFi
调用它来发布消息。我传递了一条消息作为参数。
浏览 5
提问于2018-12-09
得票数 1
1
回答
Nifi
自定义处理器异常
我使用的是
Nifi
0.4.1版本。正在编写自定义代码以将CSV转换为avro格式。我已经创建了类文件,并能够生成nar文件。将nar文件放入lib目录并重新启动
nifi
服务器。当在
nifi
工作区拖动处理器时,无法看到为将csv转换为avro而创建的类。谢谢,
浏览 4
提问于2016-02-25
得票数 3
2
回答
Apache
Nifi
: Oracle到
Mongodb
的数据传输
、
、
我想使用
apache
nifi
将数据从oracle传输到
MongoDB
。Oracle总共有900万条记录。我已经使用QueryDatabaseTable和PutMongoRecord处理器创建了
nifi
flow。此流程运行良好,但存在一些性能问题。
在
启动
nifi
流之后,SplitJson -> PutMongoRecord队列
中
的记录不断增加。有没有办法降低SplitJson处理器放入队列
中
的记录的速度?或 提高PutMongoRecord<e
浏览 8
提问于2020-06-29
得票数 0
1
回答
未能启动
NiFi
、
我
在
nifi
lib文件夹
中
添加了一些jar文件,以允许我连接hive,但不幸的是,
nifi
应用程序没有
在
web上运行,
然后
我
删除
了所有新的jar文件,但是问题没有解决,我一直收到以下错误(NIFIVersion1.15.0) 由于org.
apache
.
nifi
.
NiFi
: org/
apache
/
NiFi
/processor/DataU
浏览 4
提问于2021-12-28
得票数 0
2
回答
如何使用流创建正在运行的
nifi
docker镜像
、
我启动了一个
apache
/
nifi
容器,构建并配置了一个流。我不清楚是什么文件(nar、xml等)需要对用户要运行的映像可用。
浏览 5
提问于2020-09-22
得票数 1
1
回答
Apache
/
Nifi
1.12.1码头形象问题
、
、
我有一个基于
apache
/
nifi
:1.12.1的Dockerfile,希望像这样展开它:RUN mkdir -p /opt/
nifi
/
nifi
-current构建成功,我使用docker run -it -d --rm --name
nifi
nifi
-test运行它,但是当我通过docker exec进入容器时,没有flow dir。我试过像USER
浏览 9
提问于2022-05-04
得票数 1
回答已采纳
1
回答
在
NiFi
中
启用TLS
、
我通过运行以下命令
在
NiFi
中
启用了TLS, 现在使用bin/
nifi
.sh sta
浏览 2
提问于2017-07-19
得票数 2
回答已采纳
2
回答
清除FetchDistributedMapCache处理器的缓存
如何在
Apache
NiFi
中
清除FetchDistributedMapCache处理器的缓存?我尝试
删除
持久化目录,也尝试一起给出一个新目录,但它仍然获取旧数据。谢谢你的帮助。
浏览 0
提问于2017-04-24
得票数 5
2
回答
Apache
NiFi
可以配置logback.xml文件以通过UDP向远程服务器发送日志吗?
、
、
我有一个
Apache
实例,它需要将消息记录到远程Graylog服务器。我希望将
nifi
-app.log、
nifi
-bootstrap.log和
nifi
-user.log的输出全部发送到此服务器,以及它们的默认本地策略。我的问题: 是否有更好的方法来配置
Apache
来发送
NiFi
的日志?
浏览 5
提问于2018-12-07
得票数 1
回答已采纳
1
回答
Apache
安全群集、不受信任的代理CN=
nifi
、OU=
NIFI
错误
我需要
Apache
安全集群配置方面的帮助。
首先
,我只使用ldap-用户组提供程序,但它不能工作。Web
中
的错误消息是Untrusted proxy CN=
nifi
, OU=
NIFI
然后
,我将我的authorizers.xml修改为复合用户组提供者Policy Provider">file-access-policy-provider
浏览 6
提问于2022-03-15
得票数 0
1
回答
无法解决org.
apache
.
nifi
:
nifi
-standard-services-api-nar -如何在CustomProcessor中使用LookupService
、
、
我正在实现自定义
NiFi
处理器来解码一些文件。
在
解码过程
中
,我需要查找某些数据映射的外部CSV记录。注意,这个解码过程很复杂,所以它必须是一个自定义处理器。我知道可以设置外部CSVRecordLookupService,
然后
在
CustomController
中
定义一个属性描述符,如下所示 <version>1.13.0&
浏览 4
提问于2021-04-05
得票数 2
回答已采纳
1
回答
运行实例化
NiFi
接收器的Spark应用程序时出现依赖项错误
、
、
、
、
+= "org.
apache
.
nifi
" % "
nifi
-site-to-site-client" % "0.7.0"import org.
apache
.spark.SparkContext import org.
apache
.spark.S
浏览 4
提问于2016-07-19
得票数 2
1
回答
如果列不断更新,
MongoDB
如何保持一个数值列(该列被索引)始终保持排序?
、
、
、
、
MongoDB
是做什么的?
在
每次更新之后,保持该列排序的时间复杂度是多少?
浏览 0
提问于2021-12-29
得票数 -1
回答已采纳
1
回答
Kafka队列
中
是否存在重复记录?
、
、
、
、
我使用
Apache
Nifi
、Spark和Kafka
在
它们之间发送消息。
首先
,我使用
Nifi
获取数据,并将其发送到Spark进行处理。
然后
,我再次将数据从Spark发送到
Nifi
,以将其
插入
到DB
中
。 我的问题是,每次我运行Spark,我都会得到同样的3.142条记录。我尝试查看Kafka-Queue-I (从
Nifi
到Spark)或Kafka-Queue-II (从Spark到
NiFi
)上是否有数
浏览 15
提问于2020-02-14
得票数 0
2
回答
如何在ETL管道的某个地方
插入
识别敏感信息的过程?
、
、
我们已经使用
apache
NiFi
开发了ETL管道。只有当客户端从portal.After上传源数据文件时,它才会触发,该文件
中
存在的数据通过不同的层被转换并存储回仓库(即蜂巢)。问题:为了将数据输入到DSS工具
中
,
首先
要在蜂巢表中加载数据。这很好。但是,我们不能阻止现有的ETL流介于两者之间,
然后
开始敏感信息的识别过程。上面的解决方案必须需要一些手动处理,我想摆脱它并使之成为automated.that,它应该
插入
到
NiFi
pipeline.But
浏览 4
提问于2020-07-01
得票数 0
2
回答
未能解析id为‘review_start_datetime’的文档
中
类型为[date]的字段[DEMO_54ddab6]
、
、
、
doc.review_start_time = datetime.datetime.now()doc.save()
在
执行保存方法时
浏览 4
提问于2020-08-28
得票数 3
2
回答
需要在
NiFi
中使用1个处理器而不是5个FetchHDFS
我
在
HDFS中有5个XML文件,我正在使用
Apache
this is the flow
nifi
获取这些文件。
首先
,我使用生成流文件处理器,
然后
我必须使用5个不同的FetchHdfs处理器。我不能使用GetHdfs,因为它会
删除
目录
中
的所有文件,并且我没有权限摄取这些文件。因此,我正在寻找一种方法,除了使用5 FetchHdfs之外,我还能做什么?所有的文件都在同一个目录
中
,我想保留它们,这样我就可以多次测试。我
在
Transform
浏览 11
提问于2021-08-09
得票数 1
1
回答
如何阻止页面自动更新(Meteor)?
、
首先
在DOM中直接添加
条目
,
然后
在用户添加完
条目
后,将与此新
条目
相关的文档
插入
到
MongoDB
中
。在当前用户添加新列表项时,如何防止页面自动拉入新列表项(例如,可能已由其他用户添加的列表项)?有没有办法让应用程序停止侦听添加到
MongoDB
的任何新文档,直到应用程序开始告诉它重新启动(请注意,应该只阻止页面的指定区域,即特定的流星模板)的自动更新?
浏览 2
提问于2015-04-09
得票数 0
1
回答
Nifi
1.5集群上的不可信代理
、
、
我已经尽了最大的努力去跟踪:<prop
浏览 0
提问于2018-03-14
得票数 2
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Apache NiFi介绍及使用体验
NIFI1.21.0_Mysql到Mysql增量CDC同步_日期_以及null数据同步处理
大数据流处理:Flume、Kafka和NiFi对比
Flink CDC 的实现原理是什么?
MongoDB的简单介绍(二)
热门
标签
更多标签
云服务器
ICP备案
云直播
对象存储
实时音视频
活动推荐
运营活动
广告
关闭
领券