NIFI -节流警告

文章/答案/技术大牛

发布

1回答

apache-nifi

在我们的一个NIFI实例上，当我们处于backlog状态时，我们经常会遇到节流警告。我们调优了索引线程，并增加了分配给VM的资源(CPU)。我们还应该关注哪些其他因素，以确定是什么导致了导致节流的争用？很明显，可能是磁盘I/O，但当查看监视时，没有任何东西跳出来。任何关于其他人如何进一步调查的建议，将不胜感激。NIFI版本: 0.6.1

浏览 12提问于2016-09-07得票数 1

回答已采纳

1回答

我们在nifi管道中使用IMAP消费者处理器来读取来自office 365的电子邮件。我们在使用office 365电子邮件箱中的电子邮件时，一直在观察IMAP处理器中的问题。2021-01-04 11:00:00,286 ERROR [Timer-Driven Process Thread-6] o.a.nifi.processors.email.ConsumeIMAP ConsumeIMAPSuggested Backoff Time: 68448 milliseconds: org.apache.nifi.processor.exce

浏览 0提问于2021-01-05得票数 0

2回答

Nifi -匿名身份验证尚未配置

apache-nifi

我试着从我的nifi中获得系统诊断数据。但我有“匿名身份验证尚未配置”。错误。所有东西过去都正常工作，但是在最后一次重新启动nifi之后，发生了这个错误。

浏览 16提问于2022-02-17得票数 0

1回答

将现有的ETL迁移到NiFi:我应该选择什么处理器？

apache-nifi

我们有现有的ETL管道，探索将管道迁移到NiFi的可能性。我们的流水线包含用python/scala编写的作业，并进行大量的摄取/转换。什么样的处理器NiFi允许我把python/scala代码放进去？非常感谢。

浏览 11提问于2019-01-05得票数 0

回答已采纳

2回答

log.info in ExecuteScript

groovy、apache-nifi

每当我调用log.info时，都不会将任何东西写入nifi-app.log，但当我调用log.errorit时，则会这样做。是否有一些log4j配置或其他我需要做的事情？使用Nifi 1.0.xlog.info("FOO-BAZ-INFO") => nothing log.error("FOO-BAZ-ERROR") => 2016-11-15 10:29:24,023 ERROR [Timer-Driven Process Thread-6] o.a.nifi

浏览 4提问于2016-11-15得票数 4

回答已采纳

1回答

如何解决错误？

openssl、apache-nifi

警告主要的不安全密码提供者算法PBEWITHMD5AND256BITAES-CBC-OPENSSL密码请求org.apache.nifi.deprecation.log.DeprecationException:参考类org.apache.nifi.security.util.crypto.NiFiLegacyCipherProvider ClassLoader [org.apache.nifi.nar.NarClassLoader/work/nar/framework/ni

浏览 14提问于2022-11-03得票数 0

回答已采纳

2回答

org.apache.kafka.clients.NetworkClient引导代理(id：-3齿条: null)在通过NiFi连接到卡夫卡消费者时断开连接

apache-kafka、apache-nifi、aws-msk

我试图使用"org.apache.kafka.clients.NetworkClient ConsumeKafka_2_6处理器(NiFi版本1.12.1).In ConsumeKafka处理器使用NiFiConsumeKafka_2_6 processor (nifi版本1.12.1)使用来自Amazon上的kafka主题(Kafka version 2.2.1)中的消息。我收到的警告是:nifi Consumer =console-consumer can 34567-5，groupId=<

浏览 4提问于2021-01-05得票数 1

回答已采纳

1回答

魔术头球没有出现

apache-flink、apache-nifi

我正在尝试使用将Nifi连接到Flink： .url("http://localhost:8090/nifi作为具有默认属性的独立服务器运行，但以下属性除外： nifi.

浏览 0提问于2018-12-31得票数 2

回答已采纳

1回答

Nifi服务器启动问题

apache-nifi

我使用的是Nifi 0.4.1版本。我编写自定义代码来转换CSV到avro格式。我已经创建了类文件(.java文件)并能够生成nar文件。将新创建的nar文件放入lib目录并重新启动nifi服务器。类文件没有任何错误或警告。感谢任何帮助..

浏览 2提问于2016-03-07得票数 1

1回答

Nifi: Nifi PUTSFTP处理器的零字节错误。有办法通过PutSFTP发送零字节流文件吗？

apache-nifi

我在通过Nifi PutSFTP处理器发送零字节流文件时遇到了问题。想知道我是否需要设置一些配置？谢谢。零字节流文件通过SFTP (PutSFTP处理器)发送新的文件名PutSFTPid=1a091db4-1f9e-14cd-5206-1514485febc8

浏览 6提问于2021-04-20得票数 0

回答已采纳

1回答

自定义处理器和背压、节流

apache-nifi

NiFi 1.2.0我想出来的是，背压是我们在关系队列中配置的东西，像ControlRate这样的标准处理器可以帮助调节数据流。问题：在处理器中是否需要额外的编码(例如:要实现的某些接口)以使其能够为了背压而“休眠/停止消耗数据”，或者一旦处理器的“成功”关系被配置为用于背压，NiFi框架是否处理这一点

浏览 11提问于2017-07-03得票数 0

回答已采纳

1回答

apache 1.10站点到站点(http)错误:由于空，无法刷新远程组的对等点

apache-nifi

我想让nifi通过使用"SiteToSiteBulletinReportingTask“控制器来吃它自己的公告信息。然而，下面是我设置的，虽然nifi实例可以吃掉公告消息，但是它总是会引发警告信息，比如： 23:47:37 CSTWARNINGdf68bf40-016e-1000-b458-a0a98bf3ebc6SiteToSiteBulletinReportingTaskid=df68bf40-016e-1000-b458-a0a98bf3ebc6 org.apache.nifi.remote.client.

浏览 4提问于2019-12-11得票数 0

回答已采纳

1回答

hortonworks Ambari + nifi* selectHiveQL*

apache-nifi、ambari

我们使用hortonworks的ambari packone和nifi，然后我们遇到了这样的问题：当日志显示 2017-26 13:06:14,031警告主org.apache.nifi.nar.ExtensionManager控制器服务org.apache.nifi.dbcp.hive.HiveConnectionPool与其支持API org.apache.nifi.dbcp.hive.HiveDBCPService捆绑在一起2017-26 13:06:14,031错误主org.apac

浏览 2提问于2017-12-04得票数 0

1回答

无法使用nipyapi执行对nifi的任何调用。

python、apache-nifi、nipyapi

下面是配置的代码：nipyapi.config.nifi_config.host = 'https://localhost:8443/nifi-api'nipyapi.config.nifi_config.password = 'qwertyadmin1' nipyapi.config.registry_conf

浏览 12提问于2022-03-24得票数 0

1回答

NiFi InvokeHttp:如何在没有ExecuteGroovyScript的情况下使用multipart/form-data发送多个文件

groovy、multipartform-data、apache-nifi、rest

通常，当我必须向RestAPI发布多个包含multipart/form-data的文件时，我会使用如下所述的ExecuteGroovyScript：我没有此NiFi服务器的管理员访问权限，也无法更改NiFi配置，因此无法修复GroovyScript错误问:是否可

浏览 0提问于2021-05-14得票数 1

1回答

Nifi自定义处理器异常

apache-nifi

我使用的是Nifi 0.4.1版本。正在编写自定义代码以将CSV转换为avro格式。我已经创建了类文件，并能够生成nar文件。将nar文件放入lib目录并重新启动nifi服务器。类文件没有任何错误或警告。任何帮助都很感激..。谢谢,

浏览 4提问于2016-02-25得票数 3

1回答

在Datapower电器中使用的节气门设置是什么？

ibm-datapower

在Datapower中，在管理->设备->节流阀设置下，我们有许多参数。但是关于它所做的功能的描述不够清楚。参数：内存终止于%*临时文件空间终止于%*超时秒*积压超时秒*

浏览 2提问于2015-01-07得票数 0

回答已采纳

1回答

连接到hana的Nifi* executesql在创建avro模式时失败*

apache-nifi

2017-04-21 01:33:51,446警告定时器驱动的进程线程-1 o.a.n.c.t.ContinuallyRunProcessorTask java.lang.IllegalArgumentException(StandardProcessSession.java:2329) ~nifi框架-1.1.2.jar:1.1.2在org.apache.nifi.processors.standard。org.apache.nifi.processor.AbstractProcessor.onTrigger(Abstr

浏览 3提问于2017-04-21得票数 0

回答已采纳

1回答

尝试从Confluent在Zookeeper上运行Apache/NIFI

apache-zookeeper、apache-nifi、confluent-platform

我正尝试在confluent-zookeeper上运行Apache/NIFI。NIFI版本1.11.3通过解压tar容器安装在/opt/nifi中，confluent是社区版，版本5.3。所以NIFI使用集成的zookeper工作，如果我从Apache/zookeeper站点单独下载zookeeper，NIFI就可以工作。Confluent Kafka还可以与单独的zookeeper和NIFI集成一起工作。但是我不能使用confluent的zook

浏览 0提问于2020-03-27得票数 0

1回答

Nifi不能与码头启动

docker、docker-compose、apache-nifi

我有下面的停靠文件services: image: apache/nifi container_name/nifi:/nifi image: apache/nifi container_na

浏览 2提问于2020-06-27得票数 1

回答已采纳

点击加载更多