腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
在
QueryRecord
中
使用
filter
合并
多个
列
(
NiFi
)
report_date" : "20210625",}] 如果一些UMT值
在
()
中
,我应该忽略它(键+值),它可以是(none),(direct),(not provided),(not set) 我试着用
QueryRecord
SELECT metric_value
浏览 45
提问于2021-07-13
得票数 0
1
回答
如何在
Nifi
中
为CSV设置开始行和结束行或间隔行?
我想在
Nifi
中
获得excel文件的特定部分。我的
Nifi
模板像那样; 我应该在第2步和第是否有获得特定行和
列
的解决方案?注意:如果有一个选择削减ConvertExcelToCSVProcessor,它将对我工作。
浏览 5
提问于2021-05-04
得票数 1
1
回答
如何在
NIFI
QueryDataBaseTable处理器中提取数据进行排序
如何保证
NiFi
QueryDataBaseTable处理器每次获取增量表时的数据序列。该表有一个名为"SEQNUM“的增量字段。并在QueryDataBaseTable处理器
中
通过"SEQNUM“设置”最大值
列
“。有什么方法可以通过获取delta表来排序吗?
浏览 0
提问于2018-12-18
得票数 0
回答已采纳
1
回答
如何在
NiFi
中
使用
UDF?
、
、
我试图对数据进行加密,以便只加密某些
列
。示例:{col1,col2,col3,col4} => {col1,加密(Col2),col3,encrypted(col4)} 如果我的加密过程可以通过
使用
udf来完成,我如何在
NiFi
中注册和/或
使用
在
Hive
中
,可以首先注册udf,例如:
使用
jar‘hdfs/path/to/jar/abc.jar’将临时函数udf_name创建为'abc.efg.udf_cl
浏览 0
提问于2018-11-05
得票数 1
回答已采纳
2
回答
Apache
NiFi
:识别包含特殊字符的csv记录
、
、
使用
Apache,我需要过滤出具有一组特殊字符的
NiFi
中
的记录。name,age,cityFFF,45,London然后,第二个记录必须从csv
中
取出,并放入另一个csv
中
此外,即使"FFF“是
在
城市或年龄
列
,整个记录必须删除。 请建议我所需要的处理器来实现这一点。此外,如果你能列出需要改变的配置,那将是非常有
浏览 13
提问于2019-10-25
得票数 0
回答已采纳
2
回答
QueryRecord
和PartitionRecord为了更好的性能?
、
、
、
在
NiFi
数据流
中
,如果我想根据特定字段的值将单个流文件分割成两组,那么
在
性能方面,以下列方式
使用
QueryRecord
或PartitionRecord是否更快?
QueryRecord
:PartitionRecord
在
UpdateRecord
中
,以RecordPath
在
UpdateRecord
中
,<
浏览 0
提问于2018-08-23
得票数 1
1
回答
根据json属性对单个流文件
中
的Json数组进行排序: Apache
我一直
在
尝试
nifi
,并想知道如何根据属性对json数组进行排序。
浏览 0
提问于2018-05-12
得票数 2
回答已采纳
1
回答
如何根据SQL查询的结果过滤流文件?
使用
ExecuteSQL处理器来运行筛选SQL查询。编写该查询的目的是以Shu建议的方式生成单个记录(match)或空记录集(no )。将ExecuteSQL连接到处理器,以便
使用
路由属性值${executesql.row.count:replaceNull(0):gt(0)}的下列值筛选出不匹配的流文件 注意到,
在
应用ExecuteSQL
在
我的例子
中
,这不是一个问题,因为我
在
处理流文件内容之前进行了过滤,我的SQL查询完全基于流文件属性,而不是它的内容。虽然
在
浏览 1
提问于2018-09-25
得票数 3
1
回答
Nifi
合并
Json文件,然后转换为JsonArray
当我希望将JsonMessages
合并
在一起(
使用
MergeContent)转换为JsonArray时,是否有一个处理器/流我没有考虑?我想尝试从
多个
文件构建JsonArrays,然后传递给
QueryRecord
来运行SQL。很好的机会,我错过了一个开场白/明显的方法去做那。任何帮助都将不胜感激。我可以
使用
groovy执行脚本,但如果可能的话,我希望避免
使用
自定义代码。谢谢! -> MergeContent -> ConvertToJsonArray -&
浏览 3
提问于2017-10-27
得票数 6
回答已采纳
1
回答
Nifi
:
在
分页ExetuSQL/ExecuteSQLRecord之后计算行总数
使用
ExecuteSQL/ExecuteSQLRecord处理器,您可以指定“输出批大小”,这将导致
多个
流文件。每个流文件都包含executesql.row.count。做AttributesToJSON (drop content) => MergeContent (defragment) =>
QueryRecord
(counting) => EvaluateJSONPath理想情况下,我希望以某种方式
在
MergeContent上/之后添加属性。问题是,MergeContent正
浏览 1
提问于2020-07-12
得票数 0
2
回答
Nifi
在
特定的公共头上连接两个CSV流文件
、
、
尝试
合并
两个传入的csv格式的流文件,并根据一些公共的头值准备一个组合的csv输出和来自两者的数据。需要基于"creation_Date“和"Hour_of_Day”连接行,并将两个流文件
合并
,并计算出"source_count“和"hive_count"之间的差异。是否有一种方法可以
使用
MergeContent连接并对输出文件运行查询以进行差异生成? 任何帮助都将不胜感激。
浏览 1
提问于2018-08-23
得票数 0
1
回答
Nifi
- MergeContent -
多个
CSV文件.计数器
我想将6个CSV文件
合并
到1个ListHDFS >> FechHDFS >> UpdateAttribute >> MergeContent >>
QueryRecord
>> .ListHDFS >> FechHDFS >> UpdateAttribute作为要
合并
的文件数重复(6次) 因为我应该为每个文件提供fragment.index参数和一个别名(稍后用于
QueryRecord
中
的联接查
浏览 10
提问于2022-02-13
得票数 0
回答已采纳
2
回答
如何在
使用
PutElasticSearchRecord处理器时让
Nifi
动态创建索引
我目前正在
使用
Apache
Nifi
将数据推送到Elasticsearch
中
。数据被发送到单个索引,但我希望根据client_id字段的内容将数据动态路由到不同的索引。我有一个
QueryRecord
处理器
在
发送到Elasticsearch或丢弃之前做一些过滤。
使用
JsonTreeReader和JsonRecordWriter设置QueryProcessor 如何在PutElasticSearchRecord
中
设置索引设置以
使用
字段client_id的内
浏览 7
提问于2021-10-01
得票数 0
2
回答
如何根据高性能的内容进行路由?
、
在
nifi
中
,如果我从单个主题监听Kafka,并且基于路由逻辑,它将调用相应的进程组。然而,
在
RouteOnContent处理器
中
,如果给出正则表达式来检查字符串的出现,会不会影响性能,或者
在
基于条件的路由中如何达到良好的性能。
浏览 2
提问于2019-06-17
得票数 0
1
回答
改进Apache
NiFI
中
的流
我试图简化Apache
NiFi
中
的流。 EvaluateJsonPath将campaign_id存储到属性;之后,我可以
使用
RouteOnAttribute:${executesql.rows.c
浏览 0
提问于2021-03-09
得票数 0
2
回答
如何在
QueryRecord
中
处理数组?
我
在
Apache
中
工作,我有一个问题:如何在
使用
QueryRecord
处理器的
NiFi
中
处理嵌套数组?如何
使用
RPATH获得预期的结果
浏览 0
提问于2021-04-17
得票数 1
1
回答
Apache从CSV文件
中
获取唯一记录
、
我有两个csv文件和两个文件有记录。我想删除重复的记录。我想要独特的记录。我怎样才能用Apache做这件事?input1.csv;1,ali,veliinput2.csv;1,ali,velioutput.csv;1,ali,veli3,ahmet,ozan
浏览 5
提问于2021-12-19
得票数 0
回答已采纳
1
回答
Apache :从csv
中
移除多
列
、
、
我有一个csv,超过60
列
。然而,我只想从最初的
中
只需要32
列
。(我的csv有标题) 上面的语句具有输出csv
中
我想要的32
列
的所有名称(这个情况、col1、col2等)。根据我的理解,这是由于超过了受支持的
列
的限制。因为这个
浏览 1
提问于2019-12-02
得票数 1
1
回答
Apache
Nifi
,我可以从
多个
流文件
中
收集属性吗
我有一个
nifi
流,它接收.csv文件并将每个文件划分为
多个
记录,每个csv
列
值都作为一个属性添加。
在
流程
中
的某一点上,我想从经过的每个记录
中
收集一个属性的值。可能有从0到n的集合。因此,如果我可以
在
一段固定的时间内收集数据,或者直到另一个属性(文件名)发生变化,那就太好了。 我尝试过
合并
内容和记录。我甚至尝试用要保存的属性值替换文本来替换内容,并
合并
这些属性值,以及许多其他内容。
在
nifi
中有
浏览 15
提问于2021-01-27
得票数 0
3
回答
有没有办法用apache
nifi
对文件
中
的某些值进行数学运算?
、
我正在用API从URL获取一些数字数据,我正在寻找一种方法,
在
将数据放到文件目录之前,
在
apache
nifi
中进行一些数学运算。现在已经谢谢你了。顺便说一下,我正在
使用
PutFile处理器获取数据并将文件放入某个地方,我
使用
的是InvokeHTTP处理器。我搜索了一些相关的网站,但我找不到一个可行的方法。
浏览 4
提问于2019-07-09
得票数 0
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
WPS小技能——在word中合并多个文档
在Power BI中优化Power Query合并的性能:删除列
Excel技巧:如何快速将一列中的多个单元格内容合并为一个单元格
教你在Excel中怎样将多个单元格内容合并到一个单元格中!
如何使用Excel VBA将多个工作簿的全部工作表合并到一个工作簿中
热门
标签
更多标签
云服务器
ICP备案
对象存储
腾讯会议
云直播
活动推荐
运营活动
广告
关闭
领券