腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(1448)
视频
沙龙
1
回答
NiFi
如何
MergeContent
成
单行
csv
、
、
我刚开始使用
Nifi
,在将两个
csv
文件合并为
单行
csv
时遇到了问题。如果这个问题已经在下面得到了回答,我很抱歉。但是,我已经尝试了整个互联网,但无法找到一个具体的解决方案,我的需求。所以问题来了:我有一个Json格式的数据,我需要把数据转换成
csv
格式,文件输出应该是一个平面
csv
文件。两个
csv
记录如下所示: content section from json to
csv
header section from json to
csv</
浏览 36
提问于2020-01-31
得票数 1
回答已采纳
1
回答
MergeContent
NiFi
,拼图/json输入
我正在尝试使用
NiFi
MergeContent
将多个拼图文件合并在一起。对我通过ConvertRecord操作符获得的拼图文件执行https://
nifi
.apache.org/docs/
nifi
-docs/components/org.apache.
nifi
/
nifi
-standard-nar/1.6.0/org.apache.
nifi
.processors.standard.
浏览 36
提问于2021-01-05
得票数 0
回答已采纳
1
回答
如何
在
nifi
中插入批量记录
、
、
我是
nifi
的新手,我正在尝试使用
nifi
在mysql中进行批量插入,下面是我的示例流程结构。FetchFile -> SplitJson -> routeOnAttribute->
MergeContent
(merge all flowfiles) ->
浏览 133
提问于2019-03-12
得票数 1
1
回答
合并文件时
nifi
-1.0.0块
我有一个处理
csv
文件的流程(最大文件大小约为700 mB)。我将这些文件拆分成一行的流文件,然后进行一些处理,最后使用ExtendedMergeContent处理器作为同步机制。问题是,如果我处理每个
csv
文件,当它们在
MergeContent
的队列中时,它会阻塞
nifi
实例。你知道为什么会发生这种事吗?如果我处理5个很小的
c
浏览 0
提问于2016-11-12
得票数 1
2
回答
使用Apache将
CSV
文件转换为JSON
我正在尝试从本地文件系统读取
csv
,并使用Apache将内容转换为JSON格式,并将JSON格式文件放在本地系统中。我成功地转换了
csv
文件的第一行,但没有转换其他行。我遗漏了什么?输入:1,aaa,loc1 2,bbb,loc2 3,ccc,loc3我的输出如下所需的格式,但我希望对所有行都这样做。
浏览 1
提问于2016-06-20
得票数 1
回答已采纳
4
回答
Apache
Nifi
:
如何
知道或检查所有流文件都已被处理
我在
NiFi
中有flow:在将所有的流文件放入HDFS之后,我需要运行shell脚本。我
如何
知道或检查所有流文件都已处理?
浏览 8
提问于2020-06-20
得票数 3
1
回答
Nifi
:流内容(动态json格式)到
csv
、
、
、
、
是否可以将此流内容转换为
csv
?非常感谢,
浏览 0
提问于2018-09-26
得票数 0
1
回答
将
NiFi
中的流文件的文件名附加到
CSV
文件
然后,我想将
NiFi
中的流文件的${filename}附加到外部文件example.
csv
。我想过在Python中使用ExecuteScript,但不知道怎么做。我尝试了以下几种方法: 使用两个列表处理器,一个用于映射,另一个用于example.
csv
文件。用于将文本替换为${filename}、
mergeContent
和putFile(replace example.
csv
)的replaceText处理器。只在第一次时起作用。
浏览 2
提问于2018-06-08
得票数 0
1
回答
MergeContent
不同步
我在
Nifi
中使用
MergeContent
处理器将两个far文件合并到一个大JSON对象中,我到目前为止所做的工作如下: 我的问题是,这个数据流有时只给我两个流文件中的一个,另一个问题是
如何
确保我的
mergeContent
流文件是固定顺序的。
浏览 3
提问于2016-12-07
得票数 1
回答已采纳
2
回答
在使用
mergecontent
处理器组合每个
csv
流文件时添加新行
、
、
、
这是关于
Nifi
中
MergeContent
处理器的问题。我想添加换行符时,结合每个
csv
流文件,使用
MergeContent
处理器。 与我的问题相似,这里有一个问题的答案。
浏览 13
提问于2019-05-23
得票数 0
回答已采纳
1
回答
NIFI
:将每月从SQL查询转储到SFTP服务器的转储作为
CSV
文件
在这种情况下,我希望使用SQL查询将数据作为每月的
CSV
存储到SFTP服务器中。query_date>=20180101 and query_date<20180201 --(for the month of January 2018)-> *ConvertAvroToJson* -> *
浏览 1
提问于2018-10-12
得票数 0
回答已采纳
1
回答
将
nifi
摄取到hdfs到单个目录
、
、
、
场景hadoop@ambari:~$ hdfs dfs -cat /user/
nifi
/test.
csv
cat: `/user/
nifi
/test.
csv
': Is a directoryhadoop@ambari:~$ hdfs dfs -ls &
浏览 2
提问于2020-07-06
得票数 0
回答已采纳
1
回答
如何
使用PutMongo将json数组插入到Apache
Nifi
中的mongodb集合中?
、
、
、
我正在尝试使用Apache
nifi
中的Putmongo处理器将json数组插入到mongodb中。以下是我的完整Apache流程: GetFile
CSV
-> ConvertRecord to Json -> QueryRecord ->
MergeContent
-> PutMongo
浏览 55
提问于2020-12-22
得票数 0
1
回答
Nifi
:将深度嵌套的xml转换为
csv
的最快方法(ExecuteScript vs ExecuteStreamCommand)
、
、
、
、
我一直在使用
Nifi
将大量深嵌套的xml文件转换为
csv
。
MergeContent
(与fragment.identifier然而,当我用ExecuteStreamCo
浏览 3
提问于2019-07-04
得票数 0
1
回答
Nifi
-
MergeContent
-多个
CSV
文件.计数器
我想将6个
CSV
文件合并到1个ListHDFS >> FechHDFS >> UpdateAttribute >>
MergeContent
>> QueryRecord >> .
如何
将is还原
成
一个ListHDFS >> FechHDFS >> UpdateAttribute,并为每个不同的文件提供一个不同的fragment.index,这个值在0到6之间(最大文件数)?
浏览 10
提问于2022-02-13
得票数 0
回答已采纳
1
回答
NiFi
:为ExecuteScript处理器编写代码以组合多个条目
、
我有一个
NiFi
流(可以工作),它根据公司名称将一个庞大的电子表格分割成单独的
csv
。UpdateAttribute -> PutFile
csv
的问题是这样的
浏览 1
提问于2018-10-09
得票数 0
回答已采纳
1
回答
通过Apache
nifi
将JSON日志文件导入Solr
、
、
我正在尝试读取json日志文件并使用apache将其插入到solr集合中,格式如下(一个json对象
nifi
.logfile ) {"@timestamp": "2017-02-18T02:16:50.496我该
如何
继续呢?
浏览 17
提问于2017-03-15
得票数 0
回答已采纳
1
回答
NiFi
-将两个数据流与EnforceOrder和
MergeContent
处理器合并在一起
、
我试图使用EnforceOrder处理器以确定的顺序进行合并。要做到这一点,我的流程是: 在updateAttribute中,我生成一个属性来设置合并中我想要的顺序。在左边的一个,我设置值'1‘,在另一个,我设置'2’的值。然后EnforceOrder的配置是nextone:问题是,只到达process.order = 1的流,而不是取出数字2。我做错了什么?
浏览 1
提问于2018-12-12
得票数 0
回答已采纳
1
回答
Apache
NiFi
:
如何
比较
csv
中的多行并创建新列
、
我有个
csv
看起来像这样。15,44,55,12,339,87,61,29,7715,44,55,12,33,York9,87,61,29,77,Sydneyalpha,beta,city33,111,Lond
浏览 3
提问于2019-10-30
得票数 4
回答已采纳
1
回答
如何
在
Nifi
中使用MergeConent处理器
我有一个
Nifi
流,在Json中有多行数据,对于每个行,需要执行以下操作:流程图:
浏览 7
提问于2019-11-15
得票数 1
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Apache NiFi介绍及使用体验
python笔记5-python2写csv文件中文乱码问题
pandas.dataframe 专题使用指南
公共安全领域 Kafka 应用实践
CAD快速入门文字
热门
标签
更多标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
活动推荐
运营活动
广告
关闭
领券