腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(9591)
视频
沙龙
1
回答
NiFi
:
使用
ExecuteScript
的
QueryRecord
我
使用
来自kafka主题(nested json)
的
数据,这些数据必须根据字段值进行过滤。因此,我
使用
ExecuteScript
processor过滤掉记录并转换一些字段。对于过滤,我在没有
使用
QueryRecord
的
情况下
使用
了findAll函数,它起作用了。这里我
的
问题是,这种方法是否解决了与
QueryRecord
处理器相同
的
过滤目的,因为当传入
的
流文件中存在嵌套
的<
浏览 66
提问于2019-05-22
得票数 1
回答已采纳
2
回答
Apache
NiFi
:识别包含特殊字符
的
csv记录
、
、
使用
Apache,我需要过滤出具有一组特殊字符
的
NiFi
中
的
记录。name,age,cityFFF,45,London然后,第二个记录必须从csv中取出,并放入另一个csv中请建议我所需要
的
处理器来实现这一点。此外,如果你能列出需要改变
的
配置,那将是非常有帮助
的
。
浏览 13
提问于2019-10-25
得票数 0
回答已采纳
1
回答
如何在
Nifi
中为CSV设置开始行和结束行或间隔行?
我想在
Nifi
中获得excel文件
的
特定部分。我
的
Nifi
模板像那样; 我应该在第2步和第是否有获得特定行和列
的
解决方案?注意:如果有一个选择削减ConvertExcelToCSVProcessor,它将对我工作。
浏览 5
提问于2021-05-04
得票数 1
1
回答
如何在
NIFI
QueryDataBaseTable处理器中提取数据进行排序
如何保证
NiFi
QueryDataBaseTable处理器每次获取增量表时
的
数据序列。该表有一个名为"SEQNUM“
的
增量字段。
浏览 0
提问于2018-12-18
得票数 0
回答已采纳
1
回答
根据json属性对单个流文件中
的
Json数组进行排序: Apache
我一直在尝试
nifi
,并想知道如何根据属性对json数组进行排序。我有这样
的
Json {“名称”:“Backham”,“createdDate”:“2018-05-07:30:09”},{“名称”:“鲁尼”,“createdDate”:“2016-05-12 19:50还有其他更好
的
方法吗?谁能告诉我怎么做到这一点吗?
浏览 0
提问于2018-05-12
得票数 2
回答已采纳
2
回答
QueryRecord
和PartitionRecord为了更好
的
性能?
、
、
、
在
NiFi
数据流中,如果我想根据特定字段
的
值将单个流文件分割成两组,那么在性能方面,以下列方式
使用
QueryRecord
或PartitionRecord是否更快?
QueryRecord
:PartitionRecord 在UpdateRecord中,以RecordPath步骤3
的
输出应该是两个流文件,一个相当于
QueryRecord
方法
的
输出。总之,虽然<
浏览 0
提问于2018-08-23
得票数 1
1
回答
在
NIFI
中检索xml文件中
的
值
、
然后
使用
每个Id进行另一次搜索。<Id>30275559</Id><Id>30158703</Id></IdList> </eSearchResult> 我
使用
浏览 46
提问于2021-01-07
得票数 0
1
回答
如何根据SQL查询
的
结果过滤流文件?
是否可以根据返回单个行结果
的
SQL查询
的
结果来路由流文件?例如,如果结果为“1”,则流文件将被处理;否则,它将被忽略。下面的方法对我最有效。
使用
ExecuteSQL处理器来运行筛选SQL查询。编写该查询
的
目的是以Shu建议
的
方式生成单个记录(match)或空记录集(no )。将ExecuteSQL连接到处理器,以便
使用
路由属性值${executesql.row.count:replaceNull(0):gt(0)}
的
下列值筛选出不匹配
的
流文
浏览 1
提问于2018-09-25
得票数 3
2
回答
log.info in
ExecuteScript
、
我正在尝试
使用
Groovy登录一个
ExecuteScript
组件。每当我调用log.info时,都不会将任何东西写入
nifi
-app.log,但当我调用log.errorit时,则会这样做。是否有一些log4j配置或其他我需要做
的
事情?
使用
Nifi
1.0.xlog.info("FOO-BAZ-INFO") => nothing log.error("FOO-BAZ-ERROR") =&
浏览 4
提问于2016-11-15
得票数 4
回答已采纳
1
回答
如何在kafka主题级别或作为
nifi
中
的
处理器添加阻止列表?
、
、
我有日志消息数据,正在被推送到kafka主题,与
nifi
kafka消费者拉入消息数据,并将其路由到各种drops。根据一组内部用户ID和IP地址,我要清除许多记录。我有一个名单,大约20个IP地址和10个用户ID
的
擦除。有没有办法在主题前面设置一个阻止列表,在数据到达
Nifi
之前对其进行过滤,或者有一种方法可以将其添加为处理器,在
Nifi
上过滤数据,然后沉入各种来源? 谢谢
浏览 37
提问于2021-10-07
得票数 0
1
回答
ExecuteScript
ProcessLog
、
在ProcessorLog处理器中
使用
ExecuteScript
的
最佳方法是什么?如果在处理过程中遇到错误,我计划在groovy
ExecuteScript
中添加一些日志记录。但是,添加日志
的
尝试没有成功。可能忽略了一些明显
的
东西。return错误 016-04-07 17:13:51,146 ERROR [Timer-Driven Process Thread-6] o.a.
nifi
.processors.scri
浏览 0
提问于2016-04-08
得票数 0
回答已采纳
1
回答
在
NiFi
中生成UUID5
、
、
在
NiFi
中,我有一个带有RSID属性
的
流文件。我需要生成一个基于RSID
的
UUID v5,并将其作为属性添加到流文件中。此uuid需要基于RSID,因为某些报告将具有相同
的
RSID,因此需要具有相同
的
UUID5。 我在Groovy中见过一些方法,它们会生成随机
的
uuid,但不会生成v5,也不会基于字符串。这可以在Groovy/
NiFi
中实现吗?如果是这样,将如何做到这一点?我是Groovy
的
新手。
浏览 58
提问于2019-10-18
得票数 1
回答已采纳
1
回答
Nifi
中
的
ScrollElasticsearchHttp处理器计数
、
嗨,我想在
nifi
中对"ScrollElasticsearchHttp“处理器进行简单
的
计数。在这个处理器之后
使用
QueryRecord
。我创建了一个新变量,并在Sql下面
使用
我期望result.count值为10000,这是我
的
记录计数,但它总是显示
浏览 10
提问于2022-04-27
得票数 0
1
回答
NiFi
字符串操作函数可以在
QueryRecord
中
使用
吗?
、
、
可以在
queryRecord
SQL语句字段中
使用
子字符串或concat函数吗?看到我有流文件{ "field1": "1, Tom Johnson", "field2":"3", "field3":"xyz" }在
QueryRecord
处理器SQL查询是, select substringAfter(/field1, ',') as NAME, substringBefore(/f
浏览 5
提问于2022-03-23
得票数 1
1
回答
如何在
NiFi
中
使用
UDF?
、
、
示例:{col1,col2,col3,col4} => {col1,加密(Col2),col3,encrypted(col4)} 如果我
的
加密过程可以通过
使用
udf来完成,我如何在
NiFi
中注册和/或
使用
在Hive中,可以首先注册udf,例如:
使用
jar‘hdfs/path/to/jar/abc.jar’将临时函数udf_name创建为'abc.efg.udf_class_name‘;然后执行:从表中选择col1、udf_name(col2
浏览 0
提问于2018-11-05
得票数 1
回答已采纳
1
回答
无法写入属性
的
QueryRecord
= utm_campaign=Beeline_2021&utm_content=banner_320х480&utm_medium=Media&utm_source=ad&utm_term=mscSELECT '${account.view.id}' AS account_view_id, FROM FLOWFILE org.apache.
nifi
浏览 0
提问于2021-06-22
得票数 2
回答已采纳
1
回答
如何在
ExecuteScript
UI中为
NiFi
处理器启用“视图状态”选项?
、
、
我
使用
的
是
NiFi
ExecuteScript
和python。在python脚本中,我添加/修改了处理器
的
状态stateManager.setState(newmap, Scope.LOCAL) 我是否可以查看/清除
NiFi
web中
的
处理器状态?当您右键单击处理器时,像TailFile这样
的
其他处理器会通过“视图状态”提供此选项,但
Exec
浏览 3
提问于2016-10-11
得票数 1
回答已采纳
1
回答
用
NIFI
转换数据
使用
NIFI
提取流文件中
的
属性并将其转换为文本格式示例
的
最佳实践是:我如何
使用
executeScript
处理器
使用
NIFI
wihtout完成这一任务
浏览 1
提问于2016-12-07
得票数 2
回答已采纳
1
回答
NiFi
:在我们输入
executescript
之前,是否有一种逐行执行python代码
的
方法?
我计划用
executescript
处理器编写python代码。由于这是我第一次,我发现很难开始。此外,是否有编写代码
的
语法文档?
浏览 0
提问于2019-06-03
得票数 0
回答已采纳
1
回答
在
Nifi
ExecuteScript
processor中,Get 'java.sql.Timestamp‘对象没有属性'weekday’错误
、
我
的
python脚本中
的
代码:if flowFile is not None:2017-07-16 08:17:34,417 ERROR [Timer-Driven Process Thread-9]o.a.
nifi
.processors.script.
ExecuteSc
浏览 7
提问于2017-07-16
得票数 0
点击加载更多
相关
资讯
Apache NiFi介绍及使用体验
10分钟了解Apache Nifi在物联网的使用
Apache NiFi用户指南-数据流的命令和控制
Apache NiFi用户指南-数据流版本控制-版本化流程中的受限组件
大数据流处理:Flume、Kafka和NiFi对比
热门
标签
更多标签
云服务器
ICP备案
云点播
对象存储
即时通信 IM
活动推荐
运营活动
广告
关闭
领券