腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(9999+)
视频
沙龙
2
回答
Apache
Nifi
:
在
同一
流程
中
使用
HandleHTTPRequest
和
GetFile
我正在尝试
使用
Apache
Nifi
构建一个新的数据摄取流。我们还必须读取一个配置JSON文件,然后继续处理。我在这里尝试
浏览 13
提问于2019-08-20
得票数 1
1
回答
如何
使用
CURL将.csv文件从本地计算机(
Getfile
)发送到
Apache
Nifi
中
的配置单元(Puthiveql)?
、
、
我想
使用
CURL.Please将.csv文件或mysql表从本地计算机(
GetFile
)发送到
Apache
Nifi
中
的Hive(PutHiveql),让我知道是否有
使用
Curl执行此操作的命令。
浏览 0
提问于2017-06-28
得票数 0
1
回答
如何为
nifi
handlehttprequest
处理器提供负载平衡器
我有3个节点的
Nifi
集群在运行(1.5版)。我已经
使用
handlehttprequest
和
中间处理器集构建了管道,用于转换/清理传入的数据,然后是handlehttpresponse。有各种客户端应用程序将通过
nifi
提供的rest端点发布数据。我
在
将
Handlehttprequest
作为所有节点以执行模式运行时遇到了问题。
Nifi
UI
在
一段时间后变得没有响应,我可以
在
nifi
-app
浏览 75
提问于2018-08-03
得票数 0
回答已采纳
1
回答
在
Nifi
中
托管API
、
、
我想
使用
HandleHTTP处理器
在
Nifi
中
托管一个应用程序接口。我想获得一些关于如何做到这一点的信息/资源。我是
Nifi
的新手。提前谢谢。
浏览 27
提问于2020-08-27
得票数 0
回答已采纳
2
回答
Apache
NiFi
进程间通信
、
为了分离逻辑,简化主
流程
并重用处理器组,我正在寻找
在
Apache
NiFi
中
实现进程间通信逻辑的方法。到目前为止,我唯一能找到的就是
在
主流中
使用
InvokeHTTP,
在
组中
使用
HandleHTTPRequest
/Response对。但是,开放的HTTP端口过多可能会导致安全问题。有没有更好的方法来做同样的事情,例如,将流文件
和
属性路由到所需的处理器,然后将其返回?如果没有,我认为
在
浏览 2
提问于2020-01-28
得票数 1
1
回答
从请求
在
Apache
中
记录
NiFi
有效负载
、
、
我是
Apache
的新手,我开发了一个通过HTTP请求将
NiFi
数据发送到
NiFi
端点的应用程序。
在
Apache
NiFi
中
,我有一个
HandleHTTPRequest
处理器连接到PutFile处理器,然后连接到HandleHTTPResponse处理器。我也尝试过
使用
LogAttribute处理器。来自JSON服务的响应代码
和
HTTP运行正常,但我正在努力确保正确发送
NiFi
有效负载。
在</
浏览 9
提问于2016-07-06
得票数 3
2
回答
如何在
NiFi
中
读取ExecuteStreamCommand处理器
中
的文件
、
、
、
我的最终目标是屏蔽特定文件
中
的数据。我想要将文件从一个位置移动到另一个位置。在此传输过程
中
,我必须
使用
Python脚本屏蔽数据。因此,我设计了以下
流程
:我
使用
pandas设计了一个Python脚本。我
在
Google Cloud Platform上创建的虚拟机上运行此
NiFi
,其中我安装了Python-2.7
和
NiFi
-1
浏览 1
提问于2019-04-25
得票数 0
1
回答
Nifi
在
注入数据时会崩溃。
我
使用
ListenHTTP作为
Nifi
进程的输入点。df.iloc[i].to_json() time.sleep(0.1) 问题是,
Nifi
在
处理了大约3000条条目后就崩溃了。然后我应该重新启动它(
在
重新启动之前,我还会手动清空日志
和
flowfile_repository文件夹)。
Nifi
处理器ListenHTTP或
Nifi</em
浏览 8
提问于2017-10-19
得票数 1
回答已采纳
1
回答
NoClassDefFoundError: org/
apache
/
nifi
/注册表/VariableRegistry运行
nifi
测试用例
、
几天前,我陷入了问题(这涉及自定义
nifi
处理器的错误行为)。调试对我没有帮助。因此,我决定探索
nifi
模拟框架(我应该已经这样做了,但没有这么做:),正如关于这个问题的评论中所建议的那样。为此,我按照建议
使用
MergeContent (带有FlowFile v3版本)
和
PutFile处理器保存/序列化了实际的流文件。现在,我正尝试
使用
GetFile
处理器通过测试
中
的代码重新读取这个文件,如下所示: import static org.junit.Assert
浏览 2
提问于2019-05-03
得票数 0
回答已采纳
1
回答
Apache
Nifi
:我想将我的数据CSV摄取到Elasticsearch,而不是
使用
apache
nifi
将其流式传输到其他处理器
、
、
、
我正在尝试设置一个简单的过程来修改我的CSV文件,并
使用
Apache
Nifi
将其摄取到elasticsearch DB。我不想在将文件从一个处理器传递到另一个处理器时,
在
Stdout上流式传输我的CSV文件。 我已经做了两个
流程
。我的第一个
流程
是
使用
python处理器获取我的CSV文件,
使用
ExecuteStreamCommand对其进行定制,我在其中运行我的
GetFile
脚本来读取、修改
和
保存我的CSV文件。我的
浏览 2
提问于2019-08-06
得票数 0
1
回答
Nifi
基本8月实施
、
目标
Nifi
ListenHTTP/
HandleHTTPRequest
处理器不支持Basic,因此正如建议的那样--您可以
使用
ListenHTTP/
HandleHTTPRequest
处理器
和
RouteOnAttribute来验证用户名
和
密码。
在
我的例子
中
,
Nifi
接受普通的HTTP请求,因为
Nifi
隐藏在Api网关SSL终端下。如果准确地说,
Nifi
会获得,这是因为等于base
浏览 5
提问于2020-07-03
得票数 0
1
回答
Apache
在
单个流
中
从多个表
中
读取数据
我计划
使用
Apache
作为数据摄取用例。源可以是平面文件
和
Teradata数据库,输出接收器可以是Oracle数据库。我创建了几个流,
使用
GetFile
和
Teradata
使用
ExecuteSQL从平面文件
中
读取数据,并
使用
PutSQL将数据加载到Oracle数据库。一切似乎都很顺利。我们预测源系统将来可能会发生变化,我注意到
Nifi
中
的处理器可以用来支持这些源。 现在,我的问题是,是否可以
在
浏览 4
提问于2017-03-02
得票数 2
回答已采纳
2
回答
无法
在
Apache
-
NiFi
中提取Json数据。
我编写了下面的POST命令,并
使用
"
HandleHttpRequest
“处理器
在
Apache
NiFi
中
接收POST请求 curl -v -H "Accept: application/json" -Hjson" -X POST -d '{"employeeDetails":{"empid":"124","empname": "pravee
浏览 0
提问于2019-11-08
得票数 0
1
回答
我们能否以及如何将
apache
nifi
流文件及其属性保存到磁盘,以便我们可以将它们用于自定义处理器单元测试用例的
使用
/重读?
、
本文要求
使用
MergeContent
和
FlowFileV3选项,然后
使用
PutFile。我能够以.pkg格式持久化这些文件。我正在
使用
GetFile
、IndetifyMimeType
和
UnpackContent处理器
在
同一
篇文章
中
建议的单元测试代码
中
阅读它们。但是,我
在
代码
中
这样做,如下所示:TestRunner getFileRunne
浏览 1
提问于2019-05-07
得票数 1
回答已采纳
1
回答
如何
使用
PutMongo将json数组插入到
Apache
Nifi
中
的mongodb集合
中
?
、
、
、
我正在尝试
使用
Apache
nifi
中
的Putmongo处理器将json数组插入到mongodb
中
。以下是我的完整
Apache
流程
:
GetFile
CSV -> ConvertRecord to Json -> QueryRecord -> MergeContent -> PutMongo
浏览 55
提问于2020-12-22
得票数 0
2
回答
如何
使用
流创建正在运行的
nifi
docker镜像
、
我启动了一个
apache
/
nifi
容器,构建并配置了一个流。我不清楚是什么文件(nar、xml等)需要对用户要运行的映像可用。
浏览 5
提问于2020-09-22
得票数 1
1
回答
Nifi
HandleHttpResponse八进制流到JSON内容类型
我
使用
的是
nifi
1.11.4,我
使用
HandleHttpRequest
、ReplaceText
和
HandleHttpResponse来模拟API请求和响应。但是,
在
v1.9.2
和
1.11.4之间,它们已经从HandleHttpResponse
中
删除了HandleHttpResponse属性,因此响应在media type=application/octet-stream
中
。将其转换为JSON的最简单方法是什么,因为我希望
浏览 5
提问于2020-06-12
得票数 1
回答已采纳
1
回答
如何
使用
状态更新从dev到prod的流
我有一个
nifi
流,它保持了ListS3处理器的一些状态。我有一个dev实例
和
一个prod实例。我想要一些从dev部署到prod的选项,其中保存了状态,并且我不必手动进入并更改所有处理器
和
进程组。基于以下堆栈溢出问题: how does
NIFI
listfile maintains its timestamp? 编辑:为了避免误解,我希望
在
部署时保持prod状态。
浏览 14
提问于2021-03-19
得票数 0
回答已采纳
1
回答
将流从java发送到
apache
nifi
处理器
、
getDescription()); System.out.println("");}我想问的是:是否可以一个一个地将输出发送到
apache
是否有任何解决方案,
Nifi
提取这些输出并将每个输出放在一个依赖的处理器
中
?
浏览 2
提问于2020-03-05
得票数 2
回答已采纳
1
回答
Nifi
和
Avro:
使用
指定的avro模式将数据
和
元数据转换为avro文件?
、
这与
Apache
Nifi
相关。 我有一个固定的模式,我需要
使用
它。name": "streetaddress", "type": "string"},{"name": "city", "type":"string"}]}}]} 基本上,这个chema有两个部分,即一个
在
元数据
中
我有以csv格式创建的元数据
和
另一个csv格式的实际数据。 我
浏览 21
提问于2019-02-28
得票数 0
点击加载更多
相关
资讯
Apache NiFi介绍及使用体验
Apache NiFi用户指南-数据流版本控制
大数据流处理:Flume、Kafka和NiFi对比
程序员需要关注的十个大数据技术
大数据技术分享:十大开源的大数据技术
热门
标签
更多标签
云服务器
ICP备案
对象存储
云点播
实时音视频
活动推荐
运营活动
广告
关闭
领券