logstash iptables日志解析

文章/答案/技术大牛

发布

1回答

elasticsearch、logstash、kibana

ELK在容器中运行整个日志被归类为“消息”字段。

浏览 22提问于2018-03-04得票数 0

2回答

Logstash和iptables

ubuntu、logstash

根据教程，我刚刚在我的Ubuntu服务器上安装了Logstash，我的iptables只允许80和22个端口。因此，当Logstash启动时，我在日志中得到以下iptables错误。

浏览 2提问于2013-08-10得票数 0

1回答

Filebeat无法将数据发送到logstash，从而导致弹性和基巴纳中的空数据。

elasticsearch、logstash、kibana、filebeat、okd

我试图在openshift平台(OKD - v3.11)中部署ELK堆栈，并使用file节拍自动检测日志。kibana仪表板已经启动，弹性和logstash运行良好，但是文件没有将数据发送到logstash，因为我没有看到logstash上的任何数据轮询监听5044端口。所以我发现，在弹性论坛上，下面的iptables命令可以解决我的问题，但是没有运气， iptables -A OUTPUT -t mangle -p tcp --dport 5044 -j MARK --set-mark

浏览 2提问于2020-05-04得票数 4

2回答

如何只收集文件中的错误级别日志并发送给elasticsearch

elasticsearch、logstash、filebeat

我正在使用filerob7.x收集日志数据，但我面临的问题是日志大小太大(每天100 so )。现在，我正在考虑如何从源文件中收集错误级别日志。做这件事最好的方法是什么？我正在使用file节拍发送日志到elasticsearch，它在Kubernetes集群中，我在这里关注的是，我应该使用kafka和logstash来定义规则吗？

浏览 2提问于2020-06-13得票数 0

回答已采纳

2回答

通过FileBeat直接连接ELS还是通过LogStash？

elasticsearch、logstash、kibana、filebeat

我们正在安装ELS和Kibana，用于日志聚合/分析。第一个使用它的系统是greenfield，因此我们从构成我们系统的服务中输出结构化日志。鉴于我们不需要向日志中添加结构，我计划使用FileBeat将日志直接发送到ELS，而不是使用LogStash。这是一个明智的选择吗?或者LogStash是否比我们可能需要的解析更有价值？如果我们使用LogStash，我是否可以使用它来获取日志文件，或者我是否应该仍然使用FileBeat

浏览 2提问于2016-10-05得票数 9

1回答

在Logstash中使用regex作为输入文件路径

logstash

我想用logstash解析日志文件的目录。当日志的格式如下：server-20140603.log没有问题，我使用的globs是这样的： file{ }但是我的日志格式是这样的：server.log.1client.logclient.lo

浏览 2提问于2014-06-04得票数 1

1回答

是否可以为一个文件节拍配置多个输出？

elasticsearch、logstash、filebeat

在我们的一个应用程序中，我们使用logstash解析应用程序日志，并将它们索引到elasticsearch中。我们的简单架构是日志文件-->文件-->日志存储由于我们启用了多个日志文件示例(apachelogs、人工日志、应用程序日志等)，因此logstash无法解析数据量，因此在elasticsearch中缺少日志是否有任何方法在logstash中处理大量的数据，或

浏览 1提问于2017-11-29得票数 2

1回答

Oracle RDS XML审核日志的Logstash Grok筛选器模式

oracle、amazon-web-services、elasticsearch、amazon-s3、logstash-grok

我想创建一个logstash grok模式来解析下面的oracle审计日志，并只从"<AuditRecord> to </AuditRecord>"中提取值 {"messageType":"DATA_MESSAGEOSPrivilege>SYSDBA</OSPrivilege><DBID>918393906</DBID> <Sql_Text>CONNECT</Sql_T

浏览 37提问于2021-08-31得票数 0

回答已采纳

1回答

Logstash在没有崩溃或输出的情况下继续运行(windows和linux)

linux、windows、file、logstash

Update:来自linux的conf文件和(Logstash)调试日志。} host => "<elastic.server>" }从日志中看，logstash似乎读取文件并对其进行处理，在注册和处理之后进入等待状态。[root@cdh-cc3 logstash-1.4.2]# bin/logstash

浏览 0提问于2015-02-10得票数 0

1回答

用logstash解析旧IIS日志

iis、logstash

我从Awsats搬到logstash (结合弹性搜索和Kibana)。但是，我需要使用logstash导入/解析一些旧的IIS日志文件。文件已移动到logstash服务器。但是，我无法找到一个命令来解析现有的日志文件。

浏览 0提问于2014-07-24得票数 1

回答已采纳

1回答

你知道如何将Selenium WebDriver日志发送到Kibana吗？

java、selenium、selenium-webdriver、kibana

我需要发送Selenium日志到Kibana工具。System.setOut(ps); H使用此代码，我将在记事本文件中发送所有System.out.println日志

浏览 1提问于2018-05-10得票数 1

1回答

关于微服务体系结构的ELK堆栈

elastic-stack

现在我怀疑我该在哪里安装Logstash。我的意思是，假设有三种不同的服务器A、B、&C，所有服务器都有3种服务。现在总共有9个服务，我想使用ELK捕获它们的日志。但我的问题是，我是否必须在每个不同的服务器上安装Logstash，并将解析的日志发送给Elastic，还是可以在单个服务器上安装Logstash &指定远程输入。我还需要使用File节拍吗？

浏览 1提问于2017-05-25得票数 3

回答已采纳

1回答

在logstash中知道文件的结尾

parsing、logging、logstash

是否有任何方法来识别logstash是否解析了文件底部的所有行。使用logstash解析静态文件，因此logstash不必在完成解析文件中的现有行之后等待/运行。如果logstash中没有这样的特性，那么在不修改日志文件的情况下，是否有任何实现它的工作？

浏览 2提问于2015-07-07得票数 1

回答已采纳

2回答

Logstash解析进度条

logstash

我是Logstash的新手，我正在使用它来解析特定目录中500 it的日志文件，目前当我开始使用logstash时，它并没有显示出它已经解析日志文件的百分比的任何进度条。有什么方法可以看到日志解析的进展吗？

浏览 1提问于2015-10-15得票数 2

回答已采纳

2回答

从多台服务器(集中式日志服务器)发送日志的好方法是什么？

elasticsearch、logstash、syslog、kibana、rsyslog

我试图从托管在多个ec2实例上的php应用程序中发送大量日志。与采用在每台服务器上安装logstash和使用logstash转发程序将日志发送到日志服务器的标准方法不同，logstash解析日志并将其提供给elasticsearch，这样会更好地将apache/nginx日志写入syslog并让rsylog将其发送到logstash，然后将其提供给elasticsearch吗？Apache/Ngi

浏览 2提问于2015-02-10得票数 1

回答已采纳

1回答

Logstash自定义日志解析

logstash、logstash-grok、logstash-configuration

在通过logstash进行自定义日志解析方面需要您的帮助2015-11-01 07:55:18,952 [abc.xyz.com] - /Enter,1449647718950_1449647718952_2_App_e9c00521-eeec-4d47-bf5b-b842ec14a4ff_178.255.153.2___, , , NEW, 我的logstashGREEDYDATA:message}&quo

浏览 0提问于2015-12-10得票数 0

1回答

从logstash中删除索引后，我们是否可以再次指向相同的日志文件以获取另一个索引？

elasticsearch、logstash、kibana

它包含来自某个文件的日志。即使删除了该索引，为什么logstash/elasticsearch在创建新索引时不读取相同的日志文件？谁扮演了读取日志的角色- ES或LS？

浏览 1提问于2015-11-20得票数 0

1回答

这个日志存储错误的原因是什么: exception=>#< " logstash“::Json::ParserError: VALUE_STRING中意外的输入结束

json、elasticsearch、logstash、filebeat、grok

我有下面的日志行并且使用logstash插件解析这个日志，但是logstash显示了logstash-plan.log中的错误： except

浏览 27提问于2022-07-09得票数 0

回答已采纳

1回答

如何管理从多个节拍到集中式Logstash的输入

elasticsearch、logstash、kibana-4、logstash-configuration、filebeat

我想使用Elastic Stack进行日志聚合，以便从10台机器获取日志。我希望在10台机器上安装Filebeat，并从每台机器获取日志并将其发送到安装在单独机器上的集中式Logstash服务器。在单独的机器上，安装了Logstash Elasticsearch & Kibana。我需要Logstash，因为我想在使用beats收集日志后对数据进行处理和解析。根据这个架构，我面临着一些识别和解析日志的问题。如

浏览 13提问于2016-08-13得票数 5

1回答