解析logstash中的url参数

文章/答案/技术大牛

发布

1回答

elasticsearch、logstash、kibana

我在url中发送数据到logstash 5.2，我想在logstash中解析它，这样每个url参数都会成为logstash中的一个变量，我可以在kibana中正确地可视化它。20Chrome/56.0.2924.87%20Safari/537.36&utm_source=&utm_medium=&utm_term=&utm_content=&utm_camp

浏览 8提问于2017-03-01得票数 3

回答已采纳

5回答

logstash配置文件的格式是什么？

serialization、logstash

logstash是否在配置文件中使用自己的文件语法？是否有用于配置文件语法的解析器或验证器？对于那些不使用logstash但对文件格式有概念的人，这里有一个示例语法： file { type => "syslog

浏览 12提问于2014-01-29得票数 34

回答已采纳

1回答

从WEB对ElasticSearch中的数据进行索引

elasticsearch、logstash、prtg

我正在尝试将名为PRTG的服务的API中的数据索引/插入到elasticsearch中。当我转到一个特定的URL时，这个API返回一个JSON文件，就像WEB API一样，不需要下载任何东西。我认为使用以下命令是可能的： curl --user elastic:****** -XPOST http://localhost:9200/prtg_test/_mapping/_doc -d @&#

浏览 8提问于2018-08-25得票数 1

回答已采纳

1回答

logstash grok解析url

url、elasticsearch、logstash、grok

grok {}URL 1= /NEED_A/Constant_A/Constant_B/Constant_C/Need_B/Constant_D/Need_C/Need_D <em

浏览 3提问于2015-09-21得票数 1

回答已采纳

1回答

如何将JSON spring启动日志显示为表格格式的消息之外的单独字段

java、elasticsearch、logstash、kibana、filebeat

它不应该转储到kibana的消息字段中。它必须在表格式中作为单独的字段查看。我使用Json处理器将json日志拆分为一个单独的变量，以便以表格式查看它，但我无法以表格式查看json日志。

浏览 30提问于2020-10-27得票数 1

1回答

在logstash中知道文件的结尾

parsing、logging、logstash

是否有任何方法来识别logstash是否解析了文件底部的所有行。使用logstash解析静态文件，因此logstash不必在完成解析文件中的现有行之后等待/运行。如果logstash中没有这样的特性，那么在不修改日志文件的情况下，是否有任何实现它的工作？

浏览 2提问于2015-07-07得票数 1

回答已采纳

1回答

无法设置从文件拍到日志存储的管道

elastic-stack、filebeat

我让文件在一个码头容器中运行，而logstash在另一个码头容器中运行。关于日志存储配置的filebeat.yml配置 logstash: enab

浏览 4提问于2017-04-14得票数 0

回答已采纳

1回答

将heroku日志排水沟连接到日志存储处

elasticsearch、heroku、logstash

我有以下问题：谢谢你能帮我把这件事办好。

浏览 1提问于2018-08-21得票数 2

1回答

logstash将搜索结果限制在前一天

elasticsearch、logstash

我想在Logstash中的当前日期前一天使用Elasticsearch输入插件查询Elasticsearch的索引。我为logstash尝试了以下配置， elasticsearch hosts => ["localhost:9200"]index => "logstash-%{+YYYY.MM.dd-6}" query => '{

浏览 0提问于2018-07-03得票数 1

回答已采纳

1回答

从AWS ELB日志解析“请求”字段

ruby、parsing、amazon-web-services、logstash、grok

我在AWS上为我的ELB启用了访问日志，我们将它们发送到logstash + elasticsearch + kibana的设置中。我使用logstash的grok过滤器将日志解析为可以在kibana中查看和排序的单独字段，并且在解析amazon在这些日志中给出的最后一个字段(即“请求”字段)时遇到了困难。它实际上包含三个部分。HTTP方法、URL本身和HTTP版

浏览 2提问于2014-06-11得票数 1

回答已采纳

3回答

无法在logstash中读取CSV文件，因为它自己关闭

elasticsearch、logstash、kibana、elk

我已经启动并运行了elasticsearch和Kibana，我希望使用logstash读取日志，因此我已经将csv文件作为logstash.conf文件中的输入传递给它，但它不会自动读取日志和关闭。下面是运行logstash命令的方式：logstash.conf input

浏览 11提问于2022-03-16得票数 0

1回答

你知道如何将Selenium WebDriver日志发送到Kibana吗？

java、selenium、selenium-webdriver、kibana

我从来没有在Kibana工作过。有没有人可以按要求帮助我？我需要发送Selenium日志到Kibana工具。FileOutputStream fos = new FileOutputStream(createLogReport(className));TeeOutputStream myOut=new TeeOutputStream(System.out, fos); Syst

浏览 1提问于2018-05-10得票数 1

1回答

在Logstash中使用regex作为输入文件路径

logstash

我想用logstash解析日志文件的目录。当日志的格式如下：server-20140603.log没有问题，我使用的globs是这样的： file{ }但是我的日志格式是这样的：server.log.1client

浏览 2提问于2014-06-04得票数 1

2回答

如何只收集文件中的错误级别日志并发送给elasticsearch

elasticsearch、logstash、filebeat

我正在使用filerob7.x收集日志数据，但我面临的问题是日志大小太大(每天100 so )。{ "filebeat.yml": "filebeat.in

浏览 2提问于2020-06-13得票数 0

回答已采纳

1回答

Logstash和ElasticSearch之间缺少数据

elasticsearch、logstash、kibana

我正在尝试使用Logstash解析IIS错误XML文件，然后将这些错误存储在Elasticsearch中并显示在Kibana中。这是我的logstash.conf文件：{ path => ["C:/inetpub/logs/FailedReqLogFiles/*/*.xml"]FailedReqLogFiles\W3SVC3 C:\inetpub\logs\Fa

浏览 0提问于2015-12-01得票数 1

3回答

带有logstash http-poller的动态URL参数

logstash

我想使用logstash的http-poller输入来使用一个webservice，返回一个json文档数组来将数据加载到elasticsearch中。为此，需要在请求之间使用URL查询参数更新webservice GET URL。例如，web服务采用指定为开始参数和结束参数的日期范围，并将响应限制为1000个结果。当第一次加载数据时，我希望logstash继续调用web服务，并将启动时间设置为上一次请求中

浏览 6提问于2016-03-18得票数 3

回答已采纳

1回答

Logstash :解析通过twitter / facebook等web服务接收的Json数据时，解析失败

json、elasticsearch、logstash、logstash-file

我正在接收Web服务数据，比如从Twitter和日志到文件，在那里，我需要将数据发送到Logstash，这样就可以将同样的数据索引到Elasticsearch。我正在使用下面的config，这给jsonparsefailure提供了异常，如 input file path => ["/mnt/volume2/E

浏览 1提问于2016-08-01得票数 1

1回答

是否可以为一个文件节拍配置多个输出？

elasticsearch、logstash、filebeat

在我们的一个应用程序中，我们使用logstash解析应用程序日志，并将它们索引到elasticsearch中。我们的简单架构是日志文件-->文件-->日志存储由于我们启用了多个日志文件示例(apachelogs、人工日志、应用程序日志等)，因此logstash无法解析数据量，因此在elasticsearch中缺少日志是否有任何方法在logstash中处理大量的数据，或

浏览 1提问于2017-11-29得票数 2

2回答

通过FileBeat直接连接ELS还是通过LogStash？

elasticsearch、logstash、kibana、filebeat

第一个使用它的系统是greenfield，因此我们从构成我们系统的服务中输出结构化日志。鉴于我们不需要向日志中添加结构，我计划使用FileBeat将日志直接发送到ELS，而不是使用LogStash。这是一个明智的选择吗?或者LogStash是否比我们可能需要的解析更有价值？如果我们使用LogStash，我是否可以使用它来获取日志文件，或者我是否应该仍然使用FileBeat将日志传输到LogStash

浏览 2提问于2016-10-05得票数 9

1回答

在日志记录配置文件中使用外部模块

python、logging、logstash、configparser

我已经使用logstash为python2.7中的日志记录模块设置了以下配置文件keys=root,test keys=remote [formatters，这是我在这个例子中所能做的最短的文件。我使用一个名为logstash的模块，它将我的日志消息发送出去以供远程查看。如果我尝试用logging.config.fileConfig加载这个配置，我得到一个错误，它找不到logstash。

浏览 3提问于2014-10-22得票数 3

点击加载更多