首页
学习
活动
专区
圈层
工具
发布
社区首页 >专栏 >filebeat输出kafka

filebeat输出kafka

原创
作者头像
陈不成i
修改2021-07-05 14:35:47
修改2021-07-05 14:35:47
7900
举报
文章被收录于专栏:ops技术分享ops技术分享

输出到kafka集群中

代码语言:javascript
复制
filebeat.inputs:
- type: log
  enabled: true
  paths:
    - /home/admin/taobao-tomcat-production-7.0.59.3/logs/catalina.out
  fields:
    local_type: 'tomcat' #这些都是附加的标签
    local_ip: 1.1.1.1
    local_host: 'prod_商品_1'
  fields_under_root: true #将标签放到顶头,不然在message字段里
  multiline.pattern: '^20' #20开头和20开头之间的算作一行,具体根据日志情况
  multiline.negate: true
  multiline.match: after
filebeat.config.modules:
  path: ${path.config}/modules.d/*.yml
  reload.enabled: false
setup.template.settings:
  index.number_of_shards: 3
output.kafka:
  enabled: true
  hosts: ["1.1.1.1:9092","1.1.1.2:9092","1.1.1.3:9092"] #kafka集群地址
  topic: 'tomcat-server-log' #topic名

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 输出到kafka集群中
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档