博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
CentOS6.9安装Filebeat监控Nginx的访问日志发送到Kafka
阅读量:5099 次
发布时间:2019-06-13

本文共 964 字,大约阅读时间需要 3 分钟。

一、下载地址:

官方:

百度云盘:

 

二、安装

tar zxvf filebeat-6.2.1-linux-x86_64.tar.gzmv filebeat-6.2.1-linux-x86_64 filebeat

也可yum安装

下载和安装key文件

rpm --import https://packages.elastic.co/GPG-KEY-elasticsearch

创建yum源文件

vi /etc/yum.repos.d/elastic.repo
[elastic-6.x]name=Elastic repository for 6.x packagesbaseurl=https://artifacts.elastic.co/packages/6.x/yumgpgcheck=1gpgkey=https://artifacts.elastic.co/GPG-KEY-elasticsearchenabled=1autorefresh=1type=rpm-md

开始安装

yum install filebeat

 

三、配置

vi kafka.yml
filebeat.prospectors:- input_type: log  paths:    - /usr/local/openresty/nginx/logs/access.logoutput.kafka:  hosts: ["10.10.6.225:9092"]  topic: need_process_nginx_access_log  partition.round_robin:    reachable_only: false  required_acks: 1

注:output到kafka的partitions策略:分为random、round_robin、hash,默认是hash

具体说明:

运行

./filebeat -e -c kafka.yml

 后台运行

nohup /usr/local/filebeat/filebeat -e -c /usr/local/filebeat/kafka.yml >/dev/null 2>&1 &

 

转载于:https://www.cnblogs.com/kgdxpr/p/8438673.html

你可能感兴趣的文章
7.26
查看>>
dll--二进制层面的复用
查看>>
linux 压缩/解压缩/打包命令
查看>>
守护进程
查看>>
CLR 关于强命名程序集 .
查看>>
[BZOJ 3489] A simple rmq problem 【可持久化树套树】
查看>>
321 Create Maximum Number 拼接最大数
查看>>
第四章家庭作业4.45
查看>>
111
查看>>
详解UML图之类图
查看>>
课程作业(五)
查看>>
设计模式 之 原型模式(ProtoType)
查看>>
python - selenium 2 升级到最新版本
查看>>
js获取非行间样式/写入样式(行间)
查看>>
历届试题 矩阵翻硬币 大数开方
查看>>
排球积分程序记分员
查看>>
代理模式
查看>>
机器学习面笔试-SVM篇
查看>>
JS高级----------------->原型简单的写法(注意手动修改构造器的指向)
查看>>
vue响应式原理
查看>>