3 ELK收集nginx正常和错误日志

    技术2022-07-10  155

    转载 : ELK收集nginx正常和错误日志 :https://www.jianshu.com/p/ef62538724f7

    1.修改filebeat配置文件

    在53主机操作

    [root@db01 ~]# vim /etc/filebeat/filebeat.yml filebeat.inputs: ##收集正常日志 - type: log enabled: true paths: - /var/log/nginx/access.log json.keys_under_root: true json.overwrite_keys: true tags: ["access"] ##收集错误日志 - type: log enabled: true paths: - /var/log/nginx/error.log tags: ["error"] setup.kibana: host: "172.16.210.53:5601" ##根据标签来决定把日志放进正确日志索引和错误日志索引 output.elasticsearch: hosts: ["172.16.210.53:9200"] indices: - index: "nginx-access-%{[beat.version]}-%{+yyyy.MM}" when.contains: tags: "access" - index: "nginx-error-%{[beat.version]}-%{+yyyy.MM}" when.contains: tags: "error" setup.template.name: "nginx" setup.template.pattern: "nginx-*" setup.template.enabled: false setup.template.overwrite: true

    2.重启filebeat

    [root@db01 ~]# systemctl restart filebeat

    3.使用ab工具来产生一些日志

    [root@db01 ~]# ab -n 100 -c 100 http://172.16.210.53/cc.html

    4.使用es-head插件查看

    能发现生成的两个索引,分别是正常日志和错误日志

    5.回到kibana添加数据项并查看项目

    创建正常日志索引 创建错误日志索引 选择要查看的索引项 查看access日志 查看error日志 要是想查看其他主机的正常和错误日志的话,就把53主机的filebeat配置文件拷贝过去,再重启filebeat

    在53主机操作:

    [root@db01 ~]# scp /etc/filebeat/filebeat.yml db02:/etc/filebeat/ [root@db01 ~]# scp /etc/filebeat/filebeat.yml db03:/etc/filebeat/

    在54和55主机操作:

    systemctl restart filebeat

    在53主机操作

    ##给5455主机产生一些错误日志 [root@db01 ~]# ab -n 100 -c 100 http://172.16.210.54/4444.html [root@db01 ~]# ab -n 100 -c 100 http://172.16.210.55/5555.html

    回到kibana界面,添加主机名为db02的过滤项 就能查看db02主机的错误日志了 过滤db03,也能查看到db03的错误日志

    filebeat模块收集nginx日志 :https://www.jianshu.com/p/e4785be0ceb8

    Processed: 0.015, SQL: 9