Linux系统日志管理、同步、采集、分析

首先，了解Linux系统日志的五种分类：

/var/log/messages     ##系统服务及日志，包括服务的信息，报错等等/var/log/secure       ##系统认证信息日志/var/log/maillog      ##系统邮件服务信息/var/log/cron         ##系统定时任务信息/var/log/boot.log     ##系统启动信息

---

日志管理服务rsyslog介绍
rsyslog负责采集日志和分类存放日志，rsyslog的主配置文件为/etc/rsyslog.conf, 大多数日志文件都位于 /var/log/ 目录中。

/etc/rsyslog.conf分类存放日志的格式：
日志设备(类型).(连接符号)日志级别   日志处理方式(action)
各字段指代内容：

####日志设备(类型)####auth                    ##pam产生的日志authpriv                ##ssh,ftp等登录信息的验证信息cron                    ##时间任务相关kern                    ##内核lpr                     ##打印mail                    ##邮件mark(syslog)–rsyslog    ##服务内部的信息,时间标识news                    ##新闻组user                    ##用户程序产生的相关信息uucp                    ##unix to unix copy, unix主机之间相关的通讯local 1~7               ##自定义的日志设备

####日志级别####debug               ##有调式信息的，日志信息最多info                ##般信息的日志，最常用notice              ##最具有重要性的普通条件的信息warning             ##警告级别err                 ##错误级别，阻止某个功能或者模块不能正常工作的信息crit                ##严重级别，阻止整个系统或者整个软件不能正常工作的信息alert               ##需要立刻修改的信息emerg               ##内核崩溃等严重信息none                ##什么都不记录

####连接符号####.xxx: 表示大于等于xxx级别的信息.=xxx：表示等于xxx级别的信息.!xxx：表示在xxx之外的等级的信息

---

日志的同步
1.关闭两台主机的防火墙

systemctl stop firewalld        

2.修改日志发送方配置文件/etc/rsyslog.conf

*.*         @172.25.254.23  ##通过udp协议把所有类型所有级别日志发送到232主机，@udp，@@tcp

3.修改日志接收方配置文件/etc/rsyslog.conf

15 $ModLoad imudp           ##日志接收插件16 $UDPServerRun 514        ##日志接收插件使用端口

4.两边清空系统日志

> /var/log/messages

5.发送方产生测试信息

logger test message             ##日志发送方

6.接收方查看日志

tail -f /var/log/message        ##日志接收方

---

日志的采集格式
修改配置文件/etc/rsyslog.conf

$template WESTOS, "%timegenerated% %FROMHOST-IP% %syslogtag% %msg%\n"**引号内字段释义如下**%timegenerated%         ##显示日志时间%FROMHOST-IP%           ##显示主机ip%syslogtag%         ##日志记录目标%msg%               ##日志内容\n              ##换行$ActionfileDefaultTemplate WESTOS*.info;mail.none;authpriv.none;cron.none                /var/log/messages;<<WESTOS>>

产生几组测试数据，可看到日志文件按新格式显示

Jul 26 04:48:09 127.0.0.1 systemd: Stopping System Logging Service...Jul 26 04:48:09 127.0.0.1 systemd: Starting System Logging Service...Jul 26 04:48:49 127.0.0.1 systemd: Started System Logging Service.

---

日志分析工具journal

systemd-journald        ##journal工具的进程名称journalctl              ##直接执行，浏览系统日志-n 3                    ##显示最新3条                -p err                  ##显示报错-f                      ##监控日志--since --until         ## --since "[YYYY-MM-DD] [hh:mm:ss]" 从什么时间到什么时间的日志-o verbose              ##显示日志能够使用的详细进程参数                        ##_SYSTEMD_UNIT=sshd.service服务名称                        ##_PID=1182进程pid