centos+rsyslog+mysql+loganalyzer搭建日志服务器

2024-08-24 06:38

本文主要是介绍centos+rsyslog+mysql+loganalyzer搭建日志服务器,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

实验环境:

centos6.10(192.168.0.60)、centos7.9(192.168.0.79)、rsyslog、mairadb。为了好记,所以ip地址对应centos版本号。两个系统上都有mariadb(mysql)。

实验目的:

centos6安装mariadb10.5.13,充当日志数据库服务器。同时也是测试客户端。

centos7充当rsyslog日志服务器,如果客户端产生日志,会传给centos7来记录。使用文件记录日志时,centos6的日志会存在centos7的日志文件中。而使用mysql时,又希望centos7传给远程的mysql,这里mysql就使用centos6。

等于转了个圈,只为测试,有意“提高”难度。过程如下:

centos6本机测试:

cat /dev/null > /var/log/messages;tail /var/log/messages:清空日志,没有任何内容。

service rsyslog restart;tail /var/log/messages:输出重启rsyslog服务产生的日志。

centos6操作,centos7存储日志文件:

1、centos6上编辑/etc/rsyslog.conf: 

编辑RULES段,把之前传给messages日志文件的内容,定向到centos7(192.168.0.79)。

2、centos7上编辑/etc/rsyslog.conf:

 编辑MODULES段,开启端口监听。一定记着防火墙,firewall-cmd要么关闭,要么允许514通过。

3、测试:

centos7清空日志并验证:

 centos6重启rsyslog服务,清空并验证日志:

 发现什么也没有了。再看centos7:

 原本centos6上重启rsyslog的日志记录在了centos7的messages文件中。达到预期效果。

centos6操作,centos7收集日志,再发给centos6的mariadb:

1、centos6编辑rsyslog.conf,指向centos7,同上。

2、centos7安装rsyslog-mysql包:

这个要说明一下,我的环境下,yum list rsyslog-mysql看到的是i686平台的包,但光盘镜像上确实能看到x86_64的包,所以直接yum是不行的,我这样写的:

yum install /media/cdrom/Packages/rsyslog-mysql-8.24.0-55.el7.x86_64.rpm

安装mysql包以后,rsyslog日志采集服务就可以链接mysql了。

使用rpm -ql查看一下就知道,rsyslog-mysql包有一个sql脚本文件:

/usr/share/doc/rsyslog-8.24.0/mysql-createDB.sql

我的centos7上是有mysql客户端的,所以我使用输入重定向,就可以在centos6上执行脚本:

mysql -h 192.168.0.60 -p < /usr/share/doc/rsyslog-8.24.0/mysql-createDB.sql

当然centos6上的mariadb是需要赋予相应权限的,也可以把脚本拿到centos6上本地执行。

根据sql脚本所示,生成的数据库和表名是:Syslog.SyslogEvents。顺便授权一个用户:syslog@syslogpwd。待会儿配置文件里用。

3、centos7编辑配置文件rsyslog.conf:

modules段确保开启收集日志监听端口,添加ommysql模块,rules段日志保存定向到centos6的mysql。

 mysql定向的格式为:

:ommysql:host,db_name,user_name,user_password

centos7重启rsyslog服务,使配置生效。

4、测试:

centos6和centos7都清空日志文件。

centos6重启rsyslog服务,卸载vim,安装vim,本机messages文件中看不到日志。

centos7的message文件中也没有日志。

 centos6中打开mysql查询Syslog.SystemEvents表,看到日志都在这里了。

 测试完成。达到预期效果。

其实,这时候在centos7上的操作,原本收集到messages的日志都会到centos6的mysql中国去了。因此,接下来要配置一个图形化的工具loganalyzer。

搭建loganalyzer:

下载地址:https://loganalyzer.adiscon.com/download/

它就是个站点,我就不折腾了,装在centos6上。

cd;    tar -xf loganalyzer-4.1.12.tar;     cp loganalyzer-4.1.12 /var/www/html/loganalyzer

cd /var/www/html/loganalyzer/src;    bash ../contrib/*.sh

它的目录下src作为站点根,也可以只复制src到站点目录。contrib目录下有脚本文件,内容很简单,就是用来生成config.php配置文件并赋予权限的。我运行脚本,从来不喜欢赋予执行权限在复制过去,临时执行一下没必要,带上路径bash一下就好。然后就没有然后了,保证httpd服务没问题就好。

浏览器输入站点路径就可以了http://192.168.0.60/loganalyzer/src/install.php。第一次记着访问install.php页面,忘了也没关系,它会提示你并给个链接。

 界面挺好看的吧。按照提示一路next就可以了,数据库链接等都能配置好。然后界面就出来了。还带浮窗,信息非常全。甚至可以有图表。

但是要说明,为了显示这个图表需要php的GD模块,我费了很大周折,请见另外一篇博客。

php编译安装GD模块定制安装的一大推问题_大橘子的博客-CSDN博客

本文完。

这篇关于centos+rsyslog+mysql+loganalyzer搭建日志服务器的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1101735

相关文章

Mysql虚拟列的使用场景

《Mysql虚拟列的使用场景》MySQL虚拟列是一种在查询时动态生成的特殊列,它不占用存储空间,可以提高查询效率和数据处理便利性,本文给大家介绍Mysql虚拟列的相关知识,感兴趣的朋友一起看看吧... 目录1. 介绍mysql虚拟列1.1 定义和作用1.2 虚拟列与普通列的区别2. MySQL虚拟列的类型2

Window Server创建2台服务器的故障转移群集的图文教程

《WindowServer创建2台服务器的故障转移群集的图文教程》本文主要介绍了在WindowsServer系统上创建一个包含两台成员服务器的故障转移群集,文中通过图文示例介绍的非常详细,对大家的... 目录一、 准备条件二、在ServerB安装故障转移群集三、在ServerC安装故障转移群集,操作与Ser

mysql数据库分区的使用

《mysql数据库分区的使用》MySQL分区技术通过将大表分割成多个较小片段,提高查询性能、管理效率和数据存储效率,本文就来介绍一下mysql数据库分区的使用,感兴趣的可以了解一下... 目录【一】分区的基本概念【1】物理存储与逻辑分割【2】查询性能提升【3】数据管理与维护【4】扩展性与并行处理【二】分区的

NFS实现多服务器文件的共享的方法步骤

《NFS实现多服务器文件的共享的方法步骤》NFS允许网络中的计算机之间共享资源,客户端可以透明地读写远端NFS服务器上的文件,本文就来介绍一下NFS实现多服务器文件的共享的方法步骤,感兴趣的可以了解一... 目录一、简介二、部署1、准备1、服务端和客户端:安装nfs-utils2、服务端:创建共享目录3、服

MySQL中时区参数time_zone解读

《MySQL中时区参数time_zone解读》MySQL时区参数time_zone用于控制系统函数和字段的DEFAULTCURRENT_TIMESTAMP属性,修改时区可能会影响timestamp类型... 目录前言1.时区参数影响2.如何设置3.字段类型选择总结前言mysql 时区参数 time_zon

Python MySQL如何通过Binlog获取变更记录恢复数据

《PythonMySQL如何通过Binlog获取变更记录恢复数据》本文介绍了如何使用Python和pymysqlreplication库通过MySQL的二进制日志(Binlog)获取数据库的变更记录... 目录python mysql通过Binlog获取变更记录恢复数据1.安装pymysqlreplicat

使用SQL语言查询多个Excel表格的操作方法

《使用SQL语言查询多个Excel表格的操作方法》本文介绍了如何使用SQL语言查询多个Excel表格,通过将所有Excel表格放入一个.xlsx文件中,并使用pandas和pandasql库进行读取和... 目录如何用SQL语言查询多个Excel表格如何使用sql查询excel内容1. 简介2. 实现思路3

C++中实现调试日志输出

《C++中实现调试日志输出》在C++编程中,调试日志对于定位问题和优化代码至关重要,本文将介绍几种常用的调试日志输出方法,并教你如何在日志中添加时间戳,希望对大家有所帮助... 目录1. 使用 #ifdef _DEBUG 宏2. 加入时间戳:精确到毫秒3.Windows 和 MFC 中的调试日志方法MFC

SpringBoot如何使用TraceId日志链路追踪

《SpringBoot如何使用TraceId日志链路追踪》文章介绍了如何使用TraceId进行日志链路追踪,通过在日志中添加TraceId关键字,可以将同一次业务调用链上的日志串起来,本文通过实例代码... 目录项目场景:实现步骤1、pom.XML 依赖2、整合logback,打印日志,logback-sp

Mysql DATETIME 毫秒坑的解决

《MysqlDATETIME毫秒坑的解决》本文主要介绍了MysqlDATETIME毫秒坑的解决,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着... 今天写代码突发一个诡异的 bug,代码逻辑大概如下。1. 新增退款单记录boolean save = s