rsyslog升级--input支持通配符测试

本文涉及的产品
日志服务 SLS,月写入数据量 50GB 1个月
简介:

centos5系列系统自带为syslog1.4.1

centos6系列自带rsyslog版本为5.8.10

centos7系列自带rsyslog版本为7.4.7


目前最新版rsyslog为8.22.0

rsyslog从8.5.0后对imfile模块进行重构,文件名中可以支持通配符。

因此,对rsyslog升级,体验一下通配功能。



安装很简单,安装之前有一些依赖问题要解决

##系统依赖
yum install -y zlib zlib-devel gcc uuid libuuid-devel libgcrypt-devel

##安装libestr
tar xvf libestr-0.1.9.tar.gz
cd libestr-0.1.9
./configure && make && make install
cp libestr.pc /usr/lib64/pkgconfig
不装这个模块,编译rsyslog时会报错
e4b5274a93acc580c57b79a27a93d0ecaf788579

##安装libfastjson
yum install -y autoconf automake libtool
git clone https://github.com/rsyslog/libfastjson.git
cd libfastjson
sh autogen.sh
./configure
make
make install
cp libfastjson.pc /usr/lib64/pkgconfig
80707bc5de0ac4d32ca5a63544fe5f6cd46469ca
###安装json
tar xvf json-c-0.10.tar.gz
cd json-c-0.10
./configure && make && make install
cp ../json-c-0.10/json_object_iterator.h /usr/local/include/json/

##安装liblogging-stdlog
方法一:
yum install liblogging-stdlog-1.0.4-4.fc22.i686.rpm -y
方法二:
git clone https: //github.com/rsyslog/liblogging.git
cd liblogging
autoreconf -fvi
./configure --disable-man-pages
make
make install
方法三:
编译rsyslog加参数 --disable-liblogging_stdlog

##安装rsyslog
tar zxvf rsyslog-8.22.0.tar.gz
cd rsyslog-8.22.0
./configure --prefix=/usr/local/ --disable-liblogging_stdlog
make && make install
因为我尝试安装 liblogging-stdlog后,编译时仍报错“No package 'liblogging-stdlog' found ”,因此在编译时选择加参数--disable-liblogging_stdlog

安装好以后就可以配置了,input部分如下:
f4371df8b5566965f9aa0b7625d1e09a1a88be6b
注意:
1. input文件支持通配,通配的后状态文件 State Files(跟踪文件的哪个部分已经被处理了)会出现重名不能被创建的问题,因此注释掉了此参数
2. 通配符是被支持的在文件名字级别 

配置好后启动时报错“无法加载imfile模块
0318d58e757f7bb6dfc1fe3ecb97109fe706c07a
解决的方法--重新安装此模块:
cd /root/rsyslog-8.22.0/plugins/imfile
make && make install
这样就可以了,/opt/所有的.log结尾的日志文件就都可以上传到output端。

因为我的日志是上传到袋鼠云云日志服务端,因此需要配置模板,但是模板中的文件名是不支持通配的,因此所有/opt/*.log的日志文件,上传到云日志平台都显示模板中同一文件名。
3e8c4f5e21d89e20d7061aac54eeb71ae76ce261







相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
目录
相关文章
|
29天前
|
存储 消息中间件 运维
架构升级的救星!流量回放自动化测试的必备指南
大家好,我是小米,一名29岁的技术宅。今天分享一个物联网领域的实用技能——流量回放自动化测试。系统重构后,测试工作量巨大,本文介绍如何通过日志收集和数据回放进行自动化测试,包括离线、实时和并行回放模式,帮助快速定位Bug,提升测试效率和系统稳定性。欢迎关注我的微信公众号“软件求生”,获取更多技术干货!
34 3
|
3月前
|
算法
测试工程师的技能升级:LeetCode算法挑战与职业成长
这篇文章通过作者亲身体验LeetCode算法题的过程,探讨了测试工程师学习算法的重要性,并强调了算法技能对于测试职业成长的必要性。
64 1
测试工程师的技能升级:LeetCode算法挑战与职业成长
|
4月前
|
关系型数据库 MySQL 测试技术
数据库升级是一个涉及数据备份、新版本安装、数据迁移和测试等关键环节的复杂过程
【7月更文挑战第21天】数据库升级是一个涉及数据备份、新版本安装、数据迁移和测试等关键环节的复杂过程
91 1
|
6月前
|
运维 测试技术
测试如何快速升级打怪?
测试如何快速升级打怪?
测试如何快速升级打怪?
|
6月前
|
架构师 安全 测试技术
软件测试新手打怪升级攻略
软件测试新手打怪升级攻略
|
6月前
|
存储 Kubernetes 安全
虚拟机测试Windows Server 2016原地升级2019,应用和数据完美保留
Windows Server 2016可以无缝升级到2019版本,确保应用程序和数据在原地升级过程中完整保留。
351 0
|
6月前
|
数据管理
速来测试|你所在企业的数智化升级到位了吗?
速来测试|你所在企业的数智化升级到位了吗?
|
Oracle jenkins Java
【2023新windows电脑部署测试环境系列-04】Jenkins问题实测整理(升级jenkins到最新)
【2023新windows电脑部署测试环境系列-04】Jenkins问题实测整理(升级jenkins到最新)
【2023新windows电脑部署测试环境系列-04】Jenkins问题实测整理(升级jenkins到最新)
|
前端开发 测试技术 数据库
测试思想-系统测试 软件版本升级测试(摘录)
测试思想-系统测试 软件版本升级测试(摘录)
140 0