linux云自动化运维基础知识10(日志同步和时间同步)

本文涉及的产品
日志服务 SLS,月写入数据量 50GB 1个月
简介:


/var/log/messages    ##系统服务及日志,包括服务的信息,报错等等
/var/log/secure        ##系统认证信息日志
/var/log/maillog    ##系统邮件服务信息
/var/log/cron        ##系统定时任务信息
/var/log/boot.log    ##系统启动信息

####2.日志管理服务rsyslog####

1.rsyslog负责采集日志和分类存放日志
2.rsyslog日志分类
vim /etc/rsyslog.conf    ##主配置文件
服务.日志级别        /存放文件
*.*            /var/log/westos

systemctl restart rsyslog

###格式###

日志设备(类型).(连接符号)日志级别   日志处理方式(action)

####日志设备(可以理解为日志类型):####
auth                ##pam产生的日志
authpriv            ##ssh,ftp等登录信息的验证信息
cron                ##时间任务相关
kern                ##内核
lpr                 ##打印
mail                ##邮件
mark(syslog)–rsyslog    ##服务内部的信息,时间标识
news                ##新闻组
user                ##用户程序产生的相关信息
uucp                ##unix to unix copy, unix主机之间相关的通讯
local 1~7           ##自定义的日志设备

####日志级别####
———————————————————————-
debug               ##有调式信息的,日志信息最多
info                ##般信息的日志,最常用
notice              ##最具有重要性的普通条件的信息
warning             ##警告级别
err                 ##错误级别,阻止某个功能或者模块不能正常工作的信息
crit                ##严重级别,阻止整个系统或者整个软件不能正常工作的信息
alert               ##需要立刻修改的信息
emerg               ##内核崩溃等严重信息
none                ##什么都不记录

##注意:从上到下,级别从低到高,记录的信息越来越少
##详细的可以查看手册: man 3 syslog

####连接符号####
———————————————————————-
.xxx: 表示大于等于xxx级别的信息
.=xxx:表示等于xxx级别的信息
.!xxx:表示在xxx之外的等级的信息

#####实例####
1. 记录到普通文件或设备文件::
*.*     /var/log/file.log       # 绝对路径
*.*     /dev/pts/0
测试: logger -p local3.info ‘KadeFor is testing the rsyslog and logger ‘   logger 命令用于产生日志

2. 发送给用户(需要在线才能收到)
*.*   root
*.*   root,kadefor,up01         # 使用,号分隔多个用户
*.*   *                     # *号表示所有在线用户

3. 忽略,丢弃
local3.*   ~                # 忽略所有local3类型的所有级别的日志

4. 执行脚本::
local3.*    ^/tmp/a.sh          # ^号后跟可执行脚本或程序的绝对路径
                # 日志内容可以作为脚本的第一个参数.
                #  可用来触发报警
            

####日志同步####

systemctl stop firewalld         ##关闭两台主机的火墙

配置日志发送方
*.*             @172.25.0.11        ##通过udp协议把日志发送到11主机,@udp,@@tcp

wKiom1l9wSjy13n7AABJMV4h_Pk472.png
配置日志接受方
15 $ModLoad imudp            ##日志接收插件
16 $UDPServerRun 514            ##日志接收插件使用端口
wKioL1l9wVrwL5uaAAD07-Wiagw476.pngnetstat -anulpe | grep rsyslog
udp        0      0 0.0.0.0:514             0.0.0.0:*                           0          122073     32654/rsyslogd      
udp6       0      0 :::514                  :::*                                0          122074     32654/rsyslogd      
wKiom1l9wXOS6C7GAABPOb-fzoQ115.png测试
> /var/log/messages            ##两边都作
logger test message            ##日志发送方

tail -f /var/log/message        ##日志接收方

wKioL1l9wbHTueJ5AACTzMlWeSs215.png

####日志采集格式####
$template WESTOS, "%timegenerated% %FROMHOST-IP% %syslogtag% %msg%\n"
wKiom1l9wdOxSDO9AABnDXiUcZg295.png%timegenerated%            ##显示日志时间
%FROMHOST-IP%            ##显示主机ip
%syslogtag%            ##日志记录目标
%msg%                ##日志内容
\n                ##换行

$ActionfileDefaultTemplate WESTOS

*.info;mail.none;authpriv.none;cron.none                /var/log/messages;<<WESTOS>>

wKiom1l9wfGyKrLPAABwDlJzrMk354.png


####3.日志分析工具journal#####

systemd-journald        ##进程名称

journalctl            ##直接执行,浏览系统日志
-n 3                ##显示最新3条                
-p err                ##显示报错
-f                ##监控日志
--since --until            ## --since "[YYYY-MM-DD] [hh:mm:ss]" 从什么时间到什么时间的日志
-o verbose            ##显示日志能够使用的详细进程参数
                ##_SYSTEMD_UNIT=sshd.service服务名称
                ##_PID=1182进程pid

wKioL1l9wh6jNDcpAACNwHN-oQ4569.png

wKioL1l9wh_S_rcjAAF9I2Df-zI065.png

对systemd-journald管理
##默认情况下此程序会忽略重启前的日志信息,如不忽略:
mkdir /var/log/journal
chown root:systemd-journal /var/log/journal
chmod 2755 /var/log/journal
killall -1 systemd-journald
ls /var/log/journal/4513ad59a3b442ffa4b7ea88343fa55f
system.journal user-1000.journal



####4.时间同步####

1.服务端
yum install chrony -y    ##安装服务

vim /etc/chrony.conf    ##主配置文件
21 # Allow NTP client access from local network.
22 allow 172.25.0.0/24    ##允许谁去同步我的时间
27 # Serve time even if not synchronized to any NTP server.
28 local stratum 10    ##不去同步任何人的时间,时间同步服务器级别

systemctl restart chronyd
systemctl stop firewalld 

2.客户端
vim /etc/chrony.conf
  3 server 0.rhel.pool.ntp.org iburst
  4 server 1.rhel.pool.ntp.org iburst====> server ntpserverip iburst
  5 server 2.rhel.pool.ntp.org iburst====>
  6 server 3.rhel.pool.ntp.org iburst

systemctl restart chronyd

测试:
[root@localhost ~]# chronyc sources -v
210 Number of sources = 1

  .-- Source mode  '^' = server, '=' = peer, '#' = local clock.
 / .- Source state '*' = current synced, '+' = combined , '-' = not combined,
| /   '?' = unreachable, 'x' = time may be in error, '~' = time too variable.
||                                                 .- xxxx [ yyyy ] +/- zzzz
||                                                /   xxxx = adjusted offset,
||         Log2(Polling interval) -.             |    yyyy = measured offset,
||                                  \            |    zzzz = estimated error.
||                                   |           |                         
MS Name/IP address         Stratum Poll Reach LastRx Last sample
===============================================================================
^* 172.25.0.11                  10   6   377    41   +170us[ +201us] +/-  191us



####5.timedatectl命令####
timedatectl        status            ##显示当前时间信息
            set-time        ##设定当前时间
            set-timezone        ##设定当前时区
            set-local-rtc 0|1    ##设定是否使用utc时间



本文转自 lulu2017 51CTO博客,原文链接:http://blog.51cto.com/13132425/1952133
相关实践学习
通过日志服务实现云资源OSS的安全审计
本实验介绍如何通过日志服务实现云资源OSS的安全审计。
相关文章
|
2月前
|
监控 Linux 应用服务中间件
linux查看日志文件tail -f用法
在 Linux 中,查看和监控日志文件是系统管理员和开发者常用的操作之一。tail 命令就是用来查看文件内容的,它默认显示文件的最后部分。tail -f 是 tail 命令的一个非常有用的选项,用于实时查看和跟踪日志文件的更新,尤其是在监控运行中的服务时非常有用。
401 0
|
5月前
|
消息中间件 运维 监控
智能运维,由你定义:SAE自定义日志与监控解决方案
通过引入 Sidecar 容器的技术,SAE 为用户提供了更强大的自定义日志与监控解决方案,帮助用户轻松实现日志采集、监控指标收集等功能。未来,SAE 将会支持 istio 多租场景,帮助用户更高效地部署和管理服务网格。
408 52
|
6月前
|
数据采集 运维 监控
数据采集监控与告警:错误重试、日志分析与自动化运维
本文探讨了数据采集技术从“简单采集”到自动化运维的演进。传统方式因反爬策略和网络波动常导致数据丢失,而引入错误重试、日志分析与自动化告警机制可显著提升系统稳定性与时效性。正方强调健全监控体系的重要性,反方则担忧复杂化带来的成本与安全风险。未来,结合AI与大数据技术,数据采集将向智能化、全自动方向发展,实现动态调整与智能识别反爬策略,降低人工干预需求。附带的Python示例展示了如何通过代理IP、重试策略及日志记录实现高效的数据采集程序。
287 7
数据采集监控与告警:错误重试、日志分析与自动化运维
|
5月前
|
运维 安全 Linux
试试Linux设备命令行运维工具——Wowkey
WowKey 是一款专为 Linux 设备设计的命令行运维工具,提供自动化、批量化、标准化、简单化的运维解决方案。它简单易用、高效集成且无依赖,仅需 WIS 指令剧本文件、APT 账号密码文件和 wowkey 命令即可操作。通过分离鉴权内容与执行内容,WowKey 让运维人员专注于决策,摆脱繁琐的交互与执行细节工作,大幅提升运维效率与质量。无论是健康检查、数据采集还是配置更新,WowKey 都能助您轻松应对大规模设备运维挑战。立即从官方资源了解更多信息:https://atsight.top/training。
|
5月前
|
数据采集 运维 安全
Linux设备命令行运维工具WowKey问答
WowKey 是一款用于 Linux 设备运维的工具,可通过命令行手动或自动执行指令剧本,实现批量、标准化操作,如健康检查、数据采集、配置更新等。它简单易用,只需编写 WIS 指令剧本和 APT 帐号密码表文件,学习成本极低。支持不同流派的 Linux 系统,如 RHEL、Debian、SUSE 等,只要使用通用 Shell 命令即可通吃Linux设备。
|
6月前
|
监控 Shell Linux
Android调试终极指南:ADB安装+多设备连接+ANR日志抓取全流程解析,覆盖环境变量配置/多设备调试/ANR日志分析全流程,附Win/Mac/Linux三平台解决方案
ADB(Android Debug Bridge)是安卓开发中的重要工具,用于连接电脑与安卓设备,实现文件传输、应用管理、日志抓取等功能。本文介绍了 ADB 的基本概念、安装配置及常用命令。包括:1) 基本命令如 `adb version` 和 `adb devices`;2) 权限操作如 `adb root` 和 `adb shell`;3) APK 操作如安装、卸载应用;4) 文件传输如 `adb push` 和 `adb pull`;5) 日志记录如 `adb logcat`;6) 系统信息获取如屏幕截图和录屏。通过这些功能,用户可高效调试和管理安卓设备。
|
6月前
|
消息中间件 运维 监控
智能运维,由你定义:SAE自定义日志与监控解决方案
SAE(Serverless应用引擎)是阿里云推出的全托管PaaS平台,致力于简化微服务应用开发与管理。为满足用户对可观测性和运维能力的更高需求,SAE引入Sidecar容器技术,实现日志采集、监控指标收集等功能扩展,且无需修改主应用代码。通过共享资源模式和独立资源模式,SAE平衡了资源灵活性与隔离性。同时,提供全链路运维能力,确保应用稳定性。未来,SAE将持续优化,支持更多场景,助力用户高效用云。
|
7月前
|
运维 应用服务中间件 nginx
docker运维查看指定应用log文件位置和名称
通过本文的方法,您可以更高效地管理和查看Docker容器中的日志文件,确保应用运行状态可控和可监测。
764 28
|
8月前
|
机器学习/深度学习 人工智能 运维
智能日志分析:用AI点亮运维的未来
智能日志分析:用AI点亮运维的未来
2504 15