Linux 性能监控之CPU&内存&I/O监控Shell脚本2

简介: Linux 性能监控之CPU&内存&I/O监控Shell脚本2

Linux性能监控之CPU&内存&I/O监控Shell脚本2

 


思路:

捕获数据->停止捕获数据->提取数据

备注:一些命令的输出,第一次记录的数据是自重启到当前时间的平均值,所以,如果采用循环的方式不断重复开启命令,获取的数据可能不太准确,所以,这里采用开启命令后,一次性捕获需要的数据。

 

(一)捕获数据

用法:sh capture.sh arg1 arg2

参数说明:arg1为采样频率,arg2为采样时长,单位都为秒

例子:2秒采集一次数据,采样时长10秒,共采样5

sh capture.sh 2 10

 

capture.sh内容如下:

#!/bin/bash

count=$(($2/$1))

echo $count

rm -f top.txt

rm -f vmstat.txt

rm -f iostat.txt

 

{ top -bd $1 -n $count >> top.txt; }&

{ vmstat -t -n -S K $1 $count >> vmstat.txt; }&

{ iostat -kx $1 $count >> iostat.txt; }&

 

wait

exit 0

说明:并发执行采集数据命令

 

(二)停止捕获数据

用法:sh stop.sh

说明:如果停止压测时还没到命令自动退出时间,可执行该脚本,停止数据捕获

 

stop.sh脚本内容如下:

#!/bin/bash

killall top

killall vmstat

killall iostat

exit 0

 

(三)提取数据

用法:sh analyze.sh agr1 arg2 arg3 arg4 arg5

参数说明:agr1agr2agr3分别为capture中指定的存储文件,默认分别为top.txtvmstat.txt,iostat.txt,arg4为网卡接口,arg需要采集的进程(COMMAND)

例子:

sh analyze.sh top.txt vmstat.txt iostat.txt eth1 netns

 

analyze.sh内容如下:

#!/bin/bash

#获取要监控的本地服务器IP地址

IP=`ifconfig $4 | grep "inet addr" | cut -f 2 -d ":" | cut -f 1 -d " "`

echo "IP地址:"$IP

 

#获取cpu总核数

cpu_num=`grep -c "model name" /proc/cpuinfo`

echo "cpu总核数:"$cpu_num

printf "\n"

 

# 1、获取CPU利用率

printf "获取cpu利用率\n"

printf "cpu_user\tcpu_system\tcpu_idle\tcpu_iowait\ttime\n"

 

record_num=`grep Cpu $1| wc -l`

for((i=1;i<=$record_num;i++))

do

#获取时间

time=`grep "load average" $1 | sed -n ${i}"p" | awk '{print $3}'`

#echo "当前时间"$time

 

#获取用户空间占用CPU百分比

cpu_user=`grep Cpu $1 | awk '{print $2}' |sed -n ${i}"p"| cut -f 1 -d "%"`

#echo "用户空间占用CPU百分比:"$cpu_user

 

#获取内核空间占用CPU百分比

cpu_system=`grep Cpu $1 | awk '{print $3}' |sed -n ${i}"p" | cut -f 1 -d "%"`

#echo "内核空间占用CPU百分比:"$cpu_system

 

#获取空闲CPU百分比

cpu_idle=`grep Cpu $1 | awk '{print $5}' |sed -n ${i}"p" | cut -f 1 -d "%"`

#echo "空闲CPU百分比:"$cpu_idle

 

#获取等待输入输出占CPU百分比

cpu_iowait=`grep Cpu $1 | awk '{print $3}' |sed -n ${i}"p" | cut -f 1 -d "%"`

#echo "等待输入输出占CPU百分比:"$cpu_iowait

#echo $cpu_user " "$cpu_system " " $cpu_idle " " $cpu_iowait

printf "%.1f\t\t%.1f\t\t%.1f\t\t%.1f\t\t%s\n" $cpu_user $cpu_system $cpu_idle $cpu_iowait $time

done

printf "\n"

 

#2、获取CPU上下文切换和中断次数

printf "获取cpu中断和上下文切换次数\n"

printf "cpu_interrupt\tcpu_context_switch\ttime\n"

 

record_num=`cat $2 | wc -l`

for((i=3;i<=$record_num;i++))

do

#获取时间

time=`sed -n ${i}"p" $2 | awk '{print $19}'`

#echo "当前时间"$time

 

#获取CPU中断次数

cpu_interrupt=`sed -n ${i}"p" $2 | awk '{print $11}'`

#echo "CPU中断次数:"$cpu_interrupt

 

#获取CPU上下文切换次数

cpu_context_switch=`sed -n ${i}"p" $2 | awk '{print $12}'`

#echo "CPU上下文切换次数:"$cpu_context_switch

 

printf "%d\t\t%d\t\t\t%s\n" $cpu_interrupt $cpu_context_switch $time

done

printf "\n"

 

#3、获取CPU负载信息

printf "\n获取CPU负载信息-1551分钟前到现在的负载均值\n"

printf "cpu_load_15min\tcpu_load_5min\tcpu_load_1min\ttime\n"

 

record_num=`grep "load average" $1 | wc -l`

for((i=1;i<=$record_num;i++))

do

#获取时间

time=`grep "load average" $1 | sed -n ${i}"p" | awk '{print $3}'`

#echo "当前时间"$time

 

#获取CPU15分钟前到现在的负载平均值

cpu_load_15min=`grep "load average" $1 | sed -n ${i}"p" | awk '{print $12}' | cut -f 1 -d ','`

#echo "CPU 15分钟前到现在的负载平均值:"$cpu_load_15min

 

#获取CPU5分钟前到现在的负载平均值

cpu_load_5min=`grep "load average" $1 | sed -n ${i}"p" | awk '{print $11}' | cut -f 1 -d ','`

#echo "CPU 5分钟前到现在的负载平均值:"$cpu_load_5min

 

#获取CPU1分钟前到现在的负载平均值

cpu_load_1min=`grep "load average"  $1 | sed -n ${i}"p" | awk '{print $10}' | cut -f 1 -d ','`

#echo "CPU 1分钟前到现在的负载平均值:"$cpu_load_1min

 

printf "%.2f\t\t%.2f\t\t%.2f\t\t%s\n" $cpu_load_15min $cpu_load_5min $cpu_load_1min $time

done

 

printf "获取CPU负载信息-cpu队列长度\n"

printf "cpu_task_length\ttime\n"

 

record_num=`cat $2 | wc -l`

for((i=3;i<=$record_num;i++))

do

#获取时间

time=`sed -n ${i}"p" $2 | awk '{print $19}'`

#echo "当前时间"$time

 

#获取任务队列(就绪状态等待的进程数)

cpu_task_length=`sed -n ${i}"p" $2 | awk '{print $1}'`

#echo "CPU任务队列长度:"$cpu_task_length

 

printf "%d\t\t%s\n" $cpu_task_length $time

done

printf "\n"

 

#4、获取内存信息

printf "获取内存信息\n"

printf "mem_total\tmem_sys_used\tmem_sys_free\tmem_user_used\tmem_user_free\tmem_buffers\tmem_swap_total\tmem_swap_used\tmem_swap_free\tmem_swap_cached\ttime\n"

 

record_num=`grep Mem $1 | wc -l`

for((i=1;i<=$record_num;i++))

do

#获取时间

time=`grep "load average" $1 | sed -n ${i}"p" | awk '{print $3}'`

#echo "当前时间"$time

 

#获取物理内存总量

mem_total=`grep Mem $1 | sed -n ${i}"p" | awk '{print $2}' | cut -f 1 -d 'k'`

#echo "物理内存总量:"$mem_total

 

#获取操作系统已使用内存总量

mem_sys_used=`grep Mem $1 | sed -n ${i}"p" | awk '{print $4}' | cut -f 1 -d 'k'`

#echo "已使用内存总量(操作系统)"$mem_sys_used

 

#获取操作系统未使用内存总量

mem_sys_free=`grep Mem $1 | sed -n ${i}"p" | awk '{print $6}' | cut -f 1 -d 'k'`

#echo "剩余内存总量(操作系统)"$mem_sys_free

 

#获取应用程序已使用的内存总量

mem_buffers=`grep Mem $1 | sed -n ${i}"p" | awk '{print $8}' | cut -f 1 -d 'k'`

mem_swap_cached=`grep Swap $1 | sed -n ${i}"p" | awk '{print $8}' | cut -f 1 -d 'k'`

mem_user_used=$(($mem_sys_used-$mem_buffers-$mem_swap_cached))

#echo "已使用内存总量(应用程序)"$mem_user_used

 

#获取应用程序未使用内存总量

mem_user_free=$(($mem_sys_free+$mem_buffers+$mem_swap_cached))

#echo "剩余内存总量(应用程序)"$mem_user_free

 

#获取交换分区总大小

mem_swap_total=`grep Swap $1 | sed -n ${i}"p" | awk '{print $2}' | cut -f 1 -d 'k'`

#echo "交换分区总大小:"$mem_swap_total

 

#获取已使用交换分区大小

mem_swap_used=`grep Swap $1 | sed -n ${i}"p" | awk '{print $4}' | cut -f 1 -d 'k'`

#echo "已使用交换分区大小:"$mem_swap_used

 

#获取剩余交换分区大小

mem_swap_free=`grep Swap $1 | sed -n ${i}"p" | awk '{print $6}' | cut -f 1 -d 'k'`

#echo "剩余交换分区大小:"$mem_swap_free

 

printf "%d\t\t%d\t\t%d\t\t%d\t\t%d\t\t%d\t\t%d\t\t%d\t\t%d\t\t%d\t\t%s\n" $mem_total $mem_sys_used $mem_sys_free $mem_user_used $mem_user_free $mem_buffers $mem_swap_total $mem_swap_used $mem_swap_free $mem_swap_cached $time

done

printf "\n"

 

#5、获取磁盘I/O统计信息

echo "指定设备(/dev/sda1)的统计信息"

printf "disk_sda_rs\tdisk_sda_ws\tdisk_sda_avgqu_sz\tdisk_sda_await\tdisk_sda_svctn\tdisk_sda_util\ttime\n"

 

record_num=`grep sda $3 | wc -l`

for((i=1;i<=$record_num;i++))

do

#获取时间

time=`grep "load average" $1 | sed -n ${i}"p" | awk '{print $3}'`

#echo "当前时间"$time

 

#每秒向设备发起的读请求次数

disk_sda_rs=`grep sda $3 | sed -n ${i}"p" | awk '{print $4}'`

#echo "每秒向设备发起的读请求次数:"$disk_sda_rs

 

#每秒向设备发起的写请求次数

disk_sda_ws=`grep sda $3 | sed -n ${i}"p" | awk '{print $5}'`

#echo "每秒向设备发起的写请求次数:"$disk_sda_ws

 

#向设备发起的I/O请求队列长度平均值

disk_sda_avgqu_sz=`grep sda $3 | sed -n ${i}"p" | awk '{print $9}'`

#echo "向设备发起的I/O请求队列长度平均值"$disk_sda_avgqu_sz

 

#每次向设备发起的I/O请求平均时间

disk_sda_await=`grep sda $3 | sed -n ${i}"p" | awk '{print $10}'`

#echo "每次向设备发起的I/O请求平均时间:"$disk_sda_await

 

#向设备发起的服务时间均值

disk_sda_svctm=`grep sda $3 | sed -n ${i}"p" | awk '{print $11}'`

#echo "向设备发起的服务时间均值:"$disk_sda_svctm

 

#向设备发起I/O请求的CPU时间百分占比

disk_sda_util=`grep sda $3 | sed -n ${i}"p"| awk '{print $12}'`

#echo "向设备发起I/O请求的CPU时间百分占比:"$disk_sda_util

 

printf "%.2f\t\t%.2f\t\t%.2f\t\t\t%.2f\t\t%.2f\t\t%.2f\t\t%s\n" $disk_sda_rs $disk_sda_ws $disk_sda_avgqu_sz $disk_sda_await $disk_sda_svctm $disk_sda_util $time

done

printf "\n"

 

#6、获取某个进程的CPU、内存使用信息

printf "获取某个进程的CPU、内存使用信息\n"

printf "proc_id\tproc_cpu\tproc_mem\tproc_vsz\ttime\n"

 

record_num=`grep $5 $1 | wc -l`

for((i=1;i<=$record_num;i++))

do

#获取时间

time=`grep "load average" $1 | sed -n ${i}"p" | awk '{print $3}'`

#echo "当前时间:"$time

 

#获取进程ID

proc_id=`grep $5 $1 | sed -n ${i}"p" | awk '{print $1}'`

#echo "进程ID"$proc_id

 

#获取进程CPU使用率

proc_cpu=`grep $5 $1 | sed -n ${i}"p" | awk '{print $3}'`

#echo "进程CPU使用率:"$proc_cpu

 

#获取进程内存使用率

proc_mem=`grep $5 $1 | sed -n ${i}"p" | awk '{print $4}'`

#echo "进程内存使用率:"$proc_mem

 

#获取进程虚拟内存总量

proc_vsz=`grep $5 $1 | sed -n ${i}"p" | awk '{print $5}'`

#echo "进程使用的虚拟内存总量:"$proc_vsz

 

printf "%d\t\t%.1f\t\t%.1f\t\t%d\t\t%s\n" $proc_id $proc_cpu $proc_mem $proc_vsz $time

done

 

注:获取磁盘I/O统计信息,这里收集的时间数据是大致时间-top取样时的时间,非精确时间,有可能存在较大误差

 

 

效果如下:

 




 

注:针对不同类型、版本的操作系统,以上脚本可能需要做适当修改才可适用

附脚本下载地址:Linux 性能监控之CPU&内存&I/O监控Shell脚本2.zip

 

 

目录
相关文章
|
1月前
|
缓存 监控 Linux
|
1月前
|
缓存 Linux
揭秘Linux内核:探索CPU拓扑结构
【10月更文挑战第26天】
52 1
|
1月前
|
缓存 运维 Linux
深入探索Linux内核:CPU拓扑结构探测
【10月更文挑战第18天】在现代计算机系统中,CPU的拓扑结构对性能优化和资源管理至关重要。了解CPU的核心、线程、NUMA节点等信息,可以帮助开发者和系统管理员更好地调优应用程序和系统配置。本文将深入探讨如何在Linux内核中探测CPU拓扑结构,介绍相关工具和方法。
32 0
|
1月前
|
运维 监控 Shell
深入理解Linux系统下的Shell脚本编程
【10月更文挑战第24天】本文将深入浅出地介绍Linux系统中Shell脚本的基础知识和实用技巧,帮助读者从零开始学习编写Shell脚本。通过本文的学习,你将能够掌握Shell脚本的基本语法、变量使用、流程控制以及函数定义等核心概念,并学会如何将这些知识应用于实际问题解决中。文章还将展示几个实用的Shell脚本例子,以加深对知识点的理解和应用。无论你是运维人员还是软件开发者,这篇文章都将为你提供强大的Linux自动化工具。
|
2月前
|
监控 安全 Linux
使用NRPE和Nagios监控Linux系统资源的方法
通过遵循以上步骤,可以有效地使用NRPE和Nagios监控Linux系统资源,确保系统运行稳定,并及时响应任何潜在的问题。这种方法提供了高度的可定制性和灵活性,适用于从小型环境到大型分布式系统的各种监控需求。
54 2
|
3月前
|
人工智能 监控 Shell
常用的 55 个 Linux Shell 脚本(包括基础案例、文件操作、实用工具、图形化、sed、gawk)
这篇文章提供了55个常用的Linux Shell脚本实例,涵盖基础案例、文件操作、实用工具、图形化界面及sed、gawk的使用。
764 2
|
2月前
|
存储 Shell Linux
【Linux】shell基础,shell脚本
Shell脚本是Linux系统管理和自动化任务的重要工具,掌握其基础及进阶用法能显著提升工作效率。从简单的命令序列到复杂的逻辑控制和功能封装,Shell脚本展现了强大的灵活性和实用性。不断实践和探索,将使您更加熟练地运用Shell脚本解决各种实际问题
36 0
|
3月前
|
Shell Linux 开发工具
linux shell 脚本调试技巧
【9月更文挑战第3天】在Linux中调试shell脚本可采用多种技巧:使用`-x`选项显示每行命令及变量扩展情况;通过`read`或`trap`设置断点;利用`echo`检查变量值,`set`显示所有变量;检查退出状态码 `$?` 进行错误处理;使用`bashdb`等调试工具实现更复杂调试功能。
|
3月前
|
存储 监控 Linux
监控Linux服务器
详细介绍了如何监控Linux服务器,包括监控CPU、内存、磁盘存储和带宽的使用情况,以及使用各种系统监控工具如vmstat、iostat、sar、top和dstat来分析系统性能,并推荐了一些开源监控系统。
61 0
监控Linux服务器