二十、Linux性能优化实战学习笔记- 为什么系统的Swap变高了?

简介: swap分区已在系统安装初期已经分配了swap分区。

一、swap 案例测试

swap分区已在系统安装初期已经分配了swap分区。

[root@MiWiFi-R3L-srv opt]# lsblk
NAME            MAJ:MIN RM  SIZE RO TYPE MOUNTPOINT
sdb               8:16   0    4G  0 disk 
sr0              11:0    1  4.4G  0 rom  /run/media/root/CentOS 7 x86_64
sda               8:0    0   20G  0 disk 
├─sda2            8:2    0   19G  0 part 
│ ├─centos-swap 253:1    0    2G  0 lvm  [SWAP]
│ └─centos-root 253:0    0   17G  0 lvm  /
└─sda1            8:1    0    1G  0 part /boot

swap分区总共2GB。

[root@MiWiFi-R3L-srv opt]# free -h
              total        used        free      shared  buff/cache   available
Mem:           954M        800M         69M         13M         85M         35M
Swap:          2.0G        979M        1.0G

1、写入空设备,实际上只有磁盘的读请求

 opt]# dd if=/dev/sda2 of=/dev/null bs=1G count=2048
18+1 records in
18+1 records out
20400046080 bytes (20 GB) copied, 229.111 s, 89.0 MB/s

运行 sar 命令,查看内存各个指标的变化情况

-r 表示显示内存使用情况,-S 表示显示 Swap 使用情况

20200816215726536.png

[root@MiWiFi-R3L-srv opt]# sar -r -S 1
Linux 5.8.0-1.el7.elrepo.x86_64 (MiWiFi-R3L-srv)  08/16/2020  _x86_64_  (1 CPU)
09:34:56 AM kbmemfree kbmemused  %memused kbbuffers  kbcached  kbcommit   %commit  kbactive   kbinact   kbdirty
09:58:56 AM    351048    626552     64.09     15812    216168   3963104    128.89    121256    302304         0
09:35:11 AM kbmemfree kbmemused  %memused kbbuffers  kbcached  kbcommit   %commit  kbactive   kbinact   kbdirty
09:35:12 AM     85784    891816     91.23        40    272208   3997300    130.00    274444    415396        28
09:35:11 AM kbswpfree kbswpused  %swpused  kbswpcad   %swpcad
09:35:12 AM   1927452    169696      8.09     23276     13.72
09:35:12 AM kbmemfree kbmemused  %memused kbbuffers  kbcached  kbcommit   %commit  kbactive   kbinact   kbdirty
09:35:13 AM     85784    891816     91.23        40    272208   3997300    130.00    274452    415396        28
09:35:12 AM kbswpfree kbswpused  %swpused  kbswpcad   %swpcad
09:35:13 AM   1927452    169696      8.09     23276     13.72
09:35:13 AM kbmemfree kbmemused  %memused kbbuffers  kbcached  kbcommit   %commit  kbactive   kbinact   kbdirty
09:35:14 AM     98288    879312     89.95     55224    172936   5044044    164.05    345896    337468        28
09:35:13 AM kbswpfree kbswpused  %swpused  kbswpcad   %swpcad
09:35:14 AM   1910484    186664      8.90     21788     11.67
09:35:14 AM kbmemfree kbmemused  %memused kbbuffers  kbcached  kbcommit   %commit  kbactive   kbinact   kbdirty
09:35:15 AM     71396    906204     92.70     13540     50140   5044044    164.05    356136    357736        28
09:35:14 AM kbswpfree kbswpused  %swpused  kbswpcad   %swpcad
09:35:15 AM   1873476    223672     10.67     26264     11.74
09:35:15 AM kbmemfree kbmemused  %memused kbbuffers  kbcached  kbcommit   %commit  kbactive   kbinact   kbdirty
09:35:16 AM     48852    928748     95.00     13980     37700   5044044    164.05    367624    366716        28
09:35:15 AM kbswpfree kbswpused  %swpused  kbswpcad   %swpcad
09:35:16 AM   1749340    347808     16.58     54824     15.76
09:35:16 AM kbmemfree kbmemused  %memused kbbuffers  kbcached  kbcommit   %commit  kbactive   kbinact   kbdirty
09:35:17 AM     50932    926668     94.79      8304     47412   5044044    164.05    363732    369396         0
09:35:16 AM kbswpfree kbswpused  %swpused  kbswpcad   %swpcad
09:35:17 AM   1584348    512800     24.45     62940     12.27
09:35:17 AM kbmemfree kbmemused  %memused kbbuffers  kbcached  kbcommit   %commit  kbactive   kbinact   kbdirty
09:35:18 AM     53272    924328     94.55     14260     51760   5044044    164.05    365904    365524         0
09:35:17 AM kbswpfree kbswpused  %swpused  kbswpcad   %swpcad
09:35:18 AM   1468180    628968     29.99     50612      8.05
09:35:18 AM kbmemfree kbmemused  %memused kbbuffers  kbcached  kbcommit   %commit  kbactive   kbinact   kbdirty
09:35:19 AM     49224    928376     94.96     13172     55504   5044044    164.05    368872    365920         0
09:35:18 AM kbswpfree kbswpused  %swpused  kbswpcad   %swpcad
09:35:19 AM   1371788    725360     34.59     14420      1.99
09:35:19 AM kbmemfree kbmemused  %memused kbbuffers  kbcached  kbcommit   %commit  kbactive   kbinact   kbdirty
09:35:20 AM     48892    928708     95.00     10100     26964   5044044    164.05    367184    366388         0
09:35:19 AM kbswpfree kbswpused  %swpused  kbswpcad   %swpcad
09:35:20 AM   1239692    857456     40.89     47748      5.57
09:35:20 AM kbmemfree kbmemused  %memused kbbuffers  kbcached  kbcommit   %commit  kbactive   kbinact   kbdirty
09:35:21 AM     48876    928724     95.00     14772     54496   5044044    164.05    368136    365364         0
09:35:20 AM kbswpfree kbswpused  %swpused  kbswpcad   %swpcad
09:35:21 AM   1101684    995464     47.47     47680      4.79
09:35:21 AM kbmemfree kbmemused  %memused kbbuffers  kbcached  kbcommit   %commit  kbactive   kbinact   kbdirty
09:35:22 AM     60012    917588     93.86     12216     28456   5044044    164.05    359040    363484         0
09:35:21 AM kbswpfree kbswpused  %swpused  kbswpcad   %swpcad
09:35:22 AM   1099932    997216     47.55     54460      5.46
09:35:22 AM kbmemfree kbmemused  %memused kbbuffers  kbcached  kbcommit   %commit  kbactive   kbinact   kbdirty
09:35:23 AM     63440    914160     93.51     24132     66228   5044044    164.05    361648    357520         8
09:35:22 AM kbswpfree kbswpused  %swpused  kbswpcad   %swpcad
09:35:23 AM   1055728   1041420     49.66     47376      4.55
09:35:23 AM kbmemfree kbmemused  %memused kbbuffers  kbcached  kbcommit   %commit  kbactive   kbinact   kbdirty
09:35:24 AM     68136    909464     93.03     10888     32000   5044044    164.05    354028    360484         8
09:35:23 AM kbswpfree kbswpused  %swpused  kbswpcad   %swpcad
09:35:24 AM   1099504    997644     47.57     46220      4.63
09:35:24 AM kbmemfree kbmemused  %memused kbbuffers  kbcached  kbcommit   %commit  kbactive   kbinact   kbdirty
09:35:25 AM     70392    907208     92.80      7616     32936   5044044    164.05    363100    348932         8
09:35:24 AM kbswpfree kbswpused  %swpused  kbswpcad   %swpcad
09:35:25 AM   1097724    999424     47.66     47872      4.79

主要参数解释:

kbcommit,表示当前系统负载需要的内存。它实际上是为了保证系统内存不溢出,对
需要内存的估计值。%commit,就是这个值相对总内存的百分比。
kbactive,表示活跃内存,也就是最近使用过的内存,一般不会被系统回收。
kbinact,表示非活跃内存,也就是不常访问的内存,有可能会被系统回收
注: kbcommit就是进程申请的内存之和,kbmemused还包括了buffer和cache

2、内存变化解释

总的内存使用率(%memused)在不断增长,从开始的 64% 一直长到了 95%,并且主要内存都被缓冲区(kbbuffers)占用

刚开始,剩余内存(kbmemfree)不断减少,而缓冲区(kbbuffers)则不断增大,由此可知,剩余内存不断分配给了缓冲区。


一段时间后,剩余内存已经很小,而缓冲区占用了大部分内存。这时候,Swap 的使用开始逐渐增大,缓冲区和剩余内存则只在小范围内波动。


为什么 Swap 也跟着升高了呢?直观来说,缓冲区占了系统绝大部分内存,还属于可回收内存,内存不够用时,不应该先回收缓冲区


观察/proc/zoneinfo


# -d 表示高亮变化的字段

# -A 表示仅显示 Normal 行以及之后的 15 行输出

$ watch -d grep -A 15 'Normal' /proc/zoneinfo
Node 0, zone Normal
pages free 21328
min 14896
low 18620
high 22344
spanned 1835008
present 1835008
managed 1796710
protection: (0, 0, 0, 0, 0)
nr_free_pages 21328
nr_zone_inactive_anon 79776
nr_zone_active_anon 206854
nr_zone_inactive_file 918561
nr_zone_active_file 496695
nr_zone_unevictable 2251
nr_zone_write_pending 0

将Nornmal 换成DMA 也可监控到DMA区域的内存分配情况。


剩余内存(pages_free)在一个小范围内不停地波动。当它小于页低阈值(pages_low) 时,又会突然增大到一个大于页高阈值(pages_high)的值。


结合刚刚用 sar 看到的剩余内存和缓冲区的变化情况,我们可以推导出,剩余内存和缓冲区的波动变化,正是由于内存回收和缓存再次分配的循环往复。


结合图片理解更深刻。

2020081622100744.png

当剩余内存小于页低阈值时,系统会回收一些缓存和匿名内存,使剩余内存增大。其中,缓存的回收导致缓冲区减小,而匿名内存的回收导致了 Swap 的使用增大。

紧接着,由于 dd 还在继续,剩余内存又会重新分配给缓存,导致剩余内存减少,缓冲区增大。

20200816221940359.png

二、如何影响内存回收的类型

1、swappiness

cat /proc/sys/vm/swappiness
60

swappiness的值的大小对如何使用swap分区是有着很大的联系的。swappiness=0的时候表示最大限度使用物理内存,然后才是 swap空间,swappiness=100的时候表示积极的使用swap分区,并且把内存上的数据及时的搬运到swap空间里面。


这是一个相对中和的配置,所以系统会根据实际运行情况,选择合适的回收类型,比如回收不活跃的匿名页,或者不活跃的文件页。

2、Swap 换出的是哪些进程的内存?

查看进程 Swap 换出的虚拟内存大小可以在/proc/pid/status 中的 VmSwap 中查看


按 VmSwap 使用量对进程排序,输出进程名称、进程 ID 以及 SWAP 用量

 opt]# for file in /proc/*/status ; do awk '/VmSwap|Name|^Pid/{printf $2 " " $3}END{ print ""}' $file; done | sort -k 3 -n -r | head
awk: cmd. line:1: fatal: cannot open file `/proc/26704/status' for reading (No such file or directory)
klzagent 5583 81216 kB
postgres 9910 44568 kB
postgres 9904 44460 kB
postgres 10318 43472 kB
postgres 10750 43408 kB
python 63780 40876 kB
python 61114 40872 kB
python 62813 40864 kB

使用 Swap 比较多的是 postgres 进程,所以,当 postgres再次访问这些换出到磁盘的内存时,也会比较慢。

三、重新思考 "只有在内存不足时才会使用swap空间"这句话

此时再看这句话并不是完全正确的,我们平时看到的情景可能是缓存还有很多,为什么有的进程还是会使用swap空间,不应该是回收缓冲区内存来使用吗?


1、swap非内存不足使用场景

大文件拷贝这类场景下,系统还是会用 Swap 机制来回收匿名内存,而不仅仅是回收占用绝大部分内存的文件页。

四、如何关闭和开启swap

1、关闭swap

 opt]# swapoff -a
[root@MiWiFi-R3L-srv opt]# free
              total        used        free      shared  buff/cache   available
Mem:         977600      737252       80728       43944      159620       67384
Swap:             0           0           0
[root@MiWiFi-R3L-srv opt]# 

2、重启swap

关闭 Swap 后再重新打开,也是一种常用的 Swap 空间清理方法

[root@MiWiFi-R3L-srv opt]# swapoff -a && swapon -a
[root@MiWiFi-R3L-srv opt]# free -h
              total        used        free      shared  buff/cache   available
Mem:           954M        721M         67M         42M        165M         59M
Swap:          2.0G          0B        2.0G
[root@MiWiFi-R3L-srv opt]# 

五、思维导图

20200816225849480.png

相关实践学习
CentOS 7迁移Anolis OS 7
龙蜥操作系统Anolis OS的体验。Anolis OS 7生态上和依赖管理上保持跟CentOS 7.x兼容,一键式迁移脚本centos2anolis.py。本文为您介绍如何通过AOMS迁移工具实现CentOS 7.x到Anolis OS 7的迁移。
目录
相关文章
|
15天前
|
Linux
在 Linux 系统中,“cd”命令用于切换当前工作目录
在 Linux 系统中,“cd”命令用于切换当前工作目录。本文详细介绍了“cd”命令的基本用法和常见技巧,包括使用“.”、“..”、“~”、绝对路径和相对路径,以及快速切换到上一次工作目录等。此外,还探讨了高级技巧,如使用通配符、结合其他命令、在脚本中使用,以及实际应用案例,帮助读者提高工作效率。
57 3
|
15天前
|
监控 安全 Linux
在 Linux 系统中,网络管理是重要任务。本文介绍了常用的网络命令及其适用场景
在 Linux 系统中,网络管理是重要任务。本文介绍了常用的网络命令及其适用场景,包括 ping(测试连通性)、traceroute(跟踪路由路径)、netstat(显示网络连接信息)、nmap(网络扫描)、ifconfig 和 ip(网络接口配置)。掌握这些命令有助于高效诊断和解决网络问题,保障网络稳定运行。
47 2
|
9天前
|
Ubuntu Linux 网络安全
linux系统ubuntu中在命令行中打开图形界面的文件夹
在Ubuntu系统中,通过命令行打开图形界面的文件夹是一个高效且实用的操作。无论是使用Nautilus、Dolphin还是Thunar,都可以根据具体桌面环境选择合适的文件管理器。通过上述命令和方法,可以简化日常工作,提高效率。同时,解决权限问题和图形界面问题也能确保操作的顺利进行。掌握这些技巧,可以使Linux操作更加便捷和灵活。
15 3
|
15天前
|
安全 网络协议 Linux
本文详细介绍了 Linux 系统中 ping 命令的使用方法和技巧,涵盖基本用法、高级用法、实际应用案例及注意事项。
本文详细介绍了 Linux 系统中 ping 命令的使用方法和技巧,涵盖基本用法、高级用法、实际应用案例及注意事项。通过掌握 ping 命令,读者可以轻松测试网络连通性、诊断网络问题并提升网络管理能力。
52 3
|
18天前
|
安全 Linux 数据安全/隐私保护
在 Linux 系统中,查找文件所有者是系统管理和安全审计的重要技能。
在 Linux 系统中,查找文件所有者是系统管理和安全审计的重要技能。本文介绍了使用 `ls -l` 和 `stat` 命令查找文件所有者的基本方法,以及通过文件路径、通配符和结合其他命令的高级技巧。还提供了实际案例分析和注意事项,帮助读者更好地掌握这一操作。
36 6
|
14天前
|
监控 Linux
如何检查 Linux 内存使用量是否耗尽?这 5 个命令堪称绝了!
本文介绍了在Linux系统中检查内存使用情况的5个常用命令:`free`、`top`、`vmstat`、`pidstat` 和 `/proc/meminfo` 文件,帮助用户准确监控内存状态,确保系统稳定运行。
103 6
|
23天前
|
缓存 监控 Linux
|
26天前
|
Linux Shell 数据安全/隐私保护
|
27天前
|
域名解析 网络协议 安全