二十、Linux性能优化实战学习笔记- 为什么系统的Swap变高了?

简介: swap分区已在系统安装初期已经分配了swap分区。

一、swap 案例测试

swap分区已在系统安装初期已经分配了swap分区。

[root@MiWiFi-R3L-srv opt]# lsblk
NAME            MAJ:MIN RM  SIZE RO TYPE MOUNTPOINT
sdb               8:16   0    4G  0 disk 
sr0              11:0    1  4.4G  0 rom  /run/media/root/CentOS 7 x86_64
sda               8:0    0   20G  0 disk 
├─sda2            8:2    0   19G  0 part 
│ ├─centos-swap 253:1    0    2G  0 lvm  [SWAP]
│ └─centos-root 253:0    0   17G  0 lvm  /
└─sda1            8:1    0    1G  0 part /boot

swap分区总共2GB。

[root@MiWiFi-R3L-srv opt]# free -h
              total        used        free      shared  buff/cache   available
Mem:           954M        800M         69M         13M         85M         35M
Swap:          2.0G        979M        1.0G

1、写入空设备,实际上只有磁盘的读请求

 opt]# dd if=/dev/sda2 of=/dev/null bs=1G count=2048
18+1 records in
18+1 records out
20400046080 bytes (20 GB) copied, 229.111 s, 89.0 MB/s

运行 sar 命令,查看内存各个指标的变化情况

-r 表示显示内存使用情况,-S 表示显示 Swap 使用情况

20200816215726536.png

[root@MiWiFi-R3L-srv opt]# sar -r -S 1
Linux 5.8.0-1.el7.elrepo.x86_64 (MiWiFi-R3L-srv)  08/16/2020  _x86_64_  (1 CPU)
09:34:56 AM kbmemfree kbmemused  %memused kbbuffers  kbcached  kbcommit   %commit  kbactive   kbinact   kbdirty
09:58:56 AM    351048    626552     64.09     15812    216168   3963104    128.89    121256    302304         0
09:35:11 AM kbmemfree kbmemused  %memused kbbuffers  kbcached  kbcommit   %commit  kbactive   kbinact   kbdirty
09:35:12 AM     85784    891816     91.23        40    272208   3997300    130.00    274444    415396        28
09:35:11 AM kbswpfree kbswpused  %swpused  kbswpcad   %swpcad
09:35:12 AM   1927452    169696      8.09     23276     13.72
09:35:12 AM kbmemfree kbmemused  %memused kbbuffers  kbcached  kbcommit   %commit  kbactive   kbinact   kbdirty
09:35:13 AM     85784    891816     91.23        40    272208   3997300    130.00    274452    415396        28
09:35:12 AM kbswpfree kbswpused  %swpused  kbswpcad   %swpcad
09:35:13 AM   1927452    169696      8.09     23276     13.72
09:35:13 AM kbmemfree kbmemused  %memused kbbuffers  kbcached  kbcommit   %commit  kbactive   kbinact   kbdirty
09:35:14 AM     98288    879312     89.95     55224    172936   5044044    164.05    345896    337468        28
09:35:13 AM kbswpfree kbswpused  %swpused  kbswpcad   %swpcad
09:35:14 AM   1910484    186664      8.90     21788     11.67
09:35:14 AM kbmemfree kbmemused  %memused kbbuffers  kbcached  kbcommit   %commit  kbactive   kbinact   kbdirty
09:35:15 AM     71396    906204     92.70     13540     50140   5044044    164.05    356136    357736        28
09:35:14 AM kbswpfree kbswpused  %swpused  kbswpcad   %swpcad
09:35:15 AM   1873476    223672     10.67     26264     11.74
09:35:15 AM kbmemfree kbmemused  %memused kbbuffers  kbcached  kbcommit   %commit  kbactive   kbinact   kbdirty
09:35:16 AM     48852    928748     95.00     13980     37700   5044044    164.05    367624    366716        28
09:35:15 AM kbswpfree kbswpused  %swpused  kbswpcad   %swpcad
09:35:16 AM   1749340    347808     16.58     54824     15.76
09:35:16 AM kbmemfree kbmemused  %memused kbbuffers  kbcached  kbcommit   %commit  kbactive   kbinact   kbdirty
09:35:17 AM     50932    926668     94.79      8304     47412   5044044    164.05    363732    369396         0
09:35:16 AM kbswpfree kbswpused  %swpused  kbswpcad   %swpcad
09:35:17 AM   1584348    512800     24.45     62940     12.27
09:35:17 AM kbmemfree kbmemused  %memused kbbuffers  kbcached  kbcommit   %commit  kbactive   kbinact   kbdirty
09:35:18 AM     53272    924328     94.55     14260     51760   5044044    164.05    365904    365524         0
09:35:17 AM kbswpfree kbswpused  %swpused  kbswpcad   %swpcad
09:35:18 AM   1468180    628968     29.99     50612      8.05
09:35:18 AM kbmemfree kbmemused  %memused kbbuffers  kbcached  kbcommit   %commit  kbactive   kbinact   kbdirty
09:35:19 AM     49224    928376     94.96     13172     55504   5044044    164.05    368872    365920         0
09:35:18 AM kbswpfree kbswpused  %swpused  kbswpcad   %swpcad
09:35:19 AM   1371788    725360     34.59     14420      1.99
09:35:19 AM kbmemfree kbmemused  %memused kbbuffers  kbcached  kbcommit   %commit  kbactive   kbinact   kbdirty
09:35:20 AM     48892    928708     95.00     10100     26964   5044044    164.05    367184    366388         0
09:35:19 AM kbswpfree kbswpused  %swpused  kbswpcad   %swpcad
09:35:20 AM   1239692    857456     40.89     47748      5.57
09:35:20 AM kbmemfree kbmemused  %memused kbbuffers  kbcached  kbcommit   %commit  kbactive   kbinact   kbdirty
09:35:21 AM     48876    928724     95.00     14772     54496   5044044    164.05    368136    365364         0
09:35:20 AM kbswpfree kbswpused  %swpused  kbswpcad   %swpcad
09:35:21 AM   1101684    995464     47.47     47680      4.79
09:35:21 AM kbmemfree kbmemused  %memused kbbuffers  kbcached  kbcommit   %commit  kbactive   kbinact   kbdirty
09:35:22 AM     60012    917588     93.86     12216     28456   5044044    164.05    359040    363484         0
09:35:21 AM kbswpfree kbswpused  %swpused  kbswpcad   %swpcad
09:35:22 AM   1099932    997216     47.55     54460      5.46
09:35:22 AM kbmemfree kbmemused  %memused kbbuffers  kbcached  kbcommit   %commit  kbactive   kbinact   kbdirty
09:35:23 AM     63440    914160     93.51     24132     66228   5044044    164.05    361648    357520         8
09:35:22 AM kbswpfree kbswpused  %swpused  kbswpcad   %swpcad
09:35:23 AM   1055728   1041420     49.66     47376      4.55
09:35:23 AM kbmemfree kbmemused  %memused kbbuffers  kbcached  kbcommit   %commit  kbactive   kbinact   kbdirty
09:35:24 AM     68136    909464     93.03     10888     32000   5044044    164.05    354028    360484         8
09:35:23 AM kbswpfree kbswpused  %swpused  kbswpcad   %swpcad
09:35:24 AM   1099504    997644     47.57     46220      4.63
09:35:24 AM kbmemfree kbmemused  %memused kbbuffers  kbcached  kbcommit   %commit  kbactive   kbinact   kbdirty
09:35:25 AM     70392    907208     92.80      7616     32936   5044044    164.05    363100    348932         8
09:35:24 AM kbswpfree kbswpused  %swpused  kbswpcad   %swpcad
09:35:25 AM   1097724    999424     47.66     47872      4.79

主要参数解释:

kbcommit,表示当前系统负载需要的内存。它实际上是为了保证系统内存不溢出,对
需要内存的估计值。%commit,就是这个值相对总内存的百分比。
kbactive,表示活跃内存,也就是最近使用过的内存,一般不会被系统回收。
kbinact,表示非活跃内存,也就是不常访问的内存,有可能会被系统回收
注: kbcommit就是进程申请的内存之和,kbmemused还包括了buffer和cache

2、内存变化解释

总的内存使用率(%memused)在不断增长,从开始的 64% 一直长到了 95%,并且主要内存都被缓冲区(kbbuffers)占用

刚开始,剩余内存(kbmemfree)不断减少,而缓冲区(kbbuffers)则不断增大,由此可知,剩余内存不断分配给了缓冲区。


一段时间后,剩余内存已经很小,而缓冲区占用了大部分内存。这时候,Swap 的使用开始逐渐增大,缓冲区和剩余内存则只在小范围内波动。


为什么 Swap 也跟着升高了呢?直观来说,缓冲区占了系统绝大部分内存,还属于可回收内存,内存不够用时,不应该先回收缓冲区


观察/proc/zoneinfo


# -d 表示高亮变化的字段

# -A 表示仅显示 Normal 行以及之后的 15 行输出

$ watch -d grep -A 15 'Normal' /proc/zoneinfo
Node 0, zone Normal
pages free 21328
min 14896
low 18620
high 22344
spanned 1835008
present 1835008
managed 1796710
protection: (0, 0, 0, 0, 0)
nr_free_pages 21328
nr_zone_inactive_anon 79776
nr_zone_active_anon 206854
nr_zone_inactive_file 918561
nr_zone_active_file 496695
nr_zone_unevictable 2251
nr_zone_write_pending 0

将Nornmal 换成DMA 也可监控到DMA区域的内存分配情况。


剩余内存(pages_free)在一个小范围内不停地波动。当它小于页低阈值(pages_low) 时,又会突然增大到一个大于页高阈值(pages_high)的值。


结合刚刚用 sar 看到的剩余内存和缓冲区的变化情况,我们可以推导出,剩余内存和缓冲区的波动变化,正是由于内存回收和缓存再次分配的循环往复。


结合图片理解更深刻。

2020081622100744.png

当剩余内存小于页低阈值时,系统会回收一些缓存和匿名内存,使剩余内存增大。其中,缓存的回收导致缓冲区减小,而匿名内存的回收导致了 Swap 的使用增大。

紧接着,由于 dd 还在继续,剩余内存又会重新分配给缓存,导致剩余内存减少,缓冲区增大。

20200816221940359.png

二、如何影响内存回收的类型

1、swappiness

cat /proc/sys/vm/swappiness
60

swappiness的值的大小对如何使用swap分区是有着很大的联系的。swappiness=0的时候表示最大限度使用物理内存,然后才是 swap空间,swappiness=100的时候表示积极的使用swap分区,并且把内存上的数据及时的搬运到swap空间里面。


这是一个相对中和的配置,所以系统会根据实际运行情况,选择合适的回收类型,比如回收不活跃的匿名页,或者不活跃的文件页。

2、Swap 换出的是哪些进程的内存?

查看进程 Swap 换出的虚拟内存大小可以在/proc/pid/status 中的 VmSwap 中查看


按 VmSwap 使用量对进程排序,输出进程名称、进程 ID 以及 SWAP 用量

 opt]# for file in /proc/*/status ; do awk '/VmSwap|Name|^Pid/{printf $2 " " $3}END{ print ""}' $file; done | sort -k 3 -n -r | head
awk: cmd. line:1: fatal: cannot open file `/proc/26704/status' for reading (No such file or directory)
klzagent 5583 81216 kB
postgres 9910 44568 kB
postgres 9904 44460 kB
postgres 10318 43472 kB
postgres 10750 43408 kB
python 63780 40876 kB
python 61114 40872 kB
python 62813 40864 kB

使用 Swap 比较多的是 postgres 进程,所以,当 postgres再次访问这些换出到磁盘的内存时,也会比较慢。

三、重新思考 "只有在内存不足时才会使用swap空间"这句话

此时再看这句话并不是完全正确的,我们平时看到的情景可能是缓存还有很多,为什么有的进程还是会使用swap空间,不应该是回收缓冲区内存来使用吗?


1、swap非内存不足使用场景

大文件拷贝这类场景下,系统还是会用 Swap 机制来回收匿名内存,而不仅仅是回收占用绝大部分内存的文件页。

四、如何关闭和开启swap

1、关闭swap

 opt]# swapoff -a
[root@MiWiFi-R3L-srv opt]# free
              total        used        free      shared  buff/cache   available
Mem:         977600      737252       80728       43944      159620       67384
Swap:             0           0           0
[root@MiWiFi-R3L-srv opt]# 

2、重启swap

关闭 Swap 后再重新打开,也是一种常用的 Swap 空间清理方法

[root@MiWiFi-R3L-srv opt]# swapoff -a && swapon -a
[root@MiWiFi-R3L-srv opt]# free -h
              total        used        free      shared  buff/cache   available
Mem:           954M        721M         67M         42M        165M         59M
Swap:          2.0G          0B        2.0G
[root@MiWiFi-R3L-srv opt]# 

五、思维导图

20200816225849480.png

目录
相关文章
|
1天前
|
弹性计算 Shell Linux
|
1天前
|
Web App开发 监控 Unix
Linux 常用命令汇总(七):进程管理 & 系统权限 & 用户授权
Linux 常用命令汇总(七):进程管理 & 系统权限 & 用户授权
|
2天前
|
存储 Unix Linux
【Linux系统编程】基础指令(三)
【Linux系统编程】基础指令(三)
|
2天前
|
Linux
【Linux系统编程】基础指令(二)(下)
【Linux系统编程】基础指令(二)
|
2天前
|
Linux C语言
【Linux系统编程】基础指令(二)(上)
【Linux系统编程】基础指令(二)
|
Linux Shell Unix
带你读《Linux实战》之一:欢迎使用Linux
你正在期望学习管理Linux计算机吗?这是一个很好的选择。虽然Linux常常驻留于消费者的桌面计算机上,但它同时也是服务器领域的绝对主宰,特别是虚拟服务器和云服务器。如果你打算管理当前引人关注的服务器和网络体系架构,你将不得不围绕Linux的命令行展开学习。除了第1章之外,本书的每一章都包括一个或两个实际项目。鉴于第1章的内容主要用来填补你的Linux知识体系中可能存在的基础知识空白,因此其组织形式与其他章节有所不同。
|
1天前
|
存储 Linux Shell
linux课程第二课------命令的简单的介绍2
linux课程第二课------命令的简单的介绍2
|
1天前
|
JSON 网络协议 Linux
Linux ip命令:网络的瑞士军刀
【4月更文挑战第25天】
7 1
|
1天前
|
安全 Linux C语言
linux课程第一课------命令的简单的介绍
linux课程第一课------命令的简单的介绍
|
1天前
|
NoSQL Linux Shell
2.Docker常用命令(linux)
2.Docker常用命令(linux)

热门文章

最新文章