Linux内核新特性年终大盘点-安卓杀后台现象减少的背后功臣MGLRU算法简介

本文涉及的产品
可观测可视化 Grafana 版,10个用户账号 1个月
可观测监控 Prometheus 版,每月50GB免费额度
注册配置 MSE Nacos/ZooKeeper,118元/月
简介: MGLRU是一种新型内存管理算法,它的出现是为了弥补传统LRU(Least Recently Used)和LFU(Least Frequently Used)算法在缓存替换选择上的不足,LRU和LFU的共同缺点就是在做内存页面替换时,只考虑内存页面在最近一段时间内被访问的次数和最后一次的访问时间,但是一个页面的最近访问次数少或者最近一次的访问时间较早,可能仅仅是因为这个内存页面新近才被创建,属于刚刚完成初始化的年代代页面,它的频繁访问往往会出现在初始化之后的一段时间里,那么这时候就把这种年轻代的页面迁移出去

一、概述

MGLRU是一种新型内存管理算法,它的出现是为了弥补传统LRU(Least Recently Used)和LFU(Least Frequently Used)算法在缓存替换选择上的不足,LRU和LFU的共同缺点就是在做内存页面替换时,只考虑内存页面在最近一段时间内被访问的次数和最后一次的访问时间,但是一个页面的最近访问次数少或者最近一次的访问时间较早,可能仅仅是因为这个内存页面新近才被创建,属于刚刚完成初始化的年代代页面,它的频繁访问往往会出现在初始化之后的一段时间里,那么这时候就把这种年轻代的页面迁移出去,一般都会造成不必要的内存消耗与进程卡顿,为了解决这一问题MRLRU算法Linux6版本内核中逐步引入用于Linux内核的虚拟内存子系统。

MGLRU在Android系统中的应用旨在改进应用程序的启动时间和整体性能,特别是通过更有效地管理和回收内存来缓解“杀后台”问题。在Android 13及之后版本中,Google开始将MGLRU整合到Android系统中,以改善内存分配和回收策略。该算法通过引入多代LRU列表组织内存页,根据页面的使用频率和活跃程度将其划分到不同的世代,从而使得操作系统能够更快地识别出哪些内存页是较旧且可能不再需要的,进而提升内存利用率和App启动速度。

到了Android 14,谷歌进一步默认启用Linux内核的MGLRU功能,这一举措预期可以减少应用程序的启动时间,并有助于增强用户体验,特别是在资源有限的移动设备上,有效避免因内存不足导致的应用程序被强制关闭的问题。根据谷歌在 Linux Plumbers 大会上的演示,Pixel 6 手机开启 MGLRU 后App 的总体启动时间减少了约 6.60%,总体杀后台减少 8.04%,kswapd CPU 使用减少了 54.50%,直接回收次数减少 81.10%。

二、工作原理

MGLRU结合了LRU和LFU(Least Frequently Used)算法的优点,通过引入频率信息,从而提高内存缓存命中率和性能。在多代垃圾回收或内存管理中,“年龄层次”是指将内存中的对象或者页面根据其存活时间的长短进行分层。每一层代表一个“年龄层次”,也称为“世代”。当对象或页面首次创建时,它会被放入最年轻的世代(如新生代)。随着每次垃圾回收或内存扫描过程的进行,如果对象或页面仍然存活,则会将其晋升到更老的一个世代。

Linux内核的内存管理中:

1. 新创建的对象首先被分配到新生代空间。

2. 如果对象经过一次垃圾回收后仍存在,那么它会被移动到较老的世代,比如幸存者空间。

3. 经历了多次垃圾回收仍然存活的对象最终可能会被提升到老年代。

在上述提到的多代LRU机制中,页面也会按照类似的方式来划分世代。新激活或访问过的页面会被置于年轻世代,随着时间推移,如果页面没有被访问,它们会被移动到更老的世代。当需要回收内存时,系统优先从最老的世代开始查找可回收的页面,这样可以更准确地识别并释放长期未使用的内存资源。

MGLRU的工作原理相对比较容易理解,它是一种多级全局最近最少使用的策略,将内存区域划分为多个层级,每个层级遵循LRU原则,但不同层级间的调度则根据访问频率和历史行为进行动态调整,这样既保留了LRU的优点,又解决了单一LRU面对复杂访问模式时的局限性。

1.多级分层管理

MGLRU的核心在于其多层次的结构设计。例如,可以将内存空间划分为年轻代、中年代和老年代。

新访问的数据首先会被放入年轻代;

若一段时间内未被访问,则降级至中年代,再次长时间未访问则进一步降至低老年代;

反之,如果在老年代的数据又被重新访问,它会逐层晋升回年轻代。

2. 动态迁移策略

当内存需要替换页面时,MGLRU算法会按照一定顺序考虑各世代的页面。首先选择最新访问的页面,这些页面是程序运行中最常访问的,因此替换掉它们可能会导致更多的页面访问错误。然后依次考虑其他世代的页面。这样做的好处是可以提高内存的利用率和程序的运行效率。MGLRU算法通过合理地管理内存中的页面,可以使得程序更高效地运行,同时减少内存的浪费。

每当有新的数据访问请求时,算法会检查该数据所在的层级,并做出相应操作:

如果数据在当前层级的LRU队列头部,则不做任何变动。

若数据不在头部,那么将其移动到头部,并依据层级迁移规则决定是否需要提升数据层级。

当某个层级满载需要淘汰数据时,遵循LRU原则淘汰队尾的数据。

3. 效率与适应性优势

相较于传统LRU,MGLRU的优势体现在能够更好地适应多样化的访问模式。对于经常访问的数据,它可以快速响应并保持在易于访问的位置,而对于访问频率较低的数据,则避免了不必要的频繁替换。这种智能分级的方式大大提高了内存利用率和整体系统性能。

除了按照年轻、中年、老年的三代分层,其实MGLRU算法有应用更为先进的世代划分技术的可能性。如:针对应用程序复杂多变的页面需求,采用按需动态生成世代页面的方法,实现在不同需求下均能达到最佳的内存利用效果;在某些极端情况下,通过优化算法逻辑与时间参数,MGLRU算法可以扩展至更高的世代数量,进一步提高内存利用率。


三、性能优势

通过结合LRU和LFU的优点,MGLRU能够在不同负载情况下保持较好的性能。与LRU算法相比,MGLRU引入了频率信息,因此能够更准确地预测未来的缓存需求。与LFU算法相比,MGLRU能够更好地维护缓存块的关联性,避免因频繁访问而导致一些低频但重要的缓存块被替换。因此,MGLRU在缓存命中率、响应时间和系统吞吐量等方面均具有较好的表现。

除了提高内存利用率,MGLRU算法还具有很高的安全性和稳定性。在多任务并发执行的环境中,各种程序状态和数据量都可能随时发生变化,但MGLRU算法却始终能够稳定地运行,有效保障程序的正确性和效率。同时,它还具备高度的可扩展性和灵活性,可以轻松应对不同规模、类型和要求的应用程序,具有很强的应用价值。

四、总结

通过结合LRU和LFU的优点,MGLRU能够更准确地预测未来的缓存需求,从而提高缓存命中率和性能。同时,通过引入频率信息和优化策略,MGLRU能够更好地维护缓存块的关联性,适应不同负载情况下的缓存需求。在实际应用中,MGLRU可以作为内存管理的一种有效手段,提高系统的整体性能和效率。从理论上讲,MGLRU算法还能带来更加精细化和高效的内存管理,有利于延长设备电池寿命、提高响应速度和系统稳定性。

相关文章
|
15天前
|
算法 Linux 调度
深入理解Linux内核调度器:从基础到优化####
本文旨在通过剖析Linux操作系统的心脏——内核调度器,为读者揭开其高效管理CPU资源的神秘面纱。不同于传统的摘要概述,本文将直接以一段精简代码片段作为引子,展示一个简化版的任务调度逻辑,随后逐步深入,详细探讨Linux内核调度器的工作原理、关键数据结构、调度算法演变以及性能调优策略,旨在为开发者与系统管理员提供一份实用的技术指南。 ####
54 4
|
4天前
|
缓存 网络协议 Linux
深入探索Linux操作系统的内核优化策略####
本文旨在探讨Linux操作系统内核的优化方法,通过分析当前主流的几种内核优化技术,结合具体案例,阐述如何有效提升系统性能与稳定性。文章首先概述了Linux内核的基本结构,随后详细解析了内核优化的必要性及常用手段,包括编译优化、内核参数调整、内存管理优化等,最后通过实例展示了这些优化技巧在实际场景中的应用效果,为读者提供了一套实用的Linux内核优化指南。 ####
16 1
|
9天前
|
算法 Linux 开发者
Linux内核中的锁机制:保障并发控制的艺术####
本文深入探讨了Linux操作系统内核中实现的多种锁机制,包括自旋锁、互斥锁、读写锁等,旨在揭示这些同步原语如何高效地解决资源竞争问题,保证系统的稳定性和性能。通过分析不同锁机制的工作原理及应用场景,本文为开发者提供了在高并发环境下进行有效并发控制的实用指南。 ####
|
17天前
|
缓存 资源调度 安全
深入探索Linux操作系统的心脏——内核配置与优化####
本文作为一篇技术性深度解析文章,旨在引领读者踏上一场揭秘Linux内核配置与优化的奇妙之旅。不同于传统的摘要概述,本文将以实战为导向,直接跳入核心内容,探讨如何通过精细调整内核参数来提升系统性能、增强安全性及实现资源高效利用。从基础概念到高级技巧,逐步揭示那些隐藏在命令行背后的强大功能,为系统管理员和高级用户打开一扇通往极致性能与定制化体验的大门。 --- ###
47 9
|
16天前
|
缓存 负载均衡 Linux
深入理解Linux内核调度器
本文探讨了Linux操作系统核心组件之一——内核调度器的工作原理和设计哲学。不同于常规的技术文章,本摘要旨在提供一种全新的视角来审视Linux内核的调度机制,通过分析其对系统性能的影响以及在多核处理器环境下的表现,揭示调度器如何平衡公平性和效率。文章进一步讨论了完全公平调度器(CFS)的设计细节,包括它如何处理不同优先级的任务、如何进行负载均衡以及它是如何适应现代多核架构的挑战。此外,本文还简要概述了Linux调度器的未来发展方向,包括对实时任务支持的改进和对异构计算环境的适应性。
37 6
|
17天前
|
缓存 Linux 开发者
Linux内核中的并发控制机制:深入理解与应用####
【10月更文挑战第21天】 本文旨在为读者提供一个全面的指南,探讨Linux操作系统中用于实现多线程和进程间同步的关键技术——并发控制机制。通过剖析互斥锁、自旋锁、读写锁等核心概念及其在实际场景中的应用,本文将帮助开发者更好地理解和运用这些工具来构建高效且稳定的应用程序。 ####
35 5
|
17天前
|
算法 Unix Linux
深入理解Linux内核调度器:原理与优化
本文探讨了Linux操作系统的心脏——内核调度器(Scheduler)的工作原理,以及如何通过参数调整和代码优化来提高系统性能。不同于常规摘要仅概述内容,本摘要旨在激发读者对Linux内核调度机制深层次运作的兴趣,并简要介绍文章将覆盖的关键话题,如调度算法、实时性增强及节能策略等。
|
18天前
|
存储 监控 安全
Linux内核调优的艺术:从基础到高级###
本文深入探讨了Linux操作系统的心脏——内核的调优方法。文章首先概述了Linux内核的基本结构与工作原理,随后详细阐述了内核调优的重要性及基本原则。通过具体的参数调整示例(如sysctl、/proc/sys目录中的设置),文章展示了如何根据实际应用场景优化系统性能,包括提升CPU利用率、内存管理效率以及I/O性能等关键方面。最后,介绍了一些高级工具和技术,如perf、eBPF和SystemTap,用于更深层次的性能分析和问题定位。本文旨在为系统管理员和高级用户提供实用的内核调优策略,以最大化Linux系统的效率和稳定性。 ###
|
17天前
|
Java Linux Android开发
深入探索Android系统架构:从Linux内核到应用层
本文将带领读者深入了解Android操作系统的复杂架构,从其基于Linux的内核到丰富多彩的应用层。我们将探讨Android的各个关键组件,包括硬件抽象层(HAL)、运行时环境、以及核心库等,揭示它们如何协同工作以支持广泛的设备和应用。通过本文,您将对Android系统的工作原理有一个全面的认识,理解其如何平衡开放性与安全性,以及如何在多样化的设备上提供一致的用户体验。
|
17天前
|
缓存 运维 网络协议
深入Linux内核架构:操作系统的核心奥秘
深入Linux内核架构:操作系统的核心奥秘
36 2