Linux内核学习

简介: Linux内核学习

参考:

学习笔记

性能优化

  • Dool is a Python3 compatible fork of Dstat

OS Noise

Linux内核技术实战课

内核文档

  • 内核数据结构
  • 并发
  • 调度
  • 期限调度
  • 块设备
  • 内核启动参数(kernel boot parameters)

零碎知识

  • 获得内核编译过程中的某个.c文件的预处理后的文件,比如kernel/cgroup/cgroup.c
    make kernel/cgroup/cgroup.i
    类似的,可以获取对应的.s文件或者.o文件:
    make kernel/cgroup/cgroup.s 或者 make kernel/cgroup/cgroup.o
  • 驱动黑名单
  • log延迟输出

通过bmc连接服务器,有时由于log输出太快来不及抓到想要的信息,那么可以用这个方式增加log输出的时延。

boot_delay=     Milliseconds to delay each printk during boot.
                        Values larger than 10 seconds (10000) are changed to
                        no delay (0).
                        Format: integer

比如每个log输出时延迟10ms:

... boot_delay=10

内存

  • 查看系统中有哪些slab被合并了,或者称为slab alias
cd tools/vm
make
./slabinfo -a
  • 查看page的状态,系统或者进程视图
cd tools/vm
make
tools/vm/page-types.c

这个功能以来内核在/proc文件中导出的三个文件节点:fs\proc\page.c

/proc/kpagecgroup # 获取page的memcg信息
/proc/kpagecount  # 获取page_mapcount(page),前提比如是文件或者匿名页
/proc/kpageflags  # 获取page的flags,会转换为include\uapi\linux\kernel-page-flags.h中对应的标志位

Linux中的内存消耗数据

进程

  • 判断一个用户进程是不是主线程:对于主线程,task_struct的pid和tgid相等,对于其他线程,pid表示线程自己的pid,tgid表示这个线程所属的线程组的主线程的pid。线程组中所有线程的task_struct通过thread_group节点链在一起
  • linux 查看线程数的方法

IO

原子操作

常用节点

/proc

参考:

内存

/proc/iomem 和 /proc/ioport

文件:kernel/resource.c

iomem:查看当前注册的物理地址

ioport:查看当前注册的IO端口信息

相关代码

struct resource ioport_resource = {
  .name = "PCI IO",
  .start  = 0,
  .end  = IO_SPACE_LIMIT,
  .flags  = IORESOURCE_IO,
};
EXPORT_SYMBOL(ioport_resource);
 
struct resource iomem_resource = {
  .name = "PCI mem",
  .start  = 0,
  .end  = -1,
  .flags  = IORESOURCE_MEM,
};
EXPORT_SYMBOL(iomem_resource);
 
static int r_show(struct seq_file *m, void *v)
{
  struct resource *root = PDE_DATA(file_inode(m->file));
  struct resource *r = v, *p;
  unsigned long long start, end;
  int width = root->end < 0x10000 ? 4 : 8;
  int depth;
 
   /*计算子节点的缩进量*/
  for (depth = 0, p = r; depth < MAX_IORES_LEVEL; depth++, p = p->parent)
    if (p->parent == root)
      break;
 
  /* 权限检查,如果不是超级用户,那么看到的起始和结束物理地址都是0  */
  if (file_ns_capable(m->file, &init_user_ns, CAP_SYS_ADMIN)) {
    start = r->start;
    end = r->end;
  } else {
    start = end = 0;
  }
 
  seq_printf(m, "%*s%0*llx-%0*llx : %s\n",
      depth * 2, "",
      width, start,
      width, end,
      r->name ? r->name : "<BAD>");
  return 0;
}
 
static int __init ioresources_init(void)
{
  proc_create_seq_data("ioports", 0, NULL, &resource_op,
      &ioport_resource);
  proc_create_seq_data("iomem", 0, NULL, &resource_op, &iomem_resource);
  return 0;
}
__initcall(ioresources_init);

/proc/meminfo

根据/proc/meminfo了解统计主机内存使用

/sys/

/sys/kernel/debug

  • /sys/kernel/debug/kernel_page_talbes
    代码位置:arch/arm/mm/dump.c
    通过这个节点可以查看linux内核页表的映射信息,如虚拟地址范围以及地址属性。
相关文章
|
18天前
|
算法 Linux
深入探索Linux内核的内存管理机制
本文旨在为读者提供对Linux操作系统内核中内存管理机制的深入理解。通过探讨Linux内核如何高效地分配、回收和优化内存资源,我们揭示了这一复杂系统背后的原理及其对系统性能的影响。不同于常规的摘要,本文将直接进入主题,不包含背景信息或研究目的等标准部分,而是专注于技术细节和实际操作。
|
18天前
|
存储 缓存 网络协议
Linux操作系统的内核优化与性能调优####
本文深入探讨了Linux操作系统内核的优化策略与性能调优方法,旨在为系统管理员和高级用户提供一套实用的指南。通过分析内核参数调整、文件系统选择、内存管理及网络配置等关键方面,本文揭示了如何有效提升Linux系统的稳定性和运行效率。不同于常规摘要仅概述内容的做法,本摘要直接指出文章的核心价值——提供具体可行的优化措施,助力读者实现系统性能的飞跃。 ####
|
19天前
|
监控 算法 Linux
Linux内核锁机制深度剖析与实践优化####
本文作为一篇技术性文章,深入探讨了Linux操作系统内核中锁机制的工作原理、类型及其在并发控制中的应用,旨在为开发者提供关于如何有效利用这些工具来提升系统性能和稳定性的见解。不同于常规摘要的概述性质,本文将直接通过具体案例分析,展示在不同场景下选择合适的锁策略对于解决竞争条件、死锁问题的重要性,以及如何根据实际需求调整锁的粒度以达到最佳效果,为读者呈现一份实用性强的实践指南。 ####
|
19天前
|
缓存 监控 网络协议
Linux操作系统的内核优化与实践####
本文旨在探讨Linux操作系统内核的优化策略与实际应用案例,深入分析内核参数调优、编译选项配置及实时性能监控的方法。通过具体实例讲解如何根据不同应用场景调整内核设置,以提升系统性能和稳定性,为系统管理员和技术爱好者提供实用的优化指南。 ####
|
21天前
|
负载均衡 算法 Linux
深入探索Linux内核调度机制:公平与效率的平衡####
本文旨在剖析Linux操作系统内核中的进程调度机制,特别是其如何通过CFS(完全公平调度器)算法实现多任务环境下资源分配的公平性与系统响应速度之间的微妙平衡。不同于传统摘要的概览性质,本文摘要将直接聚焦于CFS的核心原理、设计目标及面临的挑战,为读者揭开Linux高效调度的秘密。 ####
32 3
|
24天前
|
负载均衡 算法 Linux
深入探索Linux内核调度器:公平与效率的平衡####
本文通过剖析Linux内核调度器的工作机制,揭示了其在多任务处理环境中如何实现时间片轮转、优先级调整及完全公平调度算法(CFS),以达到既公平又高效地分配CPU资源的目标。通过对比FIFO和RR等传统调度策略,本文展示了Linux调度器如何在复杂的计算场景下优化性能,为系统设计师和开发者提供了宝贵的设计思路。 ####
35 6
|
23天前
|
消息中间件 安全 Linux
深入探索Linux操作系统的内核机制
本文旨在为读者提供一个关于Linux操作系统内核机制的全面解析。通过探讨Linux内核的设计哲学、核心组件、以及其如何高效地管理硬件资源和系统操作,本文揭示了Linux之所以成为众多开发者和组织首选操作系统的原因。不同于常规摘要,此处我们不涉及具体代码或技术细节,而是从宏观的角度审视Linux内核的架构和功能,为对Linux感兴趣的读者提供一个高层次的理解框架。
|
25天前
|
缓存 并行计算 Linux
深入解析Linux操作系统的内核优化策略
本文旨在探讨Linux操作系统内核的优化策略,包括内核参数调整、内存管理、CPU调度以及文件系统性能提升等方面。通过对这些关键领域的分析,我们可以理解如何有效地提高Linux系统的性能和稳定性,从而为用户提供更加流畅和高效的计算体验。
29 2
|
25天前
|
缓存 网络协议 Linux
深入探索Linux操作系统的内核优化策略####
本文旨在探讨Linux操作系统内核的优化方法,通过分析当前主流的几种内核优化技术,结合具体案例,阐述如何有效提升系统性能与稳定性。文章首先概述了Linux内核的基本结构,随后详细解析了内核优化的必要性及常用手段,包括编译优化、内核参数调整、内存管理优化等,最后通过实例展示了这些优化技巧在实际场景中的应用效果,为读者提供了一套实用的Linux内核优化指南。 ####
45 1
|
25天前
|
算法 前端开发 Linux
深入理解Linux内核调度器:CFS与实时性的平衡####
本文旨在探讨Linux操作系统的核心组件之一——完全公平调度器(CFS)的工作原理,分析其在多任务处理环境中如何实现进程间的公平调度,并进一步讨论Linux对于实时性需求的支持策略。不同于传统摘要仅概述内容要点,本部分将简要预览CFS的设计哲学、核心算法以及它是如何通过红黑树数据结构来维护进程执行顺序,同时触及Linux内核为满足不同应用场景下的实时性要求而做出的权衡与优化。 ####