Linux 配置优化 | 学习笔记

简介: 快速学习 Linux 配置优化

开发者学堂课程【NiFi 知识精讲与项目实战(第二阶段):Linux 配置优化】学习笔记,与课程紧密联系,让用户快速学习知识。

课程地址:https://developer.aliyun.com/learning/course/706/detail/12526


Linux 配置优化

内容介绍:

一、Linux 配置优化概述

二、Linux 配置优化的具体方式


一、Linux 配置优化概述

学习 Linux 的配置优化,之所以学习这个知识点是因为一般的 NiFi 服务都会在 Linux 服务器上进行运行,如果在Linux 服务器上进行运行,且需要 NiFi 保持一个比较优良的性能,就必须要对 Linux 的配置进行优化,下面提供一个典型的 Linux 的默认配置方式。


二、Linux 配置优化的具体方式

主要针对 cent OS7的优化配置。

1.最大文件的句柄

NiFi 在很多时候都需要打开大量的文件句柄,这种情况下可以通过编辑 limits.conf 文件来增加限制,可以在这个文件中增加 hard nofile 和 soft nofile 这一部分的配置项。

2.最大派生进程数

最大派生进程数主要是用来控制线程的,NiFi 可以支持多线程并发执行,这个时候就要增加 Linux 所允许的线程数量。通过编辑 limits.conf 文件在这里面修改这两个配置项。有的 Linux 版本还需要编辑20-nproc.conf 文件,如果版本是 cent OS7,最好将这两部分都进行更改。

3.可用的 TCP 套接字端口数

如果流程要求的性能比较高,就必须要配置 socket 所允许的端口数。可以使用 sudo sysctl-w net.ipv4.ip_loca1_port_range ="10000 65000"命令来进行配置。

4.设置套接字在关闭的时候保持 timed walt 的状态时间

因为需要快速的设置和拆卸套接字,不希望这些数据在系统里存留太长的时间,如果太长时间不进行释放,它们就会把线程占满,这个时候可以通过 sudo sysct -w net.ipv4.netfilter.ip_conntrack_tcp_timeout_time_wait ="1"命令来将保留时间缩短,以提升 cpu 和线程的利用率。

5.Swapping 功能的优化配置

可以在 sysctl.conf 配置文件中添加 vm.swappiness =0命令来进行优化。NiFi 存储的分区需要关闭 atime 选项,使吞吐量有一个极大的提升。可以通过编辑 etc/fstab 文件来添加配置项,这里面的分区一定要添加正确,NiFi 安装在哪个分区就要对哪个分区添加 atime 这个选项。比如说 NiFi 现在是在根文件系统中进行部署安装的,那么就要找到根文件系统,然后去编辑配置项。打开 etc/fstab 文件,在这里面找到跟系统,然后在这里面加上 no time 配置选项,NiFi 不在其他几个分区上运行,因此可以不对其他分区进行配置,只需要配置一个分区就可以。

相关文章
|
1天前
|
Oracle Java 关系型数据库
Linux环境安装配置JDK11
Linux环境安装配置JDK11
16 0
|
1天前
|
Ubuntu Linux
Linux(Ubuntu)系统临时IP以及静态IP配置(关闭、启动网卡等操作)
请注意,以上步骤是在临时基础上进行配置的。如果要永久保存静态IP地址,通常还需要修改 `/etc/network/interfaces`文件,以便在系统重启后保持配置。同时,确保备份相关配置文件以防止出现问题。
12 1
|
3天前
|
Ubuntu Linux 测试技术
Linux(32)Rockchip RK3568 Ubuntu22.04上部署 Docker: 详细配置与功能测试(下)
Linux(32)Rockchip RK3568 Ubuntu22.04上部署 Docker: 详细配置与功能测试
35 1
|
3天前
|
运维 网络协议 Linux
Linux(28) Linux双网卡配置为连接到Linux主机的PC提供外网访问
Linux(28) Linux双网卡配置为连接到Linux主机的PC提供外网访问
30 1
|
4天前
|
Ubuntu 网络协议 Linux
Linux(20) Ubuntu 20.04 网络接口自动切换路由配置
Linux(20) Ubuntu 20.04 网络接口自动切换路由配置
27 0
|
4天前
|
Linux
Linux(9)Debain EC25 quectel-CM usbnet0开机自动联网配置
Linux(9)Debain EC25 quectel-CM usbnet0开机自动联网配置
15 0
|
7天前
|
Linux 网络安全 开发工具
【GitLab私有仓库】在Linux上用Gitlab搭建自己的私有库并配置cpolar内网穿透
【GitLab私有仓库】在Linux上用Gitlab搭建自己的私有库并配置cpolar内网穿透
|
5天前
|
机器学习/深度学习 缓存 监控
linux查看CPU、内存、网络、磁盘IO命令
`Linux`系统中,使用`top`命令查看CPU状态,要查看CPU详细信息,可利用`cat /proc/cpuinfo`相关命令。`free`命令用于查看内存使用情况。网络相关命令包括`ifconfig`(查看网卡状态)、`ifdown/ifup`(禁用/启用网卡)、`netstat`(列出网络连接,如`-tuln`组合)以及`nslookup`、`ping`、`telnet`、`traceroute`等。磁盘IO方面,`iostat`(如`-k -p ALL`)显示磁盘IO统计,`iotop`(如`-o -d 1`)则用于查看磁盘IO瓶颈。
|
2天前
|
监控 Linux Windows
50个必知的Linux命令技巧,你都掌握了吗?(下)
50个必知的Linux命令技巧,你都掌握了吗?(下)