编译squid之文件描述符

简介: 文件描述符是一个简单的整数,用以标明每一个被进程所打开的文件和socket。第一个打开的文件是0,第二个是1,依此类推。Unix操作系统通常给每个进程能打开的文件数量强加一个限制。更甚的是,unix通常有一个系统级的限制。 因为squid的工作方式,文件描述符的限制可能会极大的影响性能。当squid用完所有的文件描述符后,它不能接收用户新的连接。也就是说,用完文件描述符导致拒绝服务。直到

文件描述符是一个简单的整数,用以标明每一个被进程所打开的文件和socket。第一个打开的文件是0,第二个是1,依此类推。Unix操作系统通常给每个进程能打开的文件数量强加一个限制。更甚的是,unix通常有一个系统级的限制。

因为squid的工作方式,文件描述符的限制可能会极大的影响性能。当squid用完所有的文件描述符后,它不能接收用户新的连接。也就是说,用完文件描述符导致拒绝服务。直到一部分当前请求完成,相应的文件和socket被关闭,squid不能接收新请求。当squid发现文件描述符短缺时,它会发布警告。

在运行./configure之前,检查你的系统的文件描述符限制是否合适,能给你避免一些麻烦。大多数情况下,1024个文件描述符足够了。非常忙的cache可能需要4096或更多。在配置文件描述符限制时,推荐设置系统级限制的数量为每个进程限制的2倍。

通常在Unix shell中能找到系统的文件描述符限制。所有的C shell及其类似的shell有内建的limit命令。Bourne   shell及其类似的shell有一条叫做ulimit的命令。为了发现你的系统的文件描述符限制,试运行如下命令:

shell> ulimit -n

1024

 

如果你不能确认文件描述符限制,squid的./configure脚本能替你做到。当你运行./configure时,观察末尾这样的输出:

checking Maximum number of file descriptors we can open... 1024

假如其他的limit,ulimit,或者./configure报告这个值少于1024,你不得不在编译squid之前,花费时间来增加这个限制值的大小。否则,squid在高负载时执行性能将很低。

 

 

在编译squid之前,你必须编辑系统include文件中的一个,然后执行一些shell命令。

1.首先编辑/usr/include/bits/typesizes.h文件,改变 __FD_SETSIZE 的值:

#define   __FD_SETSIZE            1024

2.使用这个命令增加内核文件描述符的限制:

echo big-number > /proc/sys/fs/file-max     ///big-number是个大数字

3.增加进程文件描述符的限制,在你即将编译squid的同一个shell里执行:

ulimit -Hn 4096

该命令必须以root运行,仅仅运行在bash shell。不必重启机器。使用这个技术,你必须在每一次系统启动后执行上述echo和ulimit命令,或者至少在squid启动之前。假如你使用某个rc.d脚本来启动squid,那是一个放置这些命令的好地方。

关于limits.conf配置,可以详见笔者以前做的小实验,可以发现某些区别!

另外,如果想了解更多相关ulimit的使用,可以查看kumu博客对ulimit对nproc的限制的研究!

 

最后,修改了文件描述符,如果想根据业务的要求,在编译squid的时候,最新版squid-3.2.5中有如此选项“--with-filedescriptors=NUMBER”,强制squid支持更多的文件描述符!

另外,如果不加此编译选项,也可以编辑squid源码包include中的头文件,修改autoconf.h里面对DEFAULT_FD_SETSIZE的宏定义!squid-3.2.5设置的是1024!

 

目录
相关文章
|
Oracle Java 关系型数据库
Spring+Mybatis多数据源配置(二)——databaseIdProvider的使用
 在上一篇同系列的博文中,讲到配置多数据源,然后根据config.properties配置不同的数据库,进行切换。而且需要根据不同的数据库,配置不同的mybatis sql映射配置文件,如下: classpath...
2883 0
|
缓存
【已解决】npm安装依赖报错: npm ERR! cb() never called! npm ERR! This is an error with npm itself.
【已解决】npm安装依赖报错: npm ERR! cb() never called! npm ERR! This is an error with npm itself.
3504 0
|
Java 数据库 容器
J2EE的体系架构
J2EE是Java2平台企业版(Java 2 Platform,Enterprise Edition),它的核心是一组技术规范与指南,提供基于组件的方式来设计、开发、组装和部署企业应用。J2EE使用多层分布式的应用模型。
2622 0
|
人工智能 算法 测试技术
华为机试HJ52:计算字符串的距离(动态规划)
华为机试HJ52:计算字符串的距离(动态规划)
314 0
|
SQL 数据库 Python
Python3 notes
Python3 notes
|
缓存 网络安全
squid 代理服务器应用(上)
Squid 主要提供缓存加速、应用层过滤控制的功能。
squid 代理服务器应用(上)
|
网络协议 应用服务中间件 PHP
阿里云场景下获取用户真实 IP
前言 获取用户的真实 IP,对于安全业务来说非常重要 阿里云场景下一个Http 请求一般为: 用户IP --> Ddos 高防 IP ->SLB IP 背景 对于WEB服务器来说,主要是通过两种方式获取 IP 1.
5277 0
|
计算机视觉
使用索贝尔(Sobel)进行梯度运算时的数学意义和代码实现研究
对于做图像处理的工程师来说,Sobel非常熟悉且常用。但是当我们需要使用Sobel进行梯度运算,且希望得到“数学结果”(作为下一步运算的基础)而不是“图片效果”的时候,就必须深入了解Sobel的知识原理和OpenCV实现的细节(当然我们是OpenCV支持则)。
1536 0