linux、mysql、nginx、tomcat 环境下压力测试的主要调试参数

本文涉及的产品
RDS MySQL DuckDB 分析主实例,基础系列 4核8GB
RDSClaw,2核4GB
RDS DuckDB + QuickBI 企业套餐,8核32GB + QuickBI 专业版
简介:

一、linux 系统内核参数

  1. /etc/sysctl.conf文件常用参数

    net.core.netdev_max_backlog = 32768 #允许送到队列的数据包的最大数目
  2. net.core.rmem_max  = 8388608        #SOCKET读缓存区大小
  3. net.core.wmem_max  = 8388608        #SOCKET写缓存区大小
  4. net.core.somaxconn   = 32768        #系统中每一个端口最大的监听队列的长度
  5. net.core.rmem_max = 16777216        #最大socket读buffer
  6. net.ipv4.ip_local_port_range = 1024 65000 #允许系统打开的端口范围
  7. net.ipv4.tcp_fin_timeout  = 30   #TIME_WAIT2进入CLOSED的等待时间
  8. net.ipv4.tcp_keepalive_time = 1200  #TCP发送keepalive消息的时间
  9. net.ipv4.tcp_timestamps = 0
  10. net.ipv4.tcp_synack_retries = 2
  11. net.ipv4.tcp_syn_retries = 2
  12. net.ipv4.tcp_synack_retries = 1  #内核放弃连接之前发送SYN+ACK包的数量
  13. net.ipv4.tcp_syn_retries =1      #内核放弃建立连接之前发送SYN包的数量
  14. net.ipv4.tcp_max_tw_buckets =6000  #控制TIME_WAIT的最大数量timewait的数量,默认是180000。
  15. net.ipv4.tcp_tw_recycle = 1      #TCP连接中TIME-WAIT套接字的快速回收。默认为0,表示关闭
  16. net.ipv4.tcp_tw_reuse = 1       #允许将TIME-WAIT套接字重新用于新的TCP连接。默认为0,表示关闭。
  17. net.ipv4.tcp_mem = 94500000 915000000 927000000
  18. net.ipv4.tcp_max_orphans = 3276800
  19. net.ipv4.tcp_max_syn_backlog = 65536 #SYN队列的长度,默认为1024,加大队列长度为8192,可以容纳更多等待连接的网络连接数
  20. fs.file-max = 65535       #系统可打开的文件数
  21. fs.nr_open  = 65535       #fs.file-max的值不要超过fs.nr_open的值

    使sysctl.conf文件的修改生效

     sysctl -p
  22. limits.conf文件

        vi /etc/security/limits.conf

    在最末尾添加

    * soft nofile 65535  
    * hard nofile 65535

    查看是否生效

      ulimit -a

    手动修改(重启失效)

      ulimit -n  65535

二、Nginx主要调试参数

主模块参数:

worker_processes = 8           #按照CPU核心数量的设置
worker_rlimit_nofile 65535;    #Nginx进程打开文件描述符最大数量
use epoll;                     #使用epoll事件模型
worker_connections = 102400     #每个进程的最大连接数

HTTP模块参数

keepalive_timeout 60;          #keepalive超时时间。
client_body_buffer_size 64K;   #客户端请求内容的缓冲区大小。
client_header_buffer_size 8k;  #客户端请求头部的缓冲区大小,可以根据系统的分页大小来设置。
large_client_header_buffers 4 128k; 
client_max_body_size 8m;       #客户端请求内容的最大值。
open_file_cache max=204800 inactive=30s;  #打开文件的缓存,max指缓存的最大数量,inactive指缓存过期时间。
open_file_cache_valid 30s;     #检查缓存的有效时间。
open_file_cache_min_uses 1;    #inactive参数的时间内文件的最少使用次数,如果超过这个值,则保持缓存的打开状态。

三、mysql

下面的配置选项可能比较少(8G内存的MySQL),实际会超过很多人的需要,以后可以根据MySQL的运行状态进行修改。

[mysql]port                           = 3306
socket                         = /var/lib/mysql/mysql.sock
[mysqld]user                           = mysql
default_storage_engine         = InnoDB
socket                         = /var/lib/mysql/mysql.sock
pid_file                       = /var/lib/mysql/mysql.pid
skip_name_resolvekey_buffer_size                = 32M
myisam_recover                 = FORCE,BACKUP
max_allowed_packet             = 16M
max_connect_errors             = 1000000
log_bin                        = /var/lib/mysql/mysql-bin
expire_logs_days               = 7
sync_binlog                    = 0
tmp_table_size                 = 32M
max_heap_table_size            = 32M
query_cache_type               = 1
query_cache_size               = 32M
max_connections                = 500
thread_cache_size              = 50
open_files_limit               = 65535
table_definition_cache         = 1024
table_open_cache               = 2048
innodb_flush_method            = O_DIRECT
innodb_log_files_in_group      = 2
innodb_log_file_size           = 256M
innodb_flush_log_at_trx_commit = 2
innodb_file_per_table          = 1
innodb_buffer_pool_size        = 4G
log_error                      = /var/log/mysql-error.log
log_queries_not_using_indexes  = 1
slow_query_log                 = 1
slow_query_log_file            = /var/log/mysql-slow.log

四、tomcat

tomcat中server.xml配置
Connector标签下 8080 端口
修改protocol="org.apache.coyote.http11.Http11NioProtocol"
增加如下参数

connectionTimeout="20000"
processorCache="1000"
acceptCount="5000"
acceptorThreadCount="8"#根据实际cpu核数配置
maxThreads="2000"
minSpareThreads="100"
socket.appReadBufSize="1024"
socket.appWriteBufSize="1024"
socket.bufferPool="1000"

catalina.sh
tomcat启动文件,根据实际情况做调整,-XX:NewRatio用于配置老生代与新生代的比例
增加JAVA_OPTS="-server -Xms1048m -Xmx3072m -Xss1024K -XX:PermSize=64m -XX:MaxPermSize=128m -XX:NewRatio=4"

五、硬件负载

查看CPU负载情况

 top

查看内存的使用情况

 free -m

查看磁盘IO的情况

iostat -kx 2

查看网络的流量情况

sar -n DEV 2










本文转自 chengxuyonghu 51CTO博客,原文链接:http://blog.51cto.com/6226001001/1643624,如需转载请自行联系原作者
相关实践学习
每个IT人都想学的“Web应用上云经典架构”实战
本实验从Web应用上云这个最基本的、最普遍的需求出发,帮助IT从业者们通过“阿里云Web应用上云解决方案”,了解一个企业级Web应用上云的常见架构,了解如何构建一个高可用、可扩展的企业级应用架构。
MySQL数据库入门学习
本课程通过最流行的开源数据库MySQL带你了解数据库的世界。   相关的阿里云产品:云数据库RDS MySQL 版 阿里云关系型数据库RDS(Relational Database Service)是一种稳定可靠、可弹性伸缩的在线数据库服务,提供容灾、备份、恢复、迁移等方面的全套解决方案,彻底解决数据库运维的烦恼。 了解产品详情: https://www.aliyun.com/product/rds/mysql 
目录
相关文章
|
7月前
|
存储 缓存 监控
MySQL服务器配置优化:my.cnf参数调优指南
本文深入解析了MySQL核心配置参数及性能优化技巧,涵盖内存结构、调优原则、存储引擎优化、查询性能优化等内容,通过实战案例帮助读者构建高性能MySQL服务器配置,解决常见的性能瓶颈问题。
1069 0
|
11月前
|
开发框架 Java 关系型数据库
在Linux系统中安装JDK、Tomcat、MySQL以及部署J2EE后端接口
校验时,浏览器输入:http://[your_server_IP]:8080/myapp。如果你看到你的应用的欢迎页面,恭喜你,一切都已就绪。
689 17
|
11月前
|
Java 关系型数据库 MySQL
在Linux操作系统上设置JDK、Tomcat、MySQL以及J2EE后端接口的部署步骤
让我们总结一下,给你的Linux操作系统装备上最强的军队,需要先后装备好JDK的弓箭,布置好Tomcat的阵地,再把MySQL的物资原料准备好,最后部署好J2EE攻城车,那就准备好进军吧,你的Linux军团,无人可挡!
378 18
|
11月前
|
关系型数据库 MySQL Java
安装和配置JDK、Tomcat、MySQL环境,以及如何在Linux下更改后端端口。
遵循这些步骤,你可以顺利完成JDK、Tomcat、MySQL环境的安装和配置,并在Linux下更改后端端口。祝你顺利!
614 11
|
8月前
|
前端开发 Java jenkins
Jmeter压力测试工具全面教程和使用技巧。
JMeter是一个能够模拟高并发请求以检查应用程序各方面性能的工具,包括但不限于前端页面、后端服务及数据库系统。熟练使用JMeter不仅能够帮助发现性能瓶颈,还能在软件开发早期就预测系统在面对真实用户压力时的表现,确保软件质量和用户体验。在上述介绍的基础上,建议读者结合官方文档和社区最佳实践,持续深入学习和应用。
1774 10
|
10月前
|
Java 测试技术 容器
Jmeter工具使用:HTTP接口性能测试实战
希望这篇文章能够帮助你初步理解如何使用JMeter进行HTTP接口性能测试,有兴趣的话,你可以研究更多关于JMeter的内容。记住,只有理解并掌握了这些工具,你才能充分利用它们发挥其应有的价值。+
1436 23
|
监控 网络协议 Java
一些适合性能测试脚本编写和维护的工具
一些适合性能测试脚本编写和维护的工具
667 59
|
监控 测试技术 开发工具
移动端性能测试工具
移动端性能测试工具
1346 2
|
运维 测试技术 Linux
关于Stress 压力测试工具的介绍与使用
在日益复杂的计算环境中,保证系统的稳定性和性能成为了每个Linux管理员的核心任务。面对不断增长的数据量和业务需求,如何有效评估系统极限和潜在瓶颈? 压力测试工具:stress,成为了不可或缺的助手。这篇记录描述stress工具的使用方法及其在模拟真实负载中的实用性。
关于Stress 压力测试工具的介绍与使用
|
消息中间件 Kafka 测试技术
【Azure 事件中心】使用Kafka的性能测试工具(kafka-producer-perf-test)测试生产者发送消息到Azure Event Hub的性能
【Azure 事件中心】使用Kafka的性能测试工具(kafka-producer-perf-test)测试生产者发送消息到Azure Event Hub的性能
452 2