AI 助理
备案控制台
开发者社区 开发与运维 文章 正文

Nginx反向代理以及缓存

2017-07-31 1897
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介： 链接关于缓存环境说明环境搭建测试upstreamkeepalive健康检查参考资料1 链接个人博客: alex-my.xyzCSDN: blog.csdn.net/alex_my2 关于缓存这里使用proxy_cache来实现缓存。关于fastcgi_cache请看: http://alex-my.xyz/web

1 链接

个人博客: alex-my.xyz

CSDN: blog.csdn.net/alex_my

2 关于缓存

  • 这里使用proxy_cache来实现缓存。
  • 关于fastcgi_cache请看:
  • proxy_cache配置和fastcgi_cache配置差不多, 所以本文并没有写。
  • 使用proxy_cache后，符合条件的请求，将会直接从反向代理服务器中获取数据，不会向源服务器进行请求。
  • 可以在反向代理服务器中使用proxy_cache, 在源服务器中使用fastcgi_cache。

3 环境说明

4 环境搭建

  • 以下均在mac环境下。

  • nginx配置

    • nginx配置目录: /usr/local/etc/nginx

    • nginx.conf

      worker_processes  2;
error_log   /usr/local/var/logs/nginx/error.log debug;
pid        /usr/local/var/run/nginx.pid;
worker_rlimit_nofile 1024;

events {
    worker_connections  1024;
}


http {
    include       mime.types;
    default_type  application/octet-stream;

    log_format main '$remote_addr - $remote_user [$time_local] '
        '"$request" $status $body_bytes_sent '
        '"$http_referer" "$http_user_agent" '
        '"$http_x_forwarded_for" $host $request_time $upstream_response_time $scheme '
        '$cookie_evalogin';

    access_log  /usr/local/var/logs/nginx/access.log  main;

    sendfile        on;
    keepalive_timeout  65;
    port_in_redirect off;

    # 导入各个网站的详细配置
    include /usr/local/etc/nginx/sites-enabled/*.conf;
}
    • 通过nginx.conf最后一行导入各个服务器详细配置

    • sites-enabled/test_server_a.conf

      server {
    listen  8010;
    server_name   127.0.0.1;

    root /Users/alex/WWW/test_proxy_1.com;
    error_page 404  /404.html;

    location /{
           index index.html index.htm index.php;
           if (-e $request_filename) {
                   break;
           }
           if (!-e $request_filename) {
                   rewrite ^/(.*)$ /index.php/$1 last;
                   break;
           }
    }

    location ~ .+\.php($|/) {
       root           /Users/alex/WWW/test_proxy_1.com;
       fastcgi_index index.php;
       fastcgi_split_path_info ^(.+\.php)(.*)$;
       fastcgi_param   SCRIPT_FILENAME $document_root$fastcgi_script_name;
       fastcgi_param   PATH_INFO               $fastcgi_path_info;
       fastcgi_param   PATH_TRANSLATED $document_root$fastcgi_path_info;
       fastcgi_pass   127.0.0.1:9000;
       include        fastcgi_params;
    }
    access_log  /Users/alex/WWW/logs/test_proxy_1/access.log;
    error_log  /Users/alex/WWW/logs/test_proxy_1/error.log;
}

    • sites-enabled/test_server_b.conf

      server {
    listen  8020;
    server_name   127.0.0.1;
    root /Users/alex/WWW/test_proxy_2.com;
    error_page 404  /404.html;

    location /{
           index index.html index.htm index.php;
           if (-e $request_filename) {
                   break;
           }
           if (!-e $request_filename) {
                   rewrite ^/(.*)$ /index.php/$1 last;
                   break;
           }
    }

    location ~ .+\.php($|/) {
       root           /Users/alex/WWW/test_proxy_2.com;
       fastcgi_index index.php;
       fastcgi_split_path_info ^(.+\.php)(.*)$;
       fastcgi_param   SCRIPT_FILENAME $document_root$fastcgi_script_name;
       fastcgi_param   PATH_INFO               $fastcgi_path_info;
       fastcgi_param   PATH_TRANSLATED $document_root$fastcgi_path_info;
       fastcgi_pass   127.0.0.1:9000;
       include        fastcgi_params;
    }
    access_log  /Users/alex/WWW/logs/test_proxy_2/access.log;
    error_log  /Users/alex/WWW/logs/test_proxy_2/error.log;
}
    • 以上搭建了两个服务器做为源服务器，这两个服务器是对用户隐藏的。

    • test_proxy.conf

      upstream test_proxy {
    server 127.0.0.1:8010;
    server 127.0.0.1:8020;
}

server {
    listen       8080;
    server_name  localhost;

    location / {
        index index.php;
        proxy_pass   http://test_proxy; 

        proxy_redirect             off; 
        #后端的Web服务器可以通过X-Forwarded-For获取用户真实IP
        proxy_set_header           Host $host; 
        proxy_set_header           X-Real-IP $remote_addr; 
        proxy_set_header           X-Forwarded-For $proxy_add_x_forwarded_for; 
        client_max_body_size       10m; 
        client_body_buffer_size    128k;
        proxy_connect_timeout      300;
        proxy_send_timeout         300;
        proxy_read_timeout         300;
        proxy_buffer_size          4k;
        proxy_buffers              4 32k;
        proxy_busy_buffers_size    64k;
        proxy_temp_file_write_size 64k;
  }
}
    • 以上搭建了一个反向代理服务器，是对客户端公开的。
    • upstream里面可以是ip地址，也可以是域名。
    • 客户端通过访问该反向代理服务器，反向代理服务器向源服务器获取信息。
  • 按照配置文件，在相应的位置创建日志文件夹，网站文件夹。

  • 为了测试方便，网站只含有一个文件 index.php

    <?php
function print_message($flag, $message)
{
    echo date('Y-m-d H:i:s')."\t {$flag} \t {$message} <br>";
}

// 127.0.0.1:8010 打开这个
print_message("NAME", "A is here");
// 127.0.0.1:8020 打开这个
// print_message("NAME", "B is here");

print_message("GET", json_encode($_GET));

print_message("POST", json_encode($_POST));

5 测试

  • 运行 nginx -s reload 重载配置。
  • 浏览器中输入对外公开的反向代理服务器的地址127.0.0.1:8080。
  • 浏览器会通过轮询源服务器轮流显示A is here, B is here。

6 upstream

  • 在前面的示例中，使用了该功能实现轮询源服务器的功能, 也是默认的负载均衡配置。

    upstream test_proxy {
    server 127.0.0.1:8010;
    server 127.0.0.1:8020;
}

server {
    listen 80;
    location / {
        proxy_pass http://test_proxy;
    }
}
  • 除了轮询外，upstream还有其它的分配策略。

  • weight

    • 允许指定轮询权重，特别是当源服务器性能不同的情况下适用, 权重越高，被访问的比率也越大。
    upstream test_proxy {
    server 127.0.0.1:8010 weight=5;
    server 127.0.0.1:8020 weight=1;
}

  • ip_hash

    • 根据请求的ip地址的hash结果进行分配，这样，每个访客会访问同一个源服务器，解决session问题。
    • 不过，实际上当用户切换ip或者改变源服务器数量时，都可能使得用户访问的源服务器不同。解决session的问题需要用另外的方法。
    upstream test_proxy {
    ip_hash;
    server 127.0.0.1:8010;
    server 127.0.0.1:8020;
    server 127.0.0.1:8030;
}

  • least_conn

    • 把请求放给连接数较少的源服务器，通过比较每个源服务器的conns/weight，来选取值最小的源服务器。
    upstream test_proxy {
    least_conn;
    server 127.0.0.1;
    server 10.12.47.20;
    server 10.12.47.21;
    server 10.12.47.22 down;
    server 10.12.47.22 backup;
}
  • down: 表示该服务器不参与负载。
  • backup: 当其它服务器繁忙或者都失效的时候，就会启用这台服务器，平常不参与负载。

7 keepalive

8 健康检查

  • 反向代理将会对源服务器进行健康检查，如果源服务器返回connect refuse，time out或invalid_header，如果次数累计到max_fails，那么会认为源服务器已经挂掉，将会在fail_timeout分钟内或者全部节点够挂掉之前不会再去连接。
  • 如果在配置中有设置了proxy_next_upstream，那么可以对500，502，503，504，429也会叠加max_fails。
  • 即使在proxy_next_upstream中配置了403, 404, 即使触发了也不会叠加max_fails。
  • 当fail_timeout后或者全部节点包括备用节点都挂了，那么会将失效的节点置为有效。
  • max_fails默认为1，设置为0表示不检查。
  • fail_timeout默认为10秒。
  • 示例
upstream test_proxy {
    server 10.12.47.20 weight=5;
    server 10.12.47.21:8080 max_fails=3 fail_timeout=30s;
    server backup.alex-my.xyz  backup;
}

server {
        listen 80;
        location / {
            proxy_pass http://test_proxy;
            proxy_next_upstream http_500 http_502 http_503 http_504 http_429 error timeout invalid_header; 
        }
    }
  • 当为写请求的时候，请慎用proxy_next_upstream, 向源服务器1请求超时，会将请求分配的下一个源服务器2。这样就会触发多次处理，比如充值多次。
  • fail_timeout需要设置适当的值，当一个请求在源服务器上需要大量时间完成时，如果超过了fail_timeout,那么反向代理服务器就会请求下一个源服务器，如此反复，源服务器就容易出事了。

9 参考资料

文章标签：
应用服务中间件
nginx
PHP
索引
Web App开发
关键词：
Nginx反向代理
Nginx缓存
缓存nginx
反向代理缓存
缓存反向代理
鱼儿小猫
目录
相关文章
热爱技术的小郑
|
3月前
|
缓存 应用服务中间件 nginx
成功解决 Nginx更新静态资源无效 ，Nginx静态资源更新不及时，Nginx清除缓存
这篇文章讨论了在使用Nginx进行动静分离时遇到的静态资源更新不及时的问题。问题描述了在服务器上更新静态资源后，访问页面时页面没有显示更新的情况。文章提供了解决这个问题的方法，即清除浏览器缓存，并提供了相关参考文章链接。此外，还展示了问题复现的步骤和正常情况的预期结果。
热爱技术的小郑
404 1
成功解决 Nginx更新静态资源无效 ，Nginx静态资源更新不及时，Nginx清除缓存
jcLee95
|
3月前
|
负载均衡 网络协议 Unix
Nginx七层（应用层）反向代理：SCGI代理scgi_pass篇
Nginx七层（应用层）反向代理：SCGI代理scgi_pass篇
jcLee95
58 1
java冯坚持
|
20天前
|
负载均衡 应用服务中间件 Linux
nginx学习，看这一篇就够了：下载、安装。使用：正向代理、反向代理、负载均衡。常用命令和配置文件,很全
这篇博客文章详细介绍了Nginx的下载、安装、配置以及使用，包括正向代理、反向代理、负载均衡、动静分离等高级功能，并通过具体实例讲解了如何进行配置。
java冯坚持
89 4
nginx学习，看这一篇就够了：下载、安装。使用：正向代理、反向代理、负载均衡。常用命令和配置文件,很全
dufadayang
|
24天前
|
存储 缓存 监控
怎样根据请求头信息来配置 Nginx 的代理缓存策略？
【10月更文挑战第2天】
dufadayang
53 12
dufadayang
|
24天前
|
存储 缓存 负载均衡
Nginx代理缓存机制
【10月更文挑战第2天】
dufadayang
55 4
何雨晨
|
23天前
|
存储 缓存 NoSQL
Nginx缓存
Nginx缓存
何雨晨
26 1
shiningrise
|
27天前
|
应用服务中间件 nginx
nginx反向代理与证书设置
nginx反向代理与证书设置
shiningrise
34 3
廖文
|
26天前
|
负载均衡 算法 应用服务中间件
nginx反向代理与负载均衡
nginx反向代理与负载均衡
廖文
27 1
程序员小海绵
|
2月前
|
JavaScript Java 应用服务中间件
谷粒商城笔记+踩坑（10）——商城首页和Nginx反向代理，thymeleaf+动态展示三级分类
商城首页和Nginx反向代理，thymeleaf+动态展示三级分类
程序员小海绵
170 3
谷粒商城笔记+踩坑（10）——商城首页和Nginx反向代理，thymeleaf+动态展示三级分类
刘大猫.
|
1月前
|
JavaScript 应用服务中间件 开发工具
vue尚品汇商城项目-day07【53.nginx反向代理配置】
vue尚品汇商城项目-day07【53.nginx反向代理配置】
刘大猫.
30 4

热门文章

最新文章

  • 1
    如何优雅打印nginx header和body
  • 2
    centos6.5 nginx+php+mysql之基础环境
  • 3
    D12-Nginx-利用Referer防盗链
  • 4
    nginx的502问题
  • 5
    nginx+tomcat集群+session复制
  • 6
    nginx作为http代理 虚拟主机配置 模板
  • 7
    Nginx 平滑升级
  • 8
    前后端分离nginx配置，同时解决跨域问题
  • 9
    云原生时代，如何从 0 到 1 构建 K8s 容器平台的 LB（Nginx）负载均衡体系
  • 10
    [译]Nginx和Lua
  • 1
    【分布式技术专题】「缓存解决方案」一文带领你好好认识一下企业级别的缓存技术解决方案的运作原理和开发实战（多级缓存设计分析）
    145
  • 2
    【深入浅出Spring原理及实战】「缓存Cache开发系列」带你深入分析Spring所提供的缓存Cache功能的开发实战指南（一）
    417
  • 3
    手撸的 SpringBoot缓存系统，性能杠杠的
    50
  • 4
    【C/C++ 性能优化】提高C++程序的缓存命中率以优化性能
    879
  • 5
    HTML5 应用程序缓存
    45
  • 6
    LAMP+Varnish缓存详解（二）——单网站缓存
    37
  • 7
    LAMP+Varnish缓存详解（一）——Varnish简介
    62
  • 8
    缓存淘汰策略
    69
  • 9
    LAMP架构调优（五）——网页缓存设置
    36
  • 10
    Caffeine Cache~高性能 Java 本地缓存之王
    344

    • 相关课程

    更多
  • Nginx企业级Web服务实战
  • Linux Web服务器Nginx搭建与配置

    • 相关电子书

    更多
  • 高性能Web架构之缓存体系
  • CentOS Nginx PHP JAVA 多语言镜像使用手
  • CentOS Nginx PHP JAVA多语言镜像使用手册

    • 相关实验场景

    更多
  • 日志服务之使用Nginx模式采集日志
    • 下一篇
    阿里云无影云电脑免费试用，最长可试用3个月