备案控制台
探索云世界
开发者社区 开发与运维 文章 正文

Squid做反向代理缓存

2017-11-27 1458
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介：

环境介绍：

主机名 角色 IP地址
squid.contoso.com squid代理服务器 192.168.49.135
image01.contoso.com 图片服务器（web） 192.168.49.139

一、准备工作

以其中一台为例：

[root@squid etc]# iptables -L

Chain INPUT (policy ACCEPT)

target     prot opt source               destination         


Chain FORWARD (policy ACCEPT)

target     prot opt source               destination         


Chain OUTPUT (policy ACCEPT)

target     prot opt source               destination         

[root@squid etc]# getenforce

Disabled

[root@squid etc]# tail -2 /etc/hosts

192.168.49.139  image01.contoso.com  image01

192.168.49.135  squid.contoso.com  squid

[root@squid etc]# crontab -l  #时间同步一定要做，不然反向代理缓存可能出现无法命中的问题

0 * * * * /usr/sbin/ntpdate   210.72.145.44 64.147.116.229 time.nist.gov

二、squid配置

继续上一篇squid的正向代理中的配置，进行相应的修改。

acl manager proto cache_object

acl localhost src 127.0.0.1/32

acl to_localhost dst 127.0.0.0/8 0.0.0.0/32

acl localnet src 10.0.0.0/8 # RFC1918 possible internal network

acl localnet src 172.16.0.0/12 # RFC1918 possible internal network

acl localnet src 192.168.0.0/16 # RFC1918 possible internal network

acl SSL_ports port 443

acl Safe_ports port 80 # http

acl Safe_ports port 21 # ftp

acl Safe_ports port 443 # https

acl Safe_ports port 70 # gopher

acl Safe_ports port 210 # wais

acl Safe_ports port 1025-65535 # unregistered ports

acl Safe_ports port 280 # http-mgmt

acl Safe_ports port 488 # gss-http

acl Safe_ports port 591 # filemaker

acl Safe_ports port 777 # multiling http

acl Safe_ports port 8001       

acl CONNECT method CONNECT


#acl qq url_regex -i ^http://.*qq.*$

#http_access deny qq

#acl qq_path urlpath_regex -i \.*qq*

#http_access deny qq_path


# 设置squid acl访问控制规则

http_access allow manager localhost

http_access deny manager

http_access deny !Safe_ports

http_access deny CONNECT !SSL_ports

http_access allow localnet

http_access deny all

icp_access allow localnet

icp_access deny all

htcp_access allow localnet

htcp_access deny all

http_port 80 accel vhost vport  #squid反向代理需要使用80端口，并设置squid支持虚拟主机模式

hierarchy_stoplist cgi-bin ?

cache_dir ufs /usr/local/squid/var/cache 100 16 256

access_log /usr/local/squid/var/logs/access.log squid

cache_log /usr/local/squid/var/logs/cache.log

cache_store_log /usr/local/squid/var/logs/store.log

refresh_pattern ^ftp: 1440 20% 10080

refresh_pattern ^gopher: 1440 0% 1440

refresh_pattern (cgi-bin|\?) 0 0% 0

refresh_pattern . 0 20% 4320

cache_mgr admin@contoso.com

# 设置squid运行的用户

cache_effective_user squid   

cache_effective_group squid

# 设置squid的可视化主机名

visible_hostname  cache1.contoso.com

#icp_port 3130  #这里需要把icp端口注释掉，因为下面的cache_peer中定义端口0作为icp端口，也就是不使用icp端口进行squid服务器间通信，如果保留3130会产生冲突，所以要么修改为0，要么注释或删掉该行

coredump_dir /usr/local/squid/var/cache


cache_mem 90 MB

cache_swap_low  90

cache_swap_high 95

maximum_object_size  8192 KB

minimum_object_size  0 KB

maximum_object_size_in_memory  4096 KB

memory_replacement_policy  lru

emulate_httpd_log  on


cache_peer image01.contoso.com  parent 80 0 no-query no-digest max-conn=32 originserver #设置对那些web服务器做反向代理

hosts_file /etc/hosts   #设置squid使用/etc/hosts文件解析域名

request_header_max_size 128 KB   #设置请求头部大小的最大值

ipcache_size 1024 

ipcache_low 90

ipcache_high 95

三、图片服务器安装httpd服务

1
2
3
4
5
6
7
8
yum -y  install  httpd
[root@image01 html] # ll
total 272
-rw-r--r-- 1 root root 193402 Jun 26  2014 lnmp.jpg
-rw-r--r-- 1 root root   7807 Jun  5  2014 mysql.png
-rw-r--r-- 1 root root  26837 Apr 24  2012 nginx.jpg
-rw-r--r-- 1 root root  43831 Dec 19  2013 php.jpg
service httpd restart

浏览器进行测试访问：

wKioL1gWvLyjtGgvAADPC9p-AIQ489.png-wh_50

四、启动squid并测试反向代理

[root@squid etc]# squid -k parse

2016/10/30 23:09:23| Processing Configuration File: /usr/local/squid/etc/squid.conf (depth 0)

2016/10/30 23:09:23| Initializing https proxy context

[root@squid etc]# squid -D

[root@squid etc]# netstat -tunlp|grep squid

tcp        0      0 0.0.0.0:80                  0.0.0.0:*                   LISTEN      1164/(squid) 

[root@squid etc]# lsof -i :80   #这里也可以说明squid服务器上是没有httpd等web服务在运行

COMMAND  PID  USER   FD   TYPE DEVICE SIZE/OFF NODE NAME

squid   1164 squid   18u  IPv4  10763      0t0  TCP *:http (LISTEN)

在浏览器中访问squid服务器，测试反正代理效果：

wKioL1gWvcKzfjvaAADPqT3-xE4861.png-wh_50

wKiom1gWveyygVRAAAC5CtnSxxs692.png-wh_50

访问成功，说明squid反向代理没有问题。

再查看一下squid访问日志：

[root@squid etc]# squid -k rotate

[root@squid ~]# >/usr/local/squid/var/logs/access.log

[root@squid ~]# tail -f /usr/local/squid/var/logs/access.log

1477885541.844      0 192.168.49.1 TCP_IMS_HIT/304 249 GET http://192.168.49.135/lnmp.jpg - NONE/- image/jpeg

1477885545.966      0 192.168.49.1 TCP_IMS_HIT/304 249 GET http://192.168.49.135/lnmp.jpg - NONE/- image/jpeg

1477885557.249      0 192.168.49.1 TCP_IMS_HIT/304 248 GET http://192.168.49.135/php.jpg - NONE/- image/jpeg

1477885565.281      5 192.168.49.1 TCP_MISS/200 27189 GET http://192.168.49.135/nginx.jpg - FIRST_UP_PARENT/image01.contoso.com image/jpeg

1477885567.835      0 192.168.49.1 TCP_IMS_HIT/304 246 GET http://192.168.49.135/nginx.jpg - NONE/- image/jpeg

1477885568.629      0 192.168.49.1 TCP_IMS_HIT/304 246 GET http://192.168.49.135/nginx.jpg - NONE/- image/jpeg

1477885708.180      2 192.168.49.1 TCP_MISS/200 8157 GET http://192.168.49.135/mysql.png - FIRST_UP_PARENT/image01.contoso.com image/png

1477885710.626      0 192.168.49.1 TCP_IMS_HIT/304 245 GET http://192.168.49.135/mysql.png - NONE/- image/png

五、squid开启离线模式

# 在squid.conf中开启offline_mode

[root@squid etc]# echo "offline_mode on" >> squid.conf

[root@squid etc]# tail -1 squid.conf

offline_mode on

# 重启squid

[root@squid etc]# killall squid

[root@squid etc]# killall squid

[root@squid etc]# killall squid

squid: no process killed

[root@squid etc]# squid -k parse

2016/10/30 23:53:30| Processing Configuration File: /usr/local/squid/etc/squid.conf (depth 0)

2016/10/30 23:53:30| Initializing https proxy context

[root@squid etc]# squid -D

[root@squid etc]# lsof -i :80

COMMAND  PID  USER   FD   TYPE DEVICE SIZE/OFF NODE NAME

squid   1230 squid   18u  IPv4  11547      0t0  TCP *:http (LISTEN)

# 关闭图片服务器的httpd服务

[root@image01 html]# service httpd stop

Stopping httpd:                                            [  OK  ]

浏览器访问图片服务器（注意清除浏览器缓存先）：

wKioL1gW2sTBDKukAABWfeXOaYM057.png-wh_50

发现图片服务器已经无法访问。

再访问squid代理服务器（也需要清理浏览器缓存）：

wKioL1gW223y2t67AAC5T66W5rg255.png-wh_50

发现squid代理服务器依然能够访问，而且即使使用Ctrl+F5进行强制刷新依然能够正常访问。

查看一下日志：

1477892930.670      0 192.168.49.1 TCP_IMS_HIT/304 249 GET http://192.168.49.135/lnmp.jpg - NONE/- image/jpeg

1477892930.905      0 192.168.49.1 TCP_IMS_HIT/304 249 GET http://192.168.49.135/lnmp.jpg - NONE/- image/jpeg

1477892931.107      0 192.168.49.1 TCP_IMS_HIT/304 249 GET http://192.168.49.135/lnmp.jpg - NONE/- image/jpeg

1477892941.516      0 192.168.49.1 TCP_IMS_HIT/304 249 GET http://192.168.49.135/lnmp.jpg - NONE/- image/jpeg

1477892941.997      0 192.168.49.1 TCP_IMS_HIT/304 249 GET http://192.168.49.135/lnmp.jpg - NONE/- image/jpeg

1477892942.196      0 192.168.49.1 TCP_IMS_HIT/304 249 GET http://192.168.49.135/lnmp.jpg - NONE/- image/jpeg

1477892942.403      0 192.168.49.1 TCP_IMS_HIT/304 249 GET http://192.168.49.135/lnmp.jpg - NONE/- image/jpeg

1477892942.584      0 192.168.49.1 TCP_IMS_HIT/304 249 GET http://192.168.49.135/lnmp.jpg - NONE/- image/jpeg

1477892942.965      0 192.168.49.1 TCP_IMS_HIT/304 249 GET http://192.168.49.135/lnmp.jpg - NONE/- image/jpeg

1477892943.139      0 192.168.49.1 TCP_IMS_HIT/304 249 GET http://192.168.49.135/lnmp.jpg - NONE/- image/jpeg

发现也都是命中的状态，说明squid的离线模式生效。离线模式虽然能够在web服务器宕机的情况下继续提供服务，但是访问的资源不是最新的，一些长时间没有变化的静态内容可以使用这种设置，如果是动态内容不建议使用该选项。



本文转自 jerry1111111 51CTO博客，原文链接：http://blog.51cto.com/jerry12356/1867620，如需转载请自行联系原作者
文章标签：
应用服务中间件
Web App开发
缓存
网络协议
关键词：
缓存反向代理
缓存squid
squid缓存
技术小阿哥
目录
相关文章
蓝易云
|
6月前
|
缓存 应用服务中间件 nginx
百度搜索：蓝易云【nginx反向代理缓存教程。】
现在，nginx已经配置了反向代理缓存。它将缓存后端服务器的响应，并在下次请求时直接提供缓存的响应，减轻后端服务器的负载并提高性能。
蓝易云
192 1
阿珊和她的猫
|
3月前
|
缓存 前端开发 安全
前端反向代理的神奇世界：加速、安全与缓存的秘密(下)
前端反向代理的神奇世界：加速、安全与缓存的秘密(下)
阿珊和她的猫
39 0
阿珊和她的猫
|
3月前
|
缓存 负载均衡 前端开发
前端反向代理的神奇世界：加速、安全与缓存的秘密(上)
前端反向代理的神奇世界：加速、安全与缓存的秘密(上)
阿珊和她的猫
40 0
前端反向代理的神奇世界：加速、安全与缓存的秘密(上)
蓝易云
|
5月前
|
缓存 Ubuntu Linux
百度搜索：蓝易云【Varnish开源HTTP反向代理缓存服务器、部署安装、测试】
通过按照上述步骤部署和配置Varnish，您可以将其作为反向代理缓存服务器来提高Web应用程序的性能和响应速度。记住，在实际部署中，您可能需要进一步调整Varnish的配置以满足您的具体需求。
蓝易云
46 2
蓝易云
|
5月前
|
缓存 Linux 开发者
百度搜索：蓝易云【Varnish开源HTTP反向代理缓存服务器、部署安装、测试。】
通过以上步骤，你可以成功部署和安装Varnish，并对Web应用程序进行测试。请根据具体需求进行适当的配置和调整，以确保Varnish能够按预期工作并提升Web应用程序的性能。
蓝易云
33 0
魏红斌
|
9月前
|
缓存 运维 网络协议
Linux巩固篇016-Linux Squid 部署代理缓存服务
纸上得来终觉浅，绝知此事要躬行
魏红斌
402 0
Linux巩固篇016-Linux Squid 部署代理缓存服务
小小工匠
|
11月前
|
缓存 应用服务中间件 nginx
重识Nginx - 11 使用ngx_http_proxy_module的proxy_cache搭建一个具备缓存功能的反向代理服务
重识Nginx - 11 使用ngx_http_proxy_module的proxy_cache搭建一个具备缓存功能的反向代理服务
小小工匠
185 0
礁之
|
缓存 Linux 网络虚拟化
Squid缓存代理服务器
Squid缓存代理服务器
礁之
434 0
Squid缓存代理服务器
iomafilfjtgvs
|
存储 缓存 安全
Web缓存服务——Squid代理服务器应用（下）
正向代理：代替客户端向服务端发送请求。 反向代理：代理服务端，将请求转发给多个服务端。
iomafilfjtgvs
179 0
iomafilfjtgvs
|
缓存 网络安全 Apache
Web缓存服务——Squid代理服务器应用（中）
正向代理：代替客户端向服务端发送请求。 反向代理：代理服务端，将请求转发给多个服务端。
iomafilfjtgvs
182 0

热门文章

最新文章

  • 1
    缓存、分布式缓存和持久化
  • 2
    在Python Web开发过程中：数据库与缓存，MySQL和NoSQL数据库的主要差异是什么？
  • 3
    【C/C++ 性能优化】提高C++程序的缓存命中率以优化性能
  • 4
    【深入浅出Spring原理及实战】「缓存Cache开发系列」带你深入分析Spring所提供的缓存Cache功能的开发实战指南（一）
  • 5
    MyBatis二级缓存解密：深入探究缓存机制与应用场景
  • 6
    使用Redis进行Java缓存策略设计
  • 7
    MySQL 查询优化：提速查询效率的13大秘籍（索引设计、查询优化、缓存策略、子查询优化以及定期表分析和优化）（中）
  • 8
    缓存策略与Apollo：优化网络请求性能
  • 9
    关于高并发下缓存失效的问题（本地锁 && 分布式锁 && Redission 详解）
  • 10
    【分布式技术专题】「缓存解决方案」一文带领你好好认识一下企业级别的缓存技术解决方案的运作原理和开发实战（多级缓存设计分析）
  • 1
    [Redis]——数据一致性，先操作数据库，还是先更新缓存？
    31
  • 2
    【工具篇】使用concurrentHashMap实现缓存工具类
    18
  • 3
    陌陌技术分享：陌陌IM在后端KV缓存架构上的技术实践
    33
  • 4
    深入探究LRU缓存机制：优化内存利用与提升性能
    138
  • 5
    【二十六】springboot整合jedis和redisson布隆过滤器处理缓存穿透
    53
  • 6
    【九】springboot整合redis实现启动服务时热点数据保存在全局和缓存
    43
  • 7
    后端开发中的缓存策略：提升应用性能的关键
    25
  • 8
    利用Redis实现高效缓存管理与加速
    53
  • 9
    本地缓存和分布式缓存区别
    38
  • 10
    一次js请求一般情况下有哪些地方会有缓存处理？
    18

    • 相关电子书

    更多
  • 基于英特尔 SSD 的虚拟机缓存解决SSD
  • 用户态高速块缓存方案
  • 高性能Web架构之缓存体系
    • 下一篇
    部署LAMP环境（Alibaba Cloud Linux 3）