老男孩教育每日一题-2017年3月22日:请说明用户访问网站流程

本文涉及的产品
云解析 DNS,旗舰版 1个月
.cn 域名,1个 12个月
全局流量管理 GTM,标准版 1个月
简介:

本题目也可以说为:

描述从浏览器打开http://www.oldboyedu.com地址回车发送请求到看到页面的过程?

打开浏览器输入网址回车,到看到页面的过程

大纲:

1、用户访问网站流程框架

2DNS解析原理 *****

3tcp/ip三次握手原理 *****

4http协议原理(www服务的请求过程)请求报文细节!

5、大规模网站集群架构细节。

6http协议原理(www服务的响应过程)响应报文细节!

7tcp/ip四次挥手过程原理 *****

当我们打开浏览器输入网址回车,到看到网页页面,主要有两大步骤:第一,将域名解析成ip的过程,第二,通过ip找到网站服务器,请求打开具体的网页,服务器响应请求,客户端浏览器收到响应报文后,渲染html文档,最终得到我们看到的网页页面。

首先:说一下dns解析的流程,大家都知道,计算机之间只能通过ip相互通信,因为ip不好记,于是才使用dns服务器把域名解析为相应的ip,这里以解析www.oldboyedu.com为例,当我们输入这个网址回车的时候,浏览器会首先查询浏览器的缓存,这个缓存存活时间可能只有1分钟,如果没找到,则去查询本地的dns缓存和hosts文件,如果有www.oldboyedu.com这个域名对应的ip,则直接通过这个ip访问网站服务器。如果本地的dns缓存和hosts文件没找到,这时候就会把请求发送给,网卡配置信息里的dns服务器,默认有两个,只有当dns1不能访问时,才会使用dns2。我们也称网卡配置信息里的dnslocal dns,这时候local dns会先查询它的缓存,有没有www.oldboyedu.com相应的记录,如果有,则返回给用户,如果没有,就会访问根域名服务器,世界一共有13台根域名服务器,根域名服务器一看,是找.com的,于是会把.com的顶级域名服务器的ip发送给local dns,这时local dns再次访问.com的顶级域名服务器,.com的顶级域名服务器一看,是找一级域名oldboyedu.com的,于是再将oldboyedu.comip发送给local dns,然后继续往下找,直到找到www.oldboyedu.com的权威dnsA记录或者cname,这时候local dns会把找到的www.oldboyedu.comip发送给客户端,并记录在缓存中,这样的话,下次如果有其他的用户访问www.oldboyedu.com这个域名时,local dns的缓存中就有记录了。客户端收到local dns发送过来的ip就会通过ip去访问服务器,并将这个ip记录在dns缓存中。

以上就是dns解析的原理。

通过dns解析之后,拿到了ip,就可以通过ip向服务器发送http请求了,因为http是工作在第七层应用层,tcp是工作在第四层传输层,所以发生http请求之前,还会进行tcp的三次握手。

tcp的三次握手是:客户端首先向服务器发送一个带有SYN标识和一个seq的随机数,服务端收到后,需要给客户端回应一个ackack的值就是刚才的seq随机数的值+1,在回应包里,还包含一个SYN的标识和一个seq随机数。客户端收到服务端发过来的回应包之后,再给服务端发送一个ack,ack的值就是刚才服务端发过来的seq的值+1。上面三步完成之后,三次握手就完成了,下面就可以开始传数据了

这里就是开始发送http请求报文了

 

http的请求报文,主要包括,请求行,请求头部,空行,请求主体

而请求行又包括,请求方法,url,协议版本,请求方法主要有GETHEADPOSTPUTDELETEMOVEurl就是统一资源定位符,通过这个能在服务器上找到唯一的网页资源,协议版本,目前主流的是http1.1,开始流行的协议版本是http1.0,相对应http1.0http1.1主要从可扩展性、缓存处理、带宽优化、持久连接、host头、错误通知、消息传递、内容协商等多方面做了一些优化,以上是请求行的内容

再来说一些,请求头部,请求头部主要有媒体类型,语言类型、支持压缩、客户端类型、主机名等,媒体类型主要有文本文件,图片文件,视频文件等,语言类型就是告诉服务器客户端的接受的语言,支持压缩的话,可以节省带宽,客户端类型,会显示客户端浏览器的版本信息,操作系统信息等

空行,代表请求头部的结束,也代表着请求主体的开始

请求报文主体,只有使用POST提交表单的时候,才有

对应的,服务器收到请求报文之后,就会给出响应报文

 

响应报文主要包含起始行、响应头部、空行、响应报文主体

起始行一般包含http版本号,数字状态码,状态情况

而数字状态码,常见有以下几种

200 代表ok

301 永久跳转

403 没权限

404 没有这个文件

500 未知的错误

502 网关错误

503 服务器超载,停机维护

504 网关超时

响应头部,主要包括,服务器的web软件版本,服务器时间,长连接还是短连接,设置字符集等等

这里的空行和请求报文空行一样

在报文主体中包装载了要返回给客户端的数据

 

常见的网页资源有三种,分别是静态网页,动态网页,伪静态

静态网页就是没有后台数据库,不含phpjspasp等程序,不可交互的,开发者编写的是啥,显示的就是啥,不会有任何改变

动态网页,有后台数据库,支持更多的功能,如用户注册,登录,发帖,订单,博客等,动态网页并不独立存在于服务器上的网页文件,而是当用户请求服务器上的动态程序时,服务器解析这些程序,并调用数据库来返回一个完整的网页内容,它跟静态网页的url不同,它的url中包含?、&等特殊符号,搜索引擎收录的时候存在一定的问题。动态网页为了方便收录,常常会利用rewrite技术,把动态网页的URL伪装成静态网页URL,这就是伪静态。

 

不同的网页资源,打开的流程不一样,下面假设我们访问的是一个静态网站:

客户端会通过http协议,下载服务器上的html文件,然后去读这个html文件,根据html页面中的链接,自上而下的请求,每一个请求是一个链接,如果是图片的话,会下载边渲染,遇到js,就会加载js,当js比较内容较复杂时,浏览器就会等待,鼠标在转圈,我们称这个为js阻塞,当js下载完毕并执行完成之后,才会显示我们看到的网页。

 

当我们访问的是一个动态网页时,首先用户发出一个请求,服务器收到这个请求之后,这里假设服务器使用的是nginxnginx会把这个请求转给phpphp就会去查询数据库,根据数据库返回的值,生成一个完整的网页内容,发送给用户,用户收到之后,也是边下载边渲染,加载js,执行完毕之后,才会显示我们看到的网页

 

当服务器的访问量达到亿级PV时,这个访问的过程就更复杂了,用户的请求会先访问全国的CDN节点,通过CDN挡住全国80%的请求,当CDN上没有时,在访问服务器集群,这个集群一般都有一个4层的代理,这个4层的代理,使用软件来完成的话,就是LVS,使用硬件就是F54层的代理,后面才是7层的负载均衡,常用的是haproxy,nginx,然后才是多台web服务器,web服务器比较多的时候,就有两个问题,一个是用户数据的一致性,不能因为不同的web服务器提供服务,而导致数据不同步,这时候,我们就需要使用NFS共享存储,第二个问题是session,不能因为不同的web服务器提供服务,session找不到了,这时候,我们就需要使用memcached来存放并共享session。由于用户访问量太大,这时候的瓶颈就是数据库的压力,我们一般都是使用分布式缓存memcache,redis等,另外数据库还需要做读写分离等优化,后面的过程与访问动态网页类似

 

当浏览器加载一个完整的页面时,还需要与服务器断开连接,这个过程就是tcp的四次挥手

首先客户端会发送一个带有FIN标识和一个seq随机数,服务端收到之后,会回应一个ackack的值等于刚才的seq的值+1,发送之后,服务器会再发一个包,这个包里面也带有FIN标识和一个seq随机数,客户端收到之后,回应一个ackack的值等于刚才的seq+1,以上完成之后,服务器和客户端的4次挥手就完成了!

 

 

 

 

  • 小伙伴的解答:

 

过程蛮复杂,回答好不容易。如果是第一次访问,首先经过DNS解析,由近到远,有低到高找到oldboyeduIP地址。如果一切正常,服务器会返回要求登录的页面或者index.jsp或者php之类的页面,当然经过服务器处理后都是HTML页面,或者直接返回HTML的静态页面,这就看服务器的配置和架构,时间会长一些。以后再访问,因为有缓存么,类似dns缓存和cookie之类,速度会很快。


本文转自 李导 51CTO博客,原文链接:http://blog.51cto.com/lidao/1914578

相关实践学习
通过Ingress进行灰度发布
本场景您将运行一个简单的应用,部署一个新的应用用于新的发布,并通过Ingress能力实现灰度发布。
容器应用与集群管理
欢迎来到《容器应用与集群管理》课程,本课程是“云原生容器Clouder认证“系列中的第二阶段。课程将向您介绍与容器集群相关的概念和技术,这些概念和技术可以帮助您了解阿里云容器服务ACK/ACK Serverless的使用。同时,本课程也会向您介绍可以采取的工具、方法和可操作步骤,以帮助您了解如何基于容器服务ACK Serverless构建和管理企业级应用。 学习完本课程后,您将能够: 掌握容器集群、容器编排的基本概念 掌握Kubernetes的基础概念及核心思想 掌握阿里云容器服务ACK/ACK Serverless概念及使用方法 基于容器服务ACK Serverless搭建和管理企业级网站应用
相关文章
|
1月前
|
存储 前端开发 安全
前端小白逆袭记:如何快速掌握前端安全知识,保护用户数据安全?
【10月更文挑战第30天】作为一名前端小白,我在初入职场时对前端安全几乎一无所知。但随着项目深入,我逐渐意识到前端安全的重要性,特别是在保护用户数据方面。本文将分享我在快速掌握前端安全知识的心得和技巧,包括防范XSS、CSRF攻击、敏感信息处理、使用HTTPS协议等内容,希望能为同样在前端道路上奋斗的你提供帮助。
25 3
|
2月前
|
运维 网络安全 数据安全/隐私保护
2024高校网络安全管理运维赛题目--复现+题目+wp
2024高校网络安全管理运维赛题目--复现+题目+wp
54 2
|
5月前
|
运维
会员系统功能售卖之一之学习资源,余老师的优点PTF做的好,公众号做的好,自媒体运维的好,教学视频类网站,学习自媒体运维可以多看看别人视频,讲课不会讲可以用音频转文字看看人家是怎样讲的,可以在网站上视频
会员系统功能售卖之一之学习资源,余老师的优点PTF做的好,公众号做的好,自媒体运维的好,教学视频类网站,学习自媒体运维可以多看看别人视频,讲课不会讲可以用音频转文字看看人家是怎样讲的,可以在网站上视频
|
5月前
|
运维
好的运维,自媒体运营,好的商业模式,好的形势,良好的展示,利用一个域名,展示做好的项目,好的商业模式,星球直播课程,带项目在线地址,管理员账号:aaa 123,文章下面填上一句话可以涨粉的方法
好的运维,自媒体运营,好的商业模式,好的形势,良好的展示,利用一个域名,展示做好的项目,好的商业模式,星球直播课程,带项目在线地址,管理员账号:aaa 123,文章下面填上一句话可以涨粉的方法
体验一下CSDN博客的投票功能,附体验地址
体验一下CSDN博客的投票功能,附体验地址
计算机高职专业VB知识要点001,模拟域名抢购软件案例代码开源,热身第一课
计算机高职专业VB知识要点001,模拟域名抢购软件案例代码开源,热身第一课
145 0
计算机高职专业VB知识要点001,模拟域名抢购软件案例代码开源,热身第一课
|
云计算
高途IT&阿里云认证公开课《阿里云认证通关秘籍,助你脱离无效复习的泥沼!》开课在即!
成功报名课程,参加打卡活动,还有更多好礼相赠! • 云计算ACP备考全路径及通关秘籍 • 考试内容模块拆解及重难点精讲
高途IT&阿里云认证公开课《阿里云认证通关秘籍,助你脱离无效复习的泥沼!》开课在即!
|
运维 Linux API
金鱼哥RHCA回忆录:DO447管理用户和团队的访问--用团队有效地管理用户
第七章 管理用户和团队的访问--用团队有效地管理用户
168 0
金鱼哥RHCA回忆录:DO447管理用户和团队的访问--用团队有效地管理用户
|
数据采集 搜索推荐 机器人
程序人生 - Python爬虫要违法了吗?告诉大家:守住规则,大胆去爬
程序人生 - Python爬虫要违法了吗?告诉大家:守住规则,大胆去爬
500 0
程序人生 - Python爬虫要违法了吗?告诉大家:守住规则,大胆去爬
如何用简单的方式获取C端用户,实力派王素杰说要从B端做起|靠才华
在线教育作为o2o的巨大分支,一个曾经非常显著的优势是提供了新的传播途径。一根网线连接名师和用户,使得老师的个人能力不再局限于地域,用户的学习方式也不再局限于传统课堂。
455 0