2.3 基于reactor的HTTP服务器实现

简介: 2.3 基于reactor的HTTP服务器实现

一、基于reactor的HTTP服务器实现

在事件驱动的reactor网络设计模型一文中已经实现了基于事件驱动的reactor网络设计模型,基于此之上,实现HTTP服务器。由于reactor已经将网络层封装抽象化,因此我们可以只关注HTTP服务器的收(request)和发(respons),仅需针对conn对象进行操作。

HTTP服务器接受请求时,不必接收完所有的数据才进行数据解析,可以读一部分数据先进行解析,再解析后面的数据。可以先解析GET方法所在行的数据,里面就包含了请求资源的位置。

HTTP请求报文

二、实现按行读取

从allbuffer中的第idx个字节开始,读取一行(回车换行符为止),存放到linebuffer,返回长度

int readline(char *allbuffer, int idx, char *linebuffer){ //读取每一行,存到linebuffer
  int len = strlen(allbuffer);
  for (;idx < len;idx++){
    if (allbuffer[idx] == '\r' && allbuffer[idx+1] == '\n'){
      //遇到回车换行
      return idx+2;
    }else{
      *(linebuffer++)=allbuffer[idx]; //先*(linebuffer),再(linebuffer++)
    }
  }
  return -1;
}

三、HTTP服务器的收—实现requets函数

通过readline读取HTTP请求报文的第一行,即GET方法所在行的数据,获取里面请求资源的位置,存放到conn->resource

如:GET /index.html HTTP/1.1,资源位置是/index.html

#define HTTP_WEB_ROOT   "/home/zxm/share/senior"  //定义根目录
int zv_http_requets(zv_connect_t *conn){
  printf("http -->:\n %s \n",conn->rbuffer);
  char linebuffer[1024]={0};
  int idx = readline(conn->rbuffer, 0 ,linebuffer);
  printf("line: %s, idx: %d\n",linebuffer,idx);
  if (strstr(linebuffer, "GET")){
    int i=0;
    while (linebuffer[sizeof("GET ") +i] != ' ') i++;
    linebuffer[sizeof("GET ")+i] = '\0';
    //将HTTP_WEB_ROOT和linebuffer + sizeof("GET ")格式化为一个字符串,并将结果写入到conn->resource缓冲区中
    sprintf(conn->resource, "%s/%s", HTTP_WEB_ROOT, linebuffer + sizeof("GET "));
  }
}

四、HTTP服务器的发—实现response函数方法之一:open and read

根据conn->resource所存储的资源位置,通过open打开资源。通过stat_buf获取资源长度。通过sprintf按格式,将报文的首部行和状态行存入wbuffer。通过read将资源存入wbuffer状态行之后。关闭filefd

int zv_http_response(zv_connect_t *conn){
// open and read
  printf("resource: %s\n",conn->resource);
  int filefd = open(conn->resource,O_RDONLY);
  if (filefd == -1) return -1;
  struct stat stat_buf;
  fstat(filefd, &stat_buf);
  int len = sprintf(conn->wbuffer, 
"HTTP/1.1 200 OK\r\n"
"Accept-Ranges: bytes\r\n"
"Content-Length: %ld\r\n"
"Content-Type: text/html\r\n"
"Date: Sat, 06 Aug 2022 13:16:46 GMT\r\n\r\n",stat_buf.st_size);
  len += read(filefd, conn->wbuffer+len, BUFFER_LEN-len);
  conn->wc =len;
  close(filefd);
}

五、HTTP服务器的发—实现response函数方法之二:sendfile()

1、sendfile函数

sendfile函数是一种高效的数据传输方式,它可以在内核空间和用户空间之间直接传输数据,避免了不必要的内存拷贝。该函数的基本原理是利用操作系统提供的零拷贝技术,将一个文件描述符所对应的文件或套接字中指定长度范围内的数据传输到另一个文件描述符或套接字中。sendfile函数定义如下:

#include <sys/sendfile.h>
ssize_t sendfile(int out_fd, int in_fd, off_t *offset, size_t count);

其中,out_fd表示目标文件描述符(通常为网络套接字),in_fd表示源文件描述符(通常为磁盘文件),offset表示偏移量(可选参数,如果设置为NULL,则从当前位置开始传输),count表示要传输的数据长度。

该函数返回实际传输的字节数(成功)或-1(失败)。


2、实现

与open and read的方式不同,sendfile实现HTTP服务器应答,一般将HTTP header和body(资源)分开发送。在zv_http_response函数中,读取body资源存入conn->resource;打包header存入conn->wbuffer。在send_cb函数中分开发送。

int zv_http_response(zv_connect_t *conn){
/sendfile 
  printf("resource: %s\n",conn->resource);
  int filefd = open(conn->resource,O_RDONLY);
  if (filefd == -1) return -1;
  struct stat stat_buf;
  fstat(filefd, &stat_buf);
  close(filefd);
  int len = sprintf(conn->wbuffer, 
"HTTP/1.1 200 OK\r\n"
"Accept-Ranges: bytes\r\n"
"Content-Length: %ld\r\n"
"Content-Type: text/html\r\n"
"Date: Sat, 06 Aug 2022 13:16:46 GMT\r\n\r\n",stat_buf.st_size);
  conn->wc = len;
  conn->enable_sendfile = 1;
}
int send_cb(int fd, int event, void *arg){
  zv_reactor_t *reactor = (zv_reactor_t *)arg;
  zv_connect_t *conn = zv_connect_idx(reactor, fd);
  zv_http_response(conn);
    send(fd, conn->wbuffer, conn->wc, 0); // send header
#if 1
  // use in sendfile
  if (conn->enable_sendfile){
    int filefd = open(conn->resource,O_RDONLY);
    if (filefd == -1) return -1;
    struct stat stat_buf;
    fstat(filefd, &stat_buf);
    int ret = sendfile(fd, filefd, NULL, stat_buf.st_size); //send body
    if (ret == -1){
      printf("errno:%d\n",errno);
    }
    close(filefd);
  }
#endif 
    conn->cb = recv_cb;
  struct epoll_event ev;
  ev.events=EPOLLIN;
  ev.data.fd=fd;
  epoll_ctl(reactor->epfd, EPOLL_CTL_MOD, fd ,&ev );
}

特别的,若要实现向HTTP服务器发送图片,仅需修改报文类型

3、结果展示

准备工作:在根目录下存放html文件和image图片

命令:在Linux运行命令和端口,在网页输入IP+端口号+资源名称

image.png

六、HTTP服务器报文的key-value存储

创建key-value链式存储报文首行部

typedef struct zv_kvpair_s{
  char key[KEY_MAX_LEN];
  char value[KEY_MAX_LEN];
} zv_kvpair_t;
typedef struct zv_kvstore_s{
  struct zv_kvpair_s *table;
  int maxpairs; //最大的键值对数
  int numpairs; //当前所在的键值对
} zv_kvstore_t;

初始化和销毁key-value链式存储地址的zv_kvstore_t

int init_kvpair(zv_kvstore_t *kvstore){
  if (!kvstore) return -1;
  kvstore->table = calloc(MAX_KEY_COUNT, sizeof (zv_kvpair_t));
  if (!kvstore->table) return -2;
  kvstore->maxpairs = MAX_KEY_COUNT;
  kvstore->numpairs = 0;
}
void destory_kvpair(zv_kvstore_t *kvstore){
  if (!kvstore) return -1;
  if (!kvstore->table) {
    free(kvstore->table);
  }
}

按key-value存储报文首行部到kvstore

int put_kvpair(zv_kvstore_t *kvstore, const char *key, const char *value){
  if (!kvstore || !kvstore->table || !key || !value) return -1;
  // lock
  int idx = kvstore->numpairs ++;
  // unlock
  strncpy(kvstore->table[idx].key, key, KEY_MAX_LEN);
  strncpy(kvstore->table[idx].value, value, VALUE_MAX_LEN);
  kvstore->numpairs++;
  return 0;
}

获取kvstore中key对应的value

char *get_kvpair(zv_kvstore_t *kvstore, const char *key){
  int i = 0;
  for (i=0; i<kvstore->numpairs; i++){
    if (strcmp(kvstore->table[kvstore->numpairs].key , key) == 0){
      return kvstore->table[kvstore->numpairs].value;
    }
  }
  return NULL;
}

对应在requets中添加循环,存储报文首行部键值对。根据首行部按:分割key和value,如Host: 192.168.42.128:9999

    while (idx != -1){
      idx = readline(conn->rbuffer, 0, linebuffer);
      //比如 Host: 192.168.42.128:9999
      char *key = linebuffer;
      int i = 0;
      while (key[i++] != ':');  //i=4
      key[i] = '\0';  //将 key[i] 赋值为字符 '\0',这相当于将 linebuffer 字符串中冒号后面的内容截断(即只保留 IP 地址部分)
      char *value = linebuffer + i + 1; // 192.168.42.128:9999
      put_kvpair(linebuffer, key , value);
    }

七,代码

代码

目录
相关文章
|
3月前
|
安全
基于Reactor模式的高性能服务器之Acceptor组件(处理连接)
本节介绍了对底层 Socket 进行封装的设计与实现,通过 `Socket` 类隐藏系统调用细节,提供简洁、安全、可读性强的接口。重点包括 `Socket` 类的核心作用(管理 `sockfd_`)、成员函数的功能(如绑定地址、监听、接受连接等),以及 `Acceptor` 组件的职责:监听连接、接收新客户端连接并分发给上层处理。同时说明了 `Acceptor` 与 `EventLoop` 和 `TcpServer` 的协作关系,并展示了其成员变量和关键函数的工作机制。
77 2
|
4月前
|
C# 图形学 开发者
Unity开发中使用UnityWebRequest从HTTP服务器下载资源。
总之,UnityWebRequest就是游戏开发者手中的万能钓鱼竿,既可以获取文本数据,也能钓上图片资源,甚至是那声音的涟漪。使用UnityWebRequest的时候,你需要精心准备,比如确定URL、配置请求类型和头信息;发起请求;巧妙处理钓获的数据;还需要机智面对网络波澜,处理各种可能出现的错误。按照这样的过程,数据的钓取将会是一次既轻松愉快也效率高效的编程钓鱼之旅。
230 18
|
4月前
|
应用服务中间件 网络安全 数据安全/隐私保护
网关服务器配置指南:实现自动DHCP地址分配、HTTP服务和SSH无密码登录。
哇哈哈,道具都准备好了,咱们的魔术秀就要开始了。现在,你的网关服务器已经魔法满满,自动分配IP,提供网页服务,SSH登录如入无人之境。而整个世界,只会知道效果,不会知道是你在幕后操控一切。这就是真正的数字世界魔法师,随手拈来,手到擒来。
240 14
|
3月前
|
JSON 前端开发 Go
Go语言实战:创建一个简单的 HTTP 服务器
本篇是《Go语言101实战》系列之一,讲解如何使用Go构建基础HTTP服务器。涵盖Go语言并发优势、HTTP服务搭建、路由处理、日志记录及测试方法,助你掌握高性能Web服务开发核心技能。
|
3月前
|
Go
如何在Go语言的HTTP请求中设置使用代理服务器
当使用特定的代理时,在某些情况下可能需要认证信息,认证信息可以在代理URL中提供,格式通常是:
304 0
|
测试技术 C#
[转]关于HTTP服务器每个客户端2个连接的限制
这两天猫在家里搞一个多线程的断点续传得C#程序,发现同时只能开2个线程下载,其他的线程一律要等待,这样就导致下载大文件时其他线程经常超时,郁闷好久。今天回公司无意中发现了一个帖子,终于真相大白了,       现摘录如下:       这几天在做IIS 6上Web Service (WSE 2.0)的性能测试。
1057 0
|
测试技术 C#
【转】关于HTTP服务器每个客户端2个连接的限制
http://www.cnblogs.com/lishenglyx/archive/2010/01/07/1641190.html       这两天猫在家里搞一个多线程的断点续传得C#程序,发现同时只能开2个线程下载,其他的线程一律要等待,这样就导致下载大文件时其他线程经常超时,郁闷好久。
882 0
|
5月前
|
安全 网络协议 Linux
Linux网络应用层协议展示:HTTP与HTTPS
此外,必须注意,从HTTP迁移到HTTPS是一项重要且必要的任务,因为这不仅关乎用户信息的安全,也有利于你的网站评级和粉丝的信心。在网络世界中,信息的安全就是一切,选择HTTPS,让您的网站更加安全,使您的用户满意,也使您感到满意。
163 18
|
5月前
|
网络安全 开发者
如何解决HTTPS协议在WordPress升级后对网站不兼容的问题
以上就是解决WordPress升级后HTTPS协议对网站的不兼容问题的方法。希望能把这个棘手的问题看成是学校的管理问题一样来应对,将复杂的技术问题变得更加有趣和形象,并寻觅出解决问题的方式。希望你的网站能在新的学期得到更好的发展!
132 19
|
5月前
|
JSON 安全 网络协议
HTTP/HTTPS协议(请求响应模型、状态码)
本文简要介绍了HTTP与HTTPS协议的基础知识。HTTP是一种无状态的超文本传输协议,基于TCP/IP,常用80端口,通过请求-响应模型实现客户端与服务器间的通信;HTTPS为HTTP的安全版本,基于SSL/TLS加密技术,使用443端口,确保数据传输的安全性。文中还详细描述了HTTP请求方法(如GET、POST)、请求与响应头字段、状态码分类及意义,并对比了两者在请求-响应模型中的安全性差异。
490 20

热门文章

最新文章