http gzip解压缩

简介: 问题: 入问题,问题答案立即呈现在您眼前! 寻找gzip 获取一个网页数据返回的编码类型是gzip,我该怎么解压缩 HTTP头获取? 如何用vb获取网络上的xml文件,并解析内容 关于GZIP的解码 怎样解gzip的压缩 请问Wininet是否可以进行Gzip的http传输,尤其...
问题: 入问题,问题答案立即呈现在您眼前! 寻找gzip 获取一个网页数据返回的编码类型是gzip,我该怎么解压缩 HTTP头获取? 如何用vb获取网络上的xml文件,并解析内容 关于GZIP的解码 怎样解gzip的压缩 请问Wininet是否可以进行Gzip的http传输,尤其是post的时候!如果可以如何实现? 关于GZIP格式解压缩HTTP数据包的问题,我使用ZLIB为什么必须先保存文件,内存解 压缩出错 无法获取$_SERVER["HTTP_REFERER"] 关于GZIP的问题,高分求解!! ..... 等都是关于gzip解压的 问题: 提取http的gzip内容,并解压。 关键点: 1 提取http数据包的内容,主要是gzip格式的 2 数据包的重组 3 在内存中解压gzip数据 这两个周过来,都是在网上过来的,得到网友的帮助不少,很是感激,为了不让这 个问题继续困扰后来的un_gziper,特写此文。 1 数据包内存的提取: 关键的地方是找到gzip内存的开始位置以及如何确定gzip内容的大小 开始位置:“Content-Encoding: gzip\r\n\r\n” gzip大小:“Content-Length:”后面的就是了 2 数据包的重组,一般网页的内容很少是一个数据包可以装得下的,所以都得进行 gzip之后再用多个数据包进行传输 关键的地方是: get请求数据包的ack和seq与http返回数据包的ack,seq有密切的联系: 举例说明: get请求:ack=0,seq=0 http1:seq=0,ack=584 http2: seq=1420,ack=584 ... 简单的分析说明可以看出,我们的算法设计: 首先得到get请求的ack,返回的数据包的seq等于这个值,同时记下这个数据包的 ack,后面进行分包发送的http的数据包的ack都是这个值,这个是关键点之一,同 时综合 Content-Length就可以得到gzip的全部内容。 至此,原始数据提取完毕,该是如何解压的问题了 3解压gzip 我做了上面的1,2步以后将内容保存到文件里面,用gzip命令可以打开,验证了数 据的完整性。 而后我采用了zlib提供的uncompress函数,和大多数的网友一样,都是犯了一个致 命的错误,没有仔细的阅读zlib的文档!导致一次次无谓的识别! 事实上zlib格式和gzib格式是有差别的,而uncompress是用来解压zlib格式文件 的,这就是为什么会出现用compress函数压缩的数据,在内存中可以直接用 uncompress函数进行解压的,而就不能解压gzip数据的问题! 后来测试了zlib包里面的example例子,算是对zlib有了一点点的了解,应该用 inflate类函数进行解压! 当然这样遇到了问题,格式不对! 后来在网上看到的帖子:gzip格式用inflate函数还不行,必需要用inflateInit2 (&strm, 47); !!!!!!!!!!!!!!!!!! 问题解决! 这里借用那位网友的源代码,同时对他表示感谢! int inflate_read(char *source,int len,char **dest,int gzip) { int ret; unsigned have; z_stream strm; unsigned char out[CHUNK]; int totalsize = 0; /* allocate inflate state */ strm.zalloc = Z_NULL; strm.zfree = Z_NULL; strm.opaque = Z_NULL; strm.avail_in = 0; strm.next_in = Z_NULL; if(gzip) ret = inflateInit2(&strm, 47); else ret = inflateInit(&strm); if (ret != Z_OK) return ret; strm.avail_in = len; strm.next_in = source; /* run inflate() on input until output buffer not full */ do { strm.avail_out = CHUNK; strm.next_out = out; ret = inflate(&strm, Z_NO_FLUSH); assert(ret != Z_STREAM_ERROR); /* state not clobbered */ switch (ret) { case Z_NEED_DICT: ret = Z_DATA_ERROR; /* and fall through */ case Z_DATA_ERROR: case Z_MEM_ERROR: inflateEnd(&strm); return ret; } have = CHUNK - strm.avail_out; totalsize += have; *dest = realloc(*dest,totalsize); memcpy(*dest + totalsize - have,out,have); } while (strm.avail_out == 0); /* clean up and return */ (void)inflateEnd(&strm); return ret == Z_STREAM_END ? Z_OK : Z_DATA_ERROR; } 后记,这个过程是痛苦的,但也是幸福的! 这里我发起一个小小的倡议,对所有关注gzip解压的问题的网友: 我们都遇到了一个问题就是zlib的文档都是英文的,有个别网友翻译了开头的一小 部分,但是这是不够的! 所以,我希望有兴趣的朋友可以一起来帮zlib的文档翻译成为中文! 有兴趣的可以加我!
相关实践学习
深入解析Docker容器化技术
Docker是一个开源的应用容器引擎,让开发者可以打包他们的应用以及依赖包到一个可移植的容器中,然后发布到任何流行的Linux机器上,也可以实现虚拟化,容器是完全使用沙箱机制,相互之间不会有任何接口。Docker是世界领先的软件容器平台。开发人员利用Docker可以消除协作编码时“在我的机器上可正常工作”的问题。运维人员利用Docker可以在隔离容器中并行运行和管理应用,获得更好的计算密度。企业利用Docker可以构建敏捷的软件交付管道,以更快的速度、更高的安全性和可靠的信誉为Linux和Windows Server应用发布新功能。 在本套课程中,我们将全面的讲解Docker技术栈,从环境安装到容器、镜像操作以及生产环境如何部署开发的微服务应用。本课程由黑马程序员提供。     相关的阿里云产品:容器服务 ACK 容器服务 Kubernetes 版(简称 ACK)提供高性能可伸缩的容器应用管理能力,支持企业级容器化应用的全生命周期管理。整合阿里云虚拟化、存储、网络和安全能力,打造云端最佳容器化应用运行环境。 了解产品详情: https://www.aliyun.com/product/kubernetes
目录
相关文章
|
6月前
|
存储 数据库 Python
使用HTTP POST协议将本地压缩数据发送到服务器
总的来说,使用HTTP POST协议将本地压缩数据发送到服务器是一个涉及多个步骤的过程,包括创建压缩文件,设置HTTP客户端,发送POST请求,以及服务器端的处理。虽然这个过程可能看起来复杂,但一旦你理解了每个步骤,就会变得相对简单。
259 19
|
Ubuntu Linux iOS开发
问题./configure: error: the HTTP gzip module requires the zlib library.处理
问题./configure: error: the HTTP gzip module requires the zlib library.处理
2050 6
|
7月前
|
安全 网络安全 定位技术
网络通讯技术:HTTP POST协议用于发送本地压缩数据到服务器的方案。
总的来说,无论你是一名网络开发者,还是普通的IT工作人员,理解并掌握POST方法的运用是非常有价值的。它就像一艘快速,稳定,安全的大船,始终为我们在网络海洋中的冒险提供了可靠的支持。
248 22
|
运维 算法 应用服务中间件
运维系列.Nginx中使用HTTP压缩功能(一)
运维系列.Nginx中使用HTTP压缩功能(一)
418 1
|
缓存 应用服务中间件 nginx
运维系列.Nginx中使用HTTP压缩功能(二)
运维系列.Nginx中使用HTTP压缩功能(二)
259 0
|
算法 物联网 网络安全
HTTP/2:多路复用、服务器推送和首部压缩的革命
HTTP/2:多路复用、服务器推送和首部压缩的革命
HTTP/2:多路复用、服务器推送和首部压缩的革命
|
缓存 前端开发
65 # 实现 http-server 里的 gzip 压缩
65 # 实现 http-server 里的 gzip 压缩
288 0
|
算法 数据挖掘 区块链
HTTP/2 协议-HPACK(HTTP2 头部压缩)原理介绍
HTTP/2 协议-HPACK(HTTP2 头部压缩)原理介绍
1434 0
|
应用服务中间件 nginx
【2022】Nginx使用ngx_http_gzip_module对资源进行压缩
【2022】Nginx使用ngx_http_gzip_module对资源进行压缩
230 0
|
移动开发 缓存 前端开发
前端性能优化 - 静态资源合并与压缩减少HTTP请求
这是一个基于.Net Core开发的,实现压缩Css、Javascript、Html资源的压缩、合并功能的组件。通过这个组件我们就可以实现静态资源的捆绑,实现对js、css、less、scss等静态资源的自动打包捆绑处理。
429 0
前端性能优化 - 静态资源合并与压缩减少HTTP请求

热门文章

最新文章