【网络】序列化反序列化

本文涉及的产品
全局流量管理 GTM,标准版 1个月
云解析 DNS,旗舰版 1个月
公共DNS(含HTTPDNS解析),每月1000万次HTTP解析
简介: 【网络】序列化反序列化

一、序列化反序列化

1、概念

在前文《网络编程套接字》中,我们实现了服务器与客户端之间的字符串通信,这是非常简单的通信,在实际使用的过程中,网络需要传输的不仅仅是字符串,更多的是结构化的数据(类似于class ,struct类似的数据)。

那么我们应该怎么发送这些结构化的数据呢?

如果我们直接发送结构化的数据本身,由于内存对齐的规则(默认对齐数)以及操作系统本身的不同等各种原因,就可能导致通信双方对数据的识别是不一致的,从而出现通信错误。

为了解决这种错误,我们就需要定义一种协议,来让双方能够进行正确通信,为此就有了序列化和反序列化。

  • 序列化(Serialization):具体来说,序列化是将对象转换为字节序列的过程,以便在网络上传输或者保存在本地文件中。
  • 反序列化(Deserialization) :是序列化的逆过程,即把字节序列恢复为对象的过程

例如:

我们可以定义结构体来表示需要交互的信息,发送数据时将这个结构体按照一个规则转换成字符串,接收到数据的时候再按照相同的规则把字符串转化回结构体。这个过程就叫做 “序列化” 和 “反序列化”。

根据某种约定,使一端发送时构造的数据,在另一端能够正确的进行解析。这种约定就是应用层协议。

2、序列化作用

  • 数据交换:序列化可以将数据转换为跨平台兼容的格式,使得数据可以在不同的系统、编程语言之间进行交换和共享。
  • 持久化存储:将对象序列化后,可以将其保存到磁盘、数据库等介质中,实现数据的持久化存储,防止程序退出或计算机宕机导致数据丢失。
  • 网络通信:在网络通信中,可以将对象序列化后通过网络发送到其他计算机,接收端再进行反序列化,从而实现数据的传输和共享。
  • 缓存优化:序列化后的数据可以被缓存,当需要时直接从缓存中读取,避免了频繁的数据库查询,提高了性能。

总的来说,序列化方便了数据的传输、保存和共享,同时还可以提高程序的性能和响应速度。

3、序列化框架的选择

在选择序列化和反序列化框架的时候,主要从以下两个方面进行考虑:

  • 结果数据大小; 原则上来说,序列化后的数据越小,传输效率越高;
  • 结构复杂程度;结构复杂度会影响序列化和发序列化的效率,结构越复杂,越耗时。

根据以上两点,对于性能要求不是太高的服务器程序,可以选择Json文本格式的序列化框架;对于性能要求比较高的程序程序,则应该选择传输效率更高的二进制序列化框架,建议使用Protobuf

二、Json

1、介绍

Json(JavaScript Object Notation JS对象)是一种轻量级的数据交换格式,采用完全独立于编程语言的文本格式来存储和表示数据。

Json 协议是一种文本协议,易于阅读和编写,同时也易于机器解析和生成,并能有效地提升网络传输协效率,在JSON中,数据以键值对的方式表示,键是一个字符串,值可以是字符串、数字、布尔值、数组、对象或null。简单的JSON示例如下:

{  
  "name": "张三",  
  "age": 25,  
  "gender": "男"
}

JSON格式具有以下特点:

  • 可读性高:JSON使用简洁明了的文本格式,易于人类阅读和理解。
  • 轻量级:相较于其他数据交换格式如XML,JSON的数据表示更为紧凑,占用更少的存储空间和传输带宽。
  • 平台无关性:JSON格式在不同的编程语言和平台之间具有良好的兼容性,可以方便地进行数据交换和共享。
  • 支持多种数据类型:JSON支持包括字符串、数字、布尔值、数组、对象和null在内的多种数据类型。这使得JSON能够灵活地表示各种数据结构和复杂对象。
  • 易于解析和生成:绝大多数编程语言都提供了JSON的解析和生成库,使得操作JSON数据变得十分方便和高效。
  • 可扩展性:JSON格式支持通过嵌套和组合来表示更复杂的数据结构,可以根据具体需求进行扩展和定制。

2、简单使用

例如在CentOs环境中C++想使用Json需要先安装jsoncpp的第三方库:

sudo yum install -y jsoncpp-devel

jsoncpp的头文件会被安装在系统的 /usr/include/ 路径下。

动静态库被安装在 /lib64/路径下。

在实际使用是,我们只需要包含json.h头文件就行了

#include <jsoncpp/json/json.h>

在编译链接时,我们要链接jsoncpp的动态库

-l jsoncpp

Jsoncpp中的部分成员:

  • Value:一种万能对象,能接收任意的kv类型,进行数据映射。
  • FastWriter:是用来进行快速序列化,直接把数据序列化为一行字符串。
  • StyledWriter:进行风格化的序列化,使字符串具有一定的格式更加美观。
  • Reader:用来进行反序列化。

例如我们下面的需求是一个网络版本的计算器,客户端进行发送计算任务,服务端进行计算,我们使用jsoncpp来进行传输数据的序列化和反序列化。

  • 客户端有三个数据: _x(左操作数) _y(右操作数 )_op(操作符)
  • 服务端有两个数据: _result(结果),_code(计算结果的合法性,0表示正确,非零表示各种错误)
// 客户端请求
struct Request
{
    Request()
        :_x(0), _y(0), _op('+')
    {}
    Request(int x, int y, char op)
        :_x(x), _y(y), _op(op)
    {}
    // 序列化 :struct --> string
    void Serialize(std::string* outstr)
    {
        Json::Value root;   //万能对象,接收任意类型。
        // 构建数据的映射关系
        root["x"] = _x;
        root["y"] = _y;
        root["op"] = _op;
        // 序列化
        Json::FastWriter writer;
        *outstr = writer.write(root);
    }
    // 反序列化 : string -->struct
    bool Deserialize(const std::string& instr)
    {
        Json::Value root;
        // 反序列化
        Json::Reader reader;
        reader.parse(instr, root);
        // 提取映射的数据
        _x = root["x"].asInt();
        _y = root["y"].asInt();
        _op = root["op"].asInt();
        return true;
    }
public:
    int _x;
    int _y;
    char _op;
};
// 服务端响应
struct Response
{
    Response()
        :_result(0), _code(0)
    {}
    // 序列化 :struct --> string
    void Serialize(std::string* outstr)
    {
        Json::Value root;
        // 构建数据的映射关系
        root["result"] = _result;
        root["code"] = _code;
        // 序列化
        Json::FastWriter writer;
        *outstr = writer.write(root);
    }
    // 反序列化 :string -->struct
    bool Deserialize(const std::string& instr)
    {
      // 反序列化
        Json::Value root;
        Json::Reader reader;
        reader.parse(instr, root);
        // 提取映射的数据
        _result = root["result"].asInt();
        _code = root["code"].asInt();
        return true;
    }
public:
    int _result;
    int _code;
};
相关文章
|
4月前
|
存储 Java
【IO面试题 四】、介绍一下Java的序列化与反序列化
Java的序列化与反序列化允许对象通过实现Serializable接口转换成字节序列并存储或传输,之后可以通过ObjectInputStream和ObjectOutputStream的方法将这些字节序列恢复成对象。
|
7天前
|
JSON 算法 Java
Nettyの网络聊天室&扩展序列化算法
通过本文的介绍,我们详细讲解了如何使用Netty构建一个简单的网络聊天室,并扩展序列化算法以提高数据传输效率。Netty的高性能和灵活性使其成为实现各种网络应用的理想选择。希望本文能帮助您更好地理解和使用Netty进行网络编程。
25 12
|
4月前
|
存储 开发框架 .NET
解锁SqlSugar新境界:利用Serialize.Linq实现Lambda表达式灵活序列化与反序列化,赋能动态数据查询新高度!
【8月更文挑战第3天】随着软件开发复杂度提升,数据查询的灵活性变得至关重要。SqlSugar作为一款轻量级、高性能的.NET ORM框架,简化了数据库操作。但在需要跨服务共享查询逻辑时,直接传递Lambda表达式不可行。这时,Serialize.Linq库大显身手,能将Linq表达式序列化为字符串,实现在不同服务间传输查询逻辑。结合使用SqlSugar和Serialize.Linq,不仅能够保持代码清晰,还能实现复杂的动态查询逻辑,极大地增强了应用程序的灵活性和可扩展性。
160 2
|
1月前
|
JSON 数据格式 索引
Python中序列化/反序列化JSON格式的数据
【11月更文挑战第4天】本文介绍了 Python 中使用 `json` 模块进行序列化和反序列化的操作。序列化是指将 Python 对象(如字典、列表)转换为 JSON 字符串,主要使用 `json.dumps` 方法。示例包括基本的字典和列表序列化,以及自定义类的序列化。反序列化则是将 JSON 字符串转换回 Python 对象,使用 `json.loads` 方法。文中还提供了具体的代码示例,展示了如何处理不同类型的 Python 对象。
|
1月前
|
存储 安全 Java
Java编程中的对象序列化与反序列化
【10月更文挑战第22天】在Java的世界里,对象序列化和反序列化是数据持久化和网络传输的关键技术。本文将带你了解如何在Java中实现对象的序列化与反序列化,并探讨其背后的原理。通过实际代码示例,我们将一步步展示如何将复杂数据结构转换为字节流,以及如何将这些字节流还原为Java对象。文章还将讨论在使用序列化时应注意的安全性问题,以确保你的应用程序既高效又安全。
|
2月前
|
存储 Java
Java编程中的对象序列化与反序列化
【10月更文挑战第9天】在Java的世界里,对象序列化是连接数据持久化与网络通信的桥梁。本文将深入探讨Java对象序列化的机制、实践方法及反序列化过程,通过代码示例揭示其背后的原理。从基础概念到高级应用,我们将一步步揭开序列化技术的神秘面纱,让读者能够掌握这一强大工具,以应对数据存储和传输的挑战。
|
2月前
|
存储 安全 Java
Java编程中的对象序列化与反序列化
【10月更文挑战第3天】在Java编程的世界里,对象序列化与反序列化是实现数据持久化和网络传输的关键技术。本文将深入探讨Java序列化的原理、应用场景以及如何通过代码示例实现对象的序列化与反序列化过程。从基础概念到实践操作,我们将一步步揭示这一技术的魅力所在。
|
1月前
|
存储 缓存 NoSQL
一篇搞懂!Java对象序列化与反序列化的底层逻辑
本文介绍了Java中的序列化与反序列化,包括基本概念、应用场景、实现方式及注意事项。序列化是将对象转换为字节流,便于存储和传输;反序列化则是将字节流还原为对象。文中详细讲解了实现序列化的步骤,以及常见的反序列化失败原因和最佳实践。通过实例和代码示例,帮助读者更好地理解和应用这一重要技术。
48 0
|
3月前
|
JSON 安全 编译器
扩展类实例的序列化和反序列化
扩展类实例的序列化和反序列化
45 1
|
3月前
|
JSON fastjson Java
niubility!即使JavaBean没有默认无参构造器,fastjson也可以反序列化。- - - - 阿里Fastjson反序列化源码分析
本文详细分析了 Fastjson 反序列化对象的源码(版本 fastjson-1.2.60),揭示了即使 JavaBean 沲有默认无参构造器,Fastjson 仍能正常反序列化的技术内幕。文章通过案例展示了 Fastjson 在不同构造器情况下的行为,并深入探讨了 `ParserConfig#getDeserializer` 方法的核心逻辑。此外,还介绍了 ASM 字节码技术的应用及其在反序列化过程中的角色。
98 10

热门文章

最新文章