java项目中使用protobuf扫盲笔记

简介: 最近公司 Java 项目中有用到 protobuf,查了些资料还是一脸迷茫。

主要纳闷这玩意到底有啥用呢?直接自己写 class、interface 不是更方便,还需要先写个 .proto 文件编译成 java 文件再来调用,这不是脱了裤子放屁吗?

Protocal Buffers(简称protobuf)是谷歌开源的一种数据传输协议,类似于 XML、JSON 等技术,用于结构化的数据序列化、反序列化。适合高性能,对响应速度有要求的数据传输场景,生成的是字节码,二进制数据格式需要编码和解码,不具有可读性,但是比 XML、JSON 小,传输速度更快:

  • protobuf:一般用于后端服务之间的数据传输(后端数据交互一般是为了序列化和反序列化,需要考虑并发、带宽这些),不具可读性
  • JSON:一般用于web项目前后端交互中,可读性好。
  • XML:在WebService中广泛使用,但是过于冗余,可读性较好。

protobuf 语法

常用数据类型

protobuf 类型 java 类型 默认值
double double 0.0
float float 0.0
int32 int 0
int64 long 0
bool boolean false
string String 空字符串
enum enum 第 1 个枚举值
bytes ByteString 空字节数组

字段限制

1、required:字段只能也必须出现 1 次,多用于必填项,必须赋值的字符

required int32 id = 1 [default = 0];

2、optional:字段可出现 0 次或多次,可有可无的字段,可以使用[default = xxx]设置默认值

optional string name = 1 [default = "周小黑"];

3、repeated:字段可出现任意多次(包括 0),多用于 Java List 属性

# list String
repeated string strList = 5;

# list 对象
repeated User userList = 6;

语法规则

  • message:消息类型,定义属性,支持嵌套
    message User {
      message Friend {
          required string name = 1;
          required string gender = 2 [default = "女"];
      }
      required int32 id = 1;
      required string name = 2;
      required int32 age = 3;
      repeated Friend friends = 4;
    }
    
  • service:用于 RPC 系统远程调用中(eg:gRPC、trpc),定义方法,protobuf 编译器会生成对应语言的服务接口代码及存根
message QueryRequest {
    required int32 id = 1;
}

message QueryResponse {
    required string code = 1;
    required string msg = 2;
    required User data = 3;
}

service UserService {
    // rpc关键字  函数名(参数) 返回值(返回参数)
    rpc Query(QueryRequest) returns(QueryResponse);
}

protobuf 工作原理

  • 首先我们需要编写一个 .protot 文件来定义序列化数据结构
  • 运行 protobuf 编译器 protoc 生成对应语言的代码,如 java 会生成 .java 文件(每个消息对应一个类,同时还有一个特殊的Builder类用于创建消息接口)
  • 通过 protobuf API 来读写消息

.protot 文件模板:

// 使用 proto3 语法,未指定则使用 proto2
syntax = "proto3";

// 生成 proto 文件所在包名
option java_package = "cn.cafe123.protobuf.proto";

// 生成 proto 文件名
option java_outer_classname="HelloProto";

message HelloRequest {
    required string name = 1;
}

message HelloResponse {
    required string message = 1;
}

service HelloWord {
    rpc Say(HelloRequest) returns (HelloResponse) {}
}

protobuf 官方文档

相关文章
|
2天前
|
Java Maven
Maven 构建 Java 项目
使用 Maven 的 archetype:generate 命令创建 Java 项目,如 `mvn archetype:generate` -DgroupId=com.companyname.bank -DartifactId=consumerBanking -DarchetypeArtifactId=maven-archetype-quickstart -DinteractiveMode=false,在 C:\MVN 下生成基于 maven 的 consumerBanking 项目。
|
2天前
|
网络安全 流计算 Python
实时计算 Flink版操作报错合集之Flink sql-client 针对kafka的protobuf格式数据建表,报错:java.lang.ClassNotFoundException 如何解决
在使用实时计算Flink版过程中,可能会遇到各种错误,了解这些错误的原因及解决方法对于高效排错至关重要。针对具体问题,查看Flink的日志是关键,它们通常会提供更详细的错误信息和堆栈跟踪,有助于定位问题。此外,Flink社区文档和官方论坛也是寻求帮助的好去处。以下是一些常见的操作报错及其可能的原因与解决策略。
15 1
|
3天前
|
前端开发 JavaScript Java
Java网络商城项目 SpringBoot+SpringCloud+Vue 网络商城(SSM前后端分离项目)五(前端页面
Java网络商城项目 SpringBoot+SpringCloud+Vue 网络商城(SSM前后端分离项目)五(前端页面
Java网络商城项目 SpringBoot+SpringCloud+Vue 网络商城(SSM前后端分离项目)五(前端页面
|
4天前
|
消息中间件 关系型数据库 网络安全
实时计算 Flink版操作报错合集之Flink sql-client 针对kafka的protobuf格式数据建表,报错:java.lang.ClassNotFoundException 如何解决
实时计算Flink版作为一种强大的流处理和批处理统一的计算框架,广泛应用于各种需要实时数据处理和分析的场景。实时计算Flink版通常结合SQL接口、DataStream API、以及与上下游数据源和存储系统的丰富连接器,提供了一套全面的解决方案,以应对各种实时计算需求。其低延迟、高吞吐、容错性强的特点,使其成为众多企业和组织实时数据处理首选的技术平台。以下是实时计算Flink版的一些典型使用合集。
14 1
|
6天前
|
Java 关系型数据库 MySQL
【Java Spring开源项目】新蜂(NeeBee)商城项目运行、分析、总结
【Java Spring开源项目】新蜂(NeeBee)商城项目运行、分析、总结
156 4
|
6天前
|
存储 Java Maven
Maven 构建 Java 项目
使用 Maven 的 `maven-archetype-quickstart` 插件在 `C:\MVN` 创建 Java 应用项目 `consumerBanking`,命令行参数包括 `-DgroupId`, `-DartifactId` 和 `-DarchetypeArtifactId`。项目包含 src/main/java 和 src/test/java 目录,分别存放 Java 代码和测试代码,以及 src/main/resources 用于存储资源文件。默认生成的 `App.java` 和 `AppTest.java` 分别为应用主类和测试类。
|
6天前
|
移动开发 前端开发 Java
STS里的java 工程项目名称修改和目录设置成源代码
STS里的java 工程项目名称修改和目录设置成源代码
|
6天前
|
JavaScript 前端开发 Java
java项目的打包将vue放到.jar里面部署
java项目的打包将vue放到.jar里面部署
|
6天前
|
缓存 安全 前端开发
来聊聊Java项目分层规范
本文讨论了Java项目的分层规范,强调了分层的重要性以避免代码不易扩展和职责边界模糊。作者分享了阿里提出的六层分层模型(开放接口层、终端显示层、Web层、Service层、Manager层、Mapper层)以及对应的领域模型(DO、DTO、VO、query)。同时,提出了简化版的分层规约,以提高开发效率。作者是CSDN Java博客专家,维护者之一的Java Guide项目,并提供了个人项目结构示例。文章鼓励读者关注其公众号以获取更多交流机会。
30 4
|
6天前
|
Java
springboot项目出现Exception in thread “main“ java.lang.NoClassDefFoundError: javax/servlet/Filter
springboot项目出现Exception in thread “main“ java.lang.NoClassDefFoundError: javax/servlet/Filter
17 0