使用dubbo-go搭建dubbo接口测试平台

简介: 作为接口测试平台,没办法引入所有提供方定义的接口jar包,可以有以下方案来解决:dubbo支持telnet协议调用dubbo接口dubbo的泛化调用可以在不引入提供方接口定义jar包的情况下对接口进行调用

背景


http接口测试只需要一个curl命令,但dubbo协议没有这样的现成接口测试工具。通常公司内的dubbo控制台或其他平台会集成一个dubbo接口测试工具。


调用一个dubbo接口,需要知道服务名service、方法名method和参数args


正常的调用,调用方需引入服务提供方定义的接口jar包。


作为接口测试平台,没办法引入所有提供方定义的接口jar包,可以有以下方案来解决:


  1. dubbo支持telnet协议调用dubbo接口
  2. dubbo的泛化调用可以在不引入提供方接口定义jar包的情况下对接口进行调用


对于方案1,实现成本很低,甚至可以在服务器上直接用telnet测试


微信截图_20220423150340.png


它也有缺点


  • 调用无法经过filter
  • 无法携带隐式参数attachment

刚好我们把方案1的优缺点都踩了,我们的dubbo控制台是go语言编写,短时间快速实现,就采用了telnet的方式。


随着业务的发展,流量染色,或标签路由等需要携带隐式参数。


没有走自定义filter,导致业务接口执行不符合预期等都迫使我们升级为泛化调用。


dubbo接口泛化调用在控制台是go编写的情况下也有两个方案可选:


  1. 单独起一个java进程,暴露http端口,与go进程进行交互,泛化调用使用dubbo的java sdk进行编写
  2. 控制台引入dubbo-go,使用dubbo-go进行泛化调用


出于对dubbo java版本的了解,方案1肯定可行,只是架构变得复杂。


而方案2由于dubbo-go还是比较新的项目,并不是很了解,所以不确定其可行性和兼容性,但如果能实现,会大大降低架构的复杂度。


dubbo-go介绍


dubbo-go是dubbo的golang实现版本,它出现的初衷是为了让golang和java的dubbo生态互通。


如今dubbo-go支持provider和consumer端,可以作为一个独立的rpc框架使用,同时社区也是dubbo生态中最火的一个。


如果要说它的意义,我觉得除了和java互通外还有一点非常重要,那就是它能发挥golang协程的巨大作用,这一点可以用在dubbo网关上,如果用dubbo-go实现dubbo网关,就无需纠结线程池、异步等问题。


泛化调用的使用


首先provider端提供一个接口,这个不再赘述,非常简单,接口定义如下


package org.newboo.basic.api;
import org.newboo.basic.model.RpcResult;
import org.newboo.basic.model.User;
public interface MyDemoService {
    RpcResult<String> call(User user);
}
package org.newboo.basic.model;
import java.io.Serializable;
public class User implements Serializable {
    private String uid;
    private String name;
    private String remoteServiceTag;
    ...
}


再来编写java版的泛化调用代码,不引入provider方的jar包:


ReferenceConfig<GenericService> reference = new ReferenceConfig<>();
// ①引用服务名
reference.setInterface("org.newboo.basic.api.MyDemoService");
// ②设置泛化调用标志
reference.setGeneric("true");
DubboBootstrap bootstrap = DubboBootstrap.getInstance();
bootstrap.application(new ApplicationConfig("dubbo-demo-api-consumer"))
        .registry(new RegistryConfig("zookeeper://127.0.0.1:2181"))
        .reference(reference)
        .start();
GenericService genericService = ReferenceConfigCache.getCache().get(reference);
String[] ps = new String[1];
// ③参数类型
ps[0] = "org.newboo.basic.model.User";
Object[] ags = new Object[1];
// ④pojo参数使用map构造
Map<String, String> user = new HashMap<>();
user.put("uid", "1");
user.put("name", "roshi");
user.put("remoteServiceTag", "tag");
ags[0] = user;
// ⑤发起调用
Object res = genericService.$invoke("call", ps, ags);
System.out.println(res);


golang版本


var (
  appName         = "UserConsumer"
  referenceConfig = config.ReferenceConfig{
    InterfaceName: "org.newboo.basic.api.MyDemoService",
    Cluster:       "failover",
    // registry需要配置文件
    Registry:      "demoZk",
    Protocol:      dubbo.DUBBO,
    Generic:       true,
  }
)
func init() {
  referenceConfig.GenericLoad(appName) //appName is the unique identification of RPCService
  time.Sleep(1 * time.Second)
}
// need to setup environment variable "CONF_CONSUMER_FILE_PATH" to "conf/client.yml" before run
func main() {
  call()
}
func call() {
  // 设置attachment
  ctx := context.WithValue(context.TODO(), constant.AttachmentKey, map[string]string{"tag":"test"})
  resp, err := referenceConfig.GetRPCService().(*config.GenericService).Invoke(
    ctx,
    []interface{}{
      "call",
      []string{"org.newboo.basic.model.User"},
      []interface{}{map[string]string{"uid":"111","name":"roshi","remoteServiceTag":"hello"}},
    },
  )
  if err != nil {
    panic(err)
  }
  gxlog.CInfo("success called res: %+v\n", resp)
}


这里我设置了一个attachment,也能正常被provider识别


微信截图_20220423150804.png


泛化调用原理


泛化调用GenericService是dubbo默认提供的一个服务。


其提供了一个名为$invoke的方法,该方法参数有三个,第一个参数是真实要调用的方法名,第二个是参数类型数组,第三个是真实的参数数组,其定义为


public interface GenericService {
    Object $invoke(String method, String[] parameterTypes, Object[] args) throws GenericException;
    ...
}


有了这三个参数,利用反射就能调用到真实的接口了。


java版实现细节


实现这种泛化调用主要涉及到两个filter:

  • consumer端的GenericImplFilter
  • provider端的GenericFilter


consumer端的filter将generic标志设置到attachment中,并封装调用为

GenericService.$invoke


provider端filter判断请求是generic时进行拦截,获取调用方法名、参数、参数值,先序列化为pojo对象,再进行反射调用真实接口。


dubbo-go版细节


与java实现基本一致,其中generic_filter充当consumer端的filter,也是将调用封装为GenericService.$invoke,其中还涉及到一个参数类型的转换,将map转换为dubbo-go-hessian2.Object,这样provider端就可以将其反序列化为Object对象。


与其相关的版本变更如下

  • v1.3.0开始支持泛化调用
  • v1.4.0开始支持用户设置attachement
  • v1.5.1开始支持动态tag路由
  • v1.5.7-rc1修复了直连provider时无法走filter的bug


结论


dubbo-go的泛化调用推荐使用>=v1.5.7-rc1版本,其功能几乎已和java版打平,甚至其实现都与java类似。


使用dubbo-go构建网关、接口测试平台、或者打通golang与java技术生态,不失为一个好的选择。


相关文章
|
10月前
|
关系型数据库 MySQL 测试技术
【分享】AgileTC测试用例管理平台使用分享
AgileTC 是一个脑图样式测试用例管理平台,支持用例设计、执行与团队协作,帮助测试人员高效管理测试流程。
491 116
【分享】AgileTC测试用例管理平台使用分享
|
10月前
|
人工智能 数据可视化 测试技术
AI测试平台自动遍历:低代码也能玩转全链路测试
AI测试平台的自动遍历功能,通过低代码配置实现Web和App的自动化测试。用户只需提供入口链接或安装包及简单配置,即可自动完成页面结构识别、操作验证,并生成可视化报告,大幅提升测试效率,特别适用于高频迭代项目。
|
10月前
|
人工智能 测试技术 调度
写用例写到怀疑人生?AI 智能测试平台帮你一键生成!
霍格沃兹测试开发学社推出AI智能测试用例生成功能,结合需求文档一键生成高质量测试用例,大幅提升效率,减少重复劳动。支持自定义提示词、多文档分析与批量管理,助力测试人员高效完成测试设计,释放更多时间投入核心分析工作。平台已开放内测,欢迎体验!
|
10月前
|
人工智能 测试技术 项目管理
测试不再碎片化:AI智能体平台「项目资料套件」功能上线!
在实际项目中,需求文档分散、整理费时、测试遗漏等问题常困扰测试工作。霍格沃兹推出AI智能体测试平台全新功能——项目资料套件,可将多个关联文档打包管理,并一键生成测试用例,提升测试完整性与效率。支持套件创建、文档关联、编辑删除及用例生成,适用于复杂项目、版本迭代等场景,助力实现智能化测试协作,让测试更高效、更专业。
|
11月前
|
存储 人工智能 算法
AI测试平台实战:深入解析自动化评分和多模型对比评测
在AI技术迅猛发展的今天,测试工程师面临着如何高效评估大模型性能的全新挑战。本文将深入探讨AI测试平台中自动化评分与多模型对比评测的关键技术与实践方法,为测试工程师提供可落地的解决方案。
|
存储 测试技术 虚拟化
VMmark 4.0.3 - 虚拟化平台基准测试
VMmark 4.0.3 - 虚拟化平台基准测试
373 0
VMmark 4.0.3 - 虚拟化平台基准测试
|
10月前
|
人工智能 自然语言处理 测试技术
AI测试平台的用例管理实践:写得清晰,管得高效,执行更智能
在测试过程中,用例分散、步骤模糊、回归测试效率低等问题常困扰团队。霍格沃兹测试开发学社推出的AI测试平台,打通“用例编写—集中管理—智能执行”全流程,提升测试效率与覆盖率。平台支持标准化用例编写、统一管理操作及智能执行,助力测试团队高效协作,释放更多精力优化测试策略。目前平台已开放内测,欢迎试用体验!
|
Java 测试技术 容器
Jmeter工具使用:HTTP接口性能测试实战
希望这篇文章能够帮助你初步理解如何使用JMeter进行HTTP接口性能测试,有兴趣的话,你可以研究更多关于JMeter的内容。记住,只有理解并掌握了这些工具,你才能充分利用它们发挥其应有的价值。+
1628 23
|
11月前
|
存储 人工智能 文字识别
从零开始打造AI测试平台:文档解析与知识库构建详解
AI时代构建高效测试平台面临新挑战。本文聚焦AI问答系统知识库建设,重点解析文档解析关键环节,为测试工程师提供实用技术指导和测试方法论
|
11月前
|
人工智能 安全 数据可视化
安全测试平台的选型标准与搭建思路
随着企业安全需求升级,传统漏洞扫描和渗透测试已无法满足要求。构建安全测试平台(STP)成为趋势,实现漏洞扫描、权限评估、接口测试等工作的平台化运营。本文从选型标准、平台架构、模块功能等六个方面,系统讲解如何搭建企业级安全测试平台,提升安全能力。