Hasor【环境搭建 01】SpringBoot集成Dataway接口配置服务(依赖+配置+数据库数据源初始化+注解添加+demo验证测试)

简介: Hasor【环境搭建 01】SpringBoot集成Dataway接口配置服务(依赖+配置+数据库数据源初始化+注解添加+demo验证测试)

1.简介

来自官网的描述:

  1. Dataway 是基于 DataQL 服务聚合能力,为应用提供的一个接口配置工具。使得使用者无需开发任何代码就配置一个满足需求的接口。整个接口配置、测试、冒烟、发布。一站式都通过 Dataway 提供的 UI 界面完成。UI 会以 Jar 包方式提供并集成到应用中并和应用共享同一个 http 端口,应用无需单独为 Dataway 开辟新的管理端口。
  2. 这种内嵌集成方式模式的优点是,可以使得大部分老项目都可以在无侵入的情况下直接应用 Dataway。进而改进老项目的迭代效率,大大减少企业项目研发成本。
  3. Dataway 工具化的提供 DataQL 配置能力。这种研发模式的变革使得,相当多的需求开发场景只需要配置即可完成交付。从而避免了从数据存取到前端接口之间的一系列开发任务,例如:Mapper、BO、VO、DO、DAO、Service、Controller 统统不再需要。
  4. Dataway 是 Hasor 生态中的一员,因此在 Spring 中使用 Dataway 首先要做的就是打通两个生态。根据官方文档中推荐的方式我们将 Hasor 和 Spring Boot 整合起来。

2.使用

2.1 依赖

SpringBoot版本:2.5.0 【这里只贴出主要的依赖】

<!--hasor核心依赖-->
        <dependency>
            <groupId>net.hasor</groupId>
            <artifactId>hasor-spring</artifactId>
            <version>4.2.5</version>
        </dependency>
        <dependency>
            <groupId>net.hasor</groupId>
            <artifactId>hasor-dataway</artifactId>
            <version>4.2.5</version>
        </dependency>
        <!--p6spy 打印执行的SQL语句-->
        <dependency>
            <groupId>com.github.gavlyukovskiy</groupId>
            <artifactId>p6spy-spring-boot-starter</artifactId>
            <version>1.7.1</version>
        </dependency>
        <!--数据库相关-->
        <dependency>
            <groupId>org.springframework.boot</groupId>
            <artifactId>spring-boot-starter-jdbc</artifactId>
        </dependency>
        <dependency>
            <groupId>org.postgresql</groupId>
            <artifactId>postgresql</artifactId>
            <scope>runtime</scope>
        </dependency>
        <dependency>
            <groupId>com.jdbc</groupId>
            <artifactId>greenplum</artifactId>
            <version>5.1.4</version>
        </dependency>
        <dependency>
            <groupId>com.alibaba</groupId>
            <artifactId>druid-spring-boot-starter</artifactId>
            <version>1.1.10</version>
        </dependency>

2.2 配置

【问题一】:接口显示的中文乱码。

【解决一】:配置servlet.encoding.charsetservlet.encoding.force

server:
  port: 8088
  servlet:
    encoding:
      charset: utf-8
      force: true
spring:
  application:
    name: dataWay-demo
 # 数据源配置
  datasource:
    url: jdbc:pivotal:greenplum://xxx.xx.xxx.xxx:2345;DatabaseName=gpdb
    username: gpadmin
    password: gpadmin
    driver-class-name: com.pivotal.jdbc.GreenplumDriver
    type: com.alibaba.druid.pool.DruidDataSource
    druid:
      initial-size: 3
      min-idle: 3
      max-active: 10
      max-wait: 60000
      stat-view-servlet:
        login-username: admin
        login-password: admin
# p6spy配置
decorator:
  datasource:
    p6spy:
      logging: slf4j
      log-file: syp.log
      log-format: executionTime:%(executionTime) | sql:%(sqlSingleLine)
# dataWay核心配置
# 启用 Dataway 功能(默认不启用)
HASOR_DATAQL_DATAWAY: true
# 开启 ui 管理功能(注意生产环境必须要设置为 false,否则会造成严重的生产安全事故)
HASOR_DATAQL_DATAWAY_ADMIN: true
# (可选)API工作路径
HASOR_DATAQL_DATAWAY_API_URL: /api/
# (可选)ui 的工作路径,只有开启 ui 管理功能后才有效
HASOR_DATAQL_DATAWAY_UI_URL: /interface-ui/

2.3 数据初始化

以下是MySQL数据库的初始化SQL:

CREATE TABLE interface_info (
  api_id          varchar(64)  NOT NULL COMMENT 'ID',
  api_method      varchar(12)  NOT NULL COMMENT 'HttpMethod:GET、PUT、POST',
  api_path        varchar(512) NOT NULL COMMENT '拦截路径',
  api_status      varchar(4)   NOT NULL COMMENT '状态:-1-删除, 0-草稿,1-发布,2-有变更,3-禁用',
  api_comment     varchar(255) NOT NULL COMMENT '注释',
  api_type        varchar(24)  NOT NULL COMMENT '脚本类型:SQL、DataQL',
  api_script      mediumtext   NOT NULL COMMENT '查询脚本:xxxxxxx',
  api_schema      mediumtext   NOT NULL COMMENT '接口的请求/响应数据结构',
  api_sample      mediumtext   NOT NULL COMMENT '请求/响应/请求头样本数据',
  api_option      mediumtext   NOT NULL COMMENT '扩展配置信息',
  api_create_time varchar(32)  NOT NULL COMMENT '创建时间',
  api_gmt_time    varchar(32)  NOT NULL COMMENT '修改时间',
  PRIMARY KEY (api_id),
  UNIQUE KEY uk_interface_info (api_path)
) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COMMENT='Dataway 中的API';
CREATE TABLE interface_release (
  pub_id           varchar(64)  NOT NULL COMMENT 'Publish ID',
  pub_api_id       varchar(64)  NOT NULL COMMENT '所属API ID',
  pub_method       varchar(12)  NOT NULL COMMENT 'HttpMethod:GET、PUT、POST',
  pub_path         varchar(512) NOT NULL COMMENT '拦截路径',
  pub_status       varchar(4)   NOT NULL COMMENT '状态:-1-删除, 0-草稿,1-发布,2-有变更,3-禁用',
  pub_comment      varchar(255) NOT NULL COMMENT '注释',
  pub_type         varchar(24)  NOT NULL COMMENT '脚本类型:SQL、DataQL',
  pub_script       mediumtext   NOT NULL COMMENT '查询脚本:xxxxxxx',
  pub_script_ori   mediumtext   NOT NULL COMMENT '原始查询脚本,仅当类型为SQL时不同',
  pub_schema       mediumtext   NOT NULL COMMENT '接口的请求/响应数据结构',
  pub_sample       mediumtext   NOT NULL COMMENT '请求/响应/请求头样本数据',
  pub_option       mediumtext   NOT NULL COMMENT '扩展配置信息',
  pub_release_time varchar(32)  NOT NULL COMMENT '发布时间(下线不更新)',
  PRIMARY KEY (pub_id),
  KEY idx_interface_release_api  (pub_api_id),
  KEY idx_interface_release_path (pub_path)
) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COMMENT='Dataway API 发布历史。';
create index idx_interface_release on interface_release (pub_api_id);

【问题二】:> 1071 - Specified key was too long; max key length is 767 bytes

【解决二】:解决:调整相应字段的长度。也可以参考这篇 博文 解决问题。

这里再提供一下GreenPlum数据库的初始化SQL:

CREATE TABLE interface_info (
  api_id VARCHAR ( 64 ) NOT NULL CONSTRAINT pk_interface_info PRIMARY KEY,
  api_method VARCHAR ( 12 ) NOT NULL,
  api_path VARCHAR ( 512 ) NOT NULL,
  api_status VARCHAR ( 4 ) NOT NULL,
  api_comment VARCHAR ( 255 ) NOT NULL,
  api_type VARCHAR ( 24 ) NOT NULL,
  api_script TEXT NOT NULL,
  api_schema TEXT NOT NULL,
  api_sample TEXT NOT NULL,
  api_option TEXT NOT NULL,
  api_create_time VARCHAR ( 32 ) NOT NULL,
  api_gmt_time VARCHAR ( 32 ) NOT NULL 
) DISTRIBUTED BY ( api_id );
CREATE UNIQUE INDEX uk_interface_info ON interface_info ( api_id, api_path );
COMMENT ON TABLE interface_info IS 'Dataway 中的API';
COMMENT ON COLUMN interface_info.api_id IS 'ID';
COMMENT ON COLUMN interface_info.api_method IS 'HttpMethod:GET、PUT、POST';
COMMENT ON COLUMN interface_info.api_path IS '拦截路径';
COMMENT ON COLUMN interface_info.api_status IS '状态:-1-删除, 0-草稿,1-发布,2-有变更,3-禁用';
COMMENT ON COLUMN interface_info.api_comment IS '注释';
COMMENT ON COLUMN interface_info.api_type IS '脚本类型:SQL、DataQL';
COMMENT ON COLUMN interface_info.api_script IS '查询脚本:xxxxxxx';
COMMENT ON COLUMN interface_info.api_schema IS '接口的请求/响应数据结构';
COMMENT ON COLUMN interface_info.api_sample IS '请求/响应/请求头样本数据';
COMMENT ON COLUMN interface_info.api_option IS '扩展配置信息';
COMMENT ON COLUMN interface_info.api_create_time IS '创建时间';
COMMENT ON COLUMN interface_info.api_gmt_time IS '修改时间';
CREATE TABLE interface_release (
  pub_id VARCHAR ( 64 ) NOT NULL CONSTRAINT pk_interface_release PRIMARY KEY,
  pub_api_id VARCHAR ( 64 ) NOT NULL,
  pub_method VARCHAR ( 12 ) NOT NULL,
  pub_path VARCHAR ( 512 ) NOT NULL,
  pub_status VARCHAR ( 4 ) NOT NULL,
  pub_comment VARCHAR ( 255 ) NOT NULL,
  pub_type VARCHAR ( 24 ) NOT NULL,
  pub_script TEXT NOT NULL,
  pub_script_ori TEXT NOT NULL,
  pub_schema TEXT NOT NULL,
  pub_sample TEXT NOT NULL,
  pub_option TEXT NOT NULL,
  pub_release_time VARCHAR ( 32 ) NOT NULL 
) DISTRIBUTED BY ( pub_id );
COMMENT ON TABLE interface_release IS 'Dataway API 发布记录';
COMMENT ON COLUMN interface_release.pub_id IS 'Publish ID';
COMMENT ON COLUMN interface_release.pub_api_id IS '所属API ID';
COMMENT ON COLUMN interface_release.pub_method IS 'HttpMethod:GET、PUT、POST';
COMMENT ON COLUMN interface_release.pub_path IS '拦截路径';
COMMENT ON COLUMN interface_release.pub_status IS '状态:-1-删除, 0-草稿,1-发布,2-有变更,3-禁用';
COMMENT ON COLUMN interface_release.pub_comment IS '注释';
COMMENT ON COLUMN interface_release.pub_type IS '脚本类型:SQL、DataQL';
COMMENT ON COLUMN interface_release.pub_script IS '查询脚本:xxxxxxx';
COMMENT ON COLUMN interface_release.pub_script_ori IS '原始查询脚本,仅当类型为SQL时不同';
COMMENT ON COLUMN interface_release.pub_schema IS '接口的请求/响应数据结构';
COMMENT ON COLUMN interface_release.pub_sample IS '请求/响应/请求头样本数据';
COMMENT ON COLUMN interface_release.pub_option IS '扩展配置信息';
COMMENT ON COLUMN interface_release.pub_release_time IS '发布时间(下线不更新)';
CREATE INDEX idx_interface_release_api ON interface_release ( pub_api_id );
CREATE INDEX idx_interface_release_path ON interface_release ( pub_path );

2.4 数据源初始化

Spring Boot 和 Hasor 本是两个独立的容器框架,做整合之后为了使用 Dataway 的能力需要把 Spring 中的数据源设置到 Hasor 中。首先新建一个 Hasor 的 模块,并且将其交给 Spring 管理。然后把数据源通过 Spring 注入进来。

@DimModule
@Component
public class ExampleModule implements SpringModule {
    @Autowired
    private DataSource dataSource = null;
    @Override
    public void loadModule(ApiBinder apiBinder) throws Throwable {
        apiBinder.installModule(new JdbcModule(Level.Full, this.dataSource));
    }
}

2.5 启动类添加注解

两个注解 @EnableHasor() 和 @EnableHasorWeb()

@EnableHasor()
@EnableHasorWeb()
@SpringBootApplication(scanBasePackages = { "net.example.hasor" })
public class ExampleApplication {
    public static void main(String[] args) {
        SpringApplication.run(ExampleApplication.class, args);
    }
}

应用在启动过程中会看到 Hasor Boot 的欢迎信息。

3.测试

根据配置的 ui 工作路径 http://localhost:8088/interface-ui/ 访问前端,账号密码均为 admin:

页面简单说明【大家用一下就会了】:

Dataway 提供了2中语言模式,可以使用强大的 DataQL 查询语言,也可以直接使用 SQL 语言(在 Dataway 内部 SQL 语言也会被转换为 DataQL 的形式执行。)添加一个DataQL并测试:

这里只是简单入门,接口开发要结合业务进行定制,Dataway的应用场景也要考虑好,DataQL及SQL相关开发具体可查看官方文档【DataQL 聚合查询引擎 SQL执行器】

最后放几个有用的连接:

目录
相关文章
|
19天前
|
Java Maven Docker
gitlab-ci 集成 k3s 部署spring boot 应用
gitlab-ci 集成 k3s 部署spring boot 应用
|
3天前
|
存储 JSON Ubuntu
时序数据库 TDengine 支持集成开源的物联网平台 ThingsBoard
本文介绍了如何结合 Thingsboard 和 TDengine 实现设备管理和数据存储。Thingsboard 中的“设备配置”与 TDengine 中的超级表相对应,每个设备对应一个子表。通过创建设备配置和设备,实现数据的自动存储和管理。具体操作包括创建设备配置、添加设备、写入数据,并展示了车辆实时定位追踪和车队维护预警两个应用场景。
18 3
|
9天前
|
前端开发 Java 程序员
springboot 学习十五:Spring Boot 优雅的集成Swagger2、Knife4j
这篇文章是关于如何在Spring Boot项目中集成Swagger2和Knife4j来生成和美化API接口文档的详细教程。
24 1
|
18天前
|
安全 算法 Java
数据库信息/密码加盐加密 —— Java代码手写+集成两种方式,手把手教学!保证能用!
本文提供了在数据库中对密码等敏感信息进行加盐加密的详细教程,包括手写MD5加密算法和使用Spring Security的BCryptPasswordEncoder进行加密,并强调了使用BCryptPasswordEncoder时需要注意的Spring Security配置问题。
58 0
数据库信息/密码加盐加密 —— Java代码手写+集成两种方式,手把手教学!保证能用!
|
9天前
|
Java Spring
springboot 学习十一:Spring Boot 优雅的集成 Lombok
这篇文章是关于如何在Spring Boot项目中集成Lombok,以简化JavaBean的编写,避免冗余代码,并提供了相关的配置步骤和常用注解的介绍。
41 0
|
9天前
|
JSON 算法 数据可视化
测试专项笔记(一): 通过算法能力接口返回的检测结果完成相关指标的计算(目标检测)
这篇文章是关于如何通过算法接口返回的目标检测结果来计算性能指标的笔记。它涵盖了任务描述、指标分析(包括TP、FP、FN、TN、精准率和召回率),接口处理,数据集处理,以及如何使用实用工具进行文件操作和数据可视化。文章还提供了一些Python代码示例,用于处理图像文件、转换数据格式以及计算目标检测的性能指标。
17 0
测试专项笔记(一): 通过算法能力接口返回的检测结果完成相关指标的计算(目标检测)
|
1月前
|
移动开发 JSON Java
Jmeter实现WebSocket协议的接口测试方法
WebSocket协议是HTML5的一种新协议,实现了浏览器与服务器之间的全双工通信。通过简单的握手动作,双方可直接传输数据。其优势包括极小的头部开销和服务器推送功能。使用JMeter进行WebSocket接口和性能测试时,需安装特定插件并配置相关参数,如服务器地址、端口号等,还可通过CSV文件实现参数化,以满足不同测试需求。
167 7
Jmeter实现WebSocket协议的接口测试方法
|
1月前
|
JSON 移动开发 监控
快速上手|HTTP 接口功能自动化测试
HTTP接口功能测试对于确保Web应用和H5应用的数据正确性至关重要。这类测试主要针对后台HTTP接口,通过构造不同参数输入值并获取JSON格式的输出结果来进行验证。HTTP协议基于TCP连接,包括请求与响应模式。请求由请求行、消息报头和请求正文组成,响应则包含状态行、消息报头及响应正文。常用的请求方法有GET、POST等,而响应状态码如2xx代表成功。测试过程使用Python语言和pycurl模块调用接口,并通过断言机制比对实际与预期结果,确保功能正确性。
159 3
快速上手|HTTP 接口功能自动化测试
|
18天前
|
JavaScript 前端开发 API
vue尚品汇商城项目-day02【9.Home组件拆分+10.postman测试接口】
vue尚品汇商城项目-day02【9.Home组件拆分+10.postman测试接口】
32 0
|
1月前
|
JavaScript 前端开发 测试技术
ChatGPT与接口测试
ChatGPT与接口测试,测试通过
36 5