回顾 2023,NebulaGraph 的这一年的变化

简介: 在整体上,从 v3.3.0 到 v3.6.0,NebulaGraph 的稳定性有了明显的提升;而最新的发行版 v3.6.0 版本,在性能上,针对图上常用的路径查询、多跳查询上,均有不同程度的性能提升,最高提升了 6 倍。

一年又过去了,感谢你和 NebulaGraph 一起又走过一个春夏秋冬。在这 365 天里,我们一起见证了 214 个 commit 带来的 NebulaGraph 3 个中版本的上线,它们分别是 v3.4.0、v3.5.0 和 v 3.6.0;除了内核经历了 3 个中版本的迭代之外,NebulaGraph 在 2023 年也迎来一大波新周边工具,以及已有周边工具的大更新。

由于篇幅的关系,现在我们来相对克制地了解下这 3 个版本和周边工具。

2023 年 NebulaGraph 的内核变更

一直以来,稳定性和高性能在 NebulaGraph 的产品规划中都是重中之重。今年,NebulaGraph 更是把稳定性作为第一优先级:在功能上,引入了 Memory Tracker 功能(该功能开发者分享了一篇从原理讲起的文章《内存管理实践之 Memory Tracker》);在测试上,进行了多轮的覆盖测试,同时引入了 fuzzer 等测试工具及方法,对 NebulaGraph 做了一次彻底的“全身体检",也纠正和限制了一些不符合预期的行为。

在整体上,从 v3.3.0 到 v3.6.0,NebulaGraph 的稳定性有了明显的提升;而最新的发行版 v3.6.0 版本,在性能上,针对图上常用的路径查询、多跳查询上,均有不同程度的性能提升,最高提升了 6 倍。

以下罗列了一些大家不可错过的新特性:

  • KILL SESSION 可终止执行过慢的查询语句;#pr5146
  • 支持在返回语句中使用像 v.tag 这样的表达式;#pr5440
  • 支持 UPDATE 语句中的json_extract函数;#pr5457
  • 支持在 EXPLAIN 输出中使用 TCK 格式;#pr5414
  • DML 支持参数;#pr5328
  • 支持使用 MATCH 子句检索 VID 或属性索引时使用变量;pr#5486 #5553
  • 优化 MATCH 语句查询不存在的属性时的性能;pr#5634
  • 增强了聚合函数中的属性裁剪功能;pr#5301
  • 提高了遍历执行器的性能;pr#5308
  • 优化了 FIND ALL PATH 性能;pr#5409
  • MATCH 支持 ID 集合;pr#5360
  • 重构了 GO planner;pr#5369
  • graphd 配置文件中添加了部分性能选项;pr#5463

如果你对各个 NebulaGraph 版本的具体的 release note 有兴趣,可以前往 GitHub 页面阅读各个版本的信息:https://github.com/vesoft-inc/nebula/releases

2023 年新晋周边工具

image

除了官方出品的周边工具之外,在 nebula-contrib 组织下收录了大量社区用户贡献的实用工具。而今年,这个组织下又有了新动态:

2023 年周边工具重大变化

不像 nebula-contrib 组织下的项目从零到一,下面这些大家熟悉的周边工具在 2023 年也迎来了大的功能迭代:

  • 可视化工具 nebula-studio,在 nebula-studio v3.7.0 版本中对 ARM 架构进行了适配,在
    pr#667 中优化了执行计划的可视化;
  • 数据导入工具 nebula-importer在 v4.0.0 版本中进行了重构,极大地提高了导入性能和导入配置文件的可读性;
  • 数据导入工具 nebula-exchange在 v3.4.0 版本支持了对 HDFS 配置文件的读取,在 v3.5.0 中支持了对数据源做预处理,v3.6.0 的 nebula-exchange 则支持了批量的删除和更新操作,最新的 v3.7.0 中 nebula-exchange 支持根据数据源获取模板配置文件;
  • 大数据工具 nebula-spark-connector 在 v3.6.0 对 Spark 3 进行了支持;
  • 大数据工具 nebula-flink-connector 在 3.5.0 对动态表 Sink 的增删改进行了支持;
  • 客户端 nebula-go 在 v3.4.0 支持了 JSON 格式的执行计划数据返回,在 v3.6.0 支持了 HTTP/2;
  • 客户端 nebula-java 在 v3.4.0 支持了 Session ID 的获取以及可 Ping 指定 Session,在 v3.5.0 支持配置 SessionPoolConfig.setReconnect() 来设定客户端是否进行现有可用服务的重连接,在 v3.6.1 支持了 HTTP/2;
  • 客户端 nebula-console 在 v3.4.0 支持了 ARM 架构下的 Docker 镜像,在 v3.6.0 支持了 HTTP/2;
  • K8s 运维工具 nebula-operator 在 v1.4.0 支持了备份恢复(将在 v1.9.0 发布定时备份),在 v1.5.0 支持了 mTLS、日志定时清理、init-container 等特性,在 v1.6.0 支持了 Zone 可用在云上多个可用区场景,在 v1.7.0 支持了 HPA、存储卷扩容;
  • 由 @CurvusY 维护的 NebulaGraph + Spring Boot 的数据库 ORM 框架 ngbatis 在 1.1.2 中支持了 nebula-java 的 session pool 以及使用 java 的继承关系实现数据库多标签的操作,而 v1.2.0 在 XML 中支持 ngql + include 的用法,拓展了 NebulaDaoBasic 的多个接口,v1.2.0-jdk17 中支持了 Spring Boot 3.x。

2023 年的 NebulaGraph 和 Doris 以及 KubeBlocks

2023 年的 NebulaGrpah 不只是专注自身的发展,也同其他的开源项目紧密合作,比如:高性能实时分析数据库 Apache Doris 和云原生数据基础设施管理平台 KubeBlocks。

  • Doris#19209 在这个 PR 中,知乎技术团队对 Doris 扩充图引擎 NebulaGraph,在多维分析和全文检索的基础上实现与图引擎的结合。
  • KubeBlocks#3944KubeBlocks#3981 两个 PR 完成 KubeBlocks 和 NebulaGraph 的集成,让更多的 K8s 爱好者们可以有更多的数据库部署选择。

感谢你对 NebulaGraph 的关注 (///▽///)

如果你有什么需求社区还未安排上,来和星云小姐姐 说道说道。

目录
相关文章
|
6月前
|
存储 数据建模 数据库
IOS开发数据存储:什么是 UserDefaults?有哪些替代方案?
IOS开发数据存储:什么是 UserDefaults?有哪些替代方案?
106 0
|
存储 Kubernetes NoSQL
使用 RKE 方式搭建 K8s 集群并部署 NebulaGraph
本文详细记录了如何用 REK 安装好 K8s 环境之后,再在此基础上安装图数据库 NebulaGraph。
449 0
|
6月前
|
存储 机器学习/深度学习 编解码
如何给图数据库 NebulaGraph 新增一种数据类型,以 Binary 为例
数据库通常会内置支持常用的数据类型,但特征处理又要用到 Embedding、Binary 类型,那么,如何在已有的数据类型中增加新的数据类型呢?
205 1
如何给图数据库 NebulaGraph 新增一种数据类型,以 Binary 为例
|
5月前
|
Python
Mandelbrot集的最新变化形态一览——MandelBox,Mandelbulb,Burning Ship,NebulaBrot
该文介绍了几种基于Mandelbrot集的衍生形态,包括Mandelbulb、MandelBox、Burning Ship和NebulaBrot。Mandelbulb是3D扩展,使用球坐标;MandelBox利用盒映射创造复杂形状;Burning Ship以复数模和实部迭代;NebulaBrot则结合多种分形特征。文中提供了简单的Python代码示例来生成这些图形,并提到了相关学习资源。
|
6月前
|
Kubernetes NoSQL 数据库
2023 年值得一读的技术文章 | NebulaGraph 技术社区
LLM 作为 2023 年技术圈的一大热点,Graph + RAG 如何更好地实践?让大家更好地了解图、知识图谱、大模型这一新的三元组呢?
129 0
2023 年值得一读的技术文章 | NebulaGraph 技术社区
|
弹性计算 监控 NoSQL
数据库重构之路,以 OrientDB 到 NebulaGraph 为例
如果你想尝鲜图数据库 NebulaGraph,记得去 GitHub 下载、使用、(^з^)-☆ star 它 -> GitHub;和其他的 NebulaGraph 用户一起交流图数据库技术和应用技能,留下「你的名片」一起玩耍呀~
106 0
|
弹性计算 监控 NoSQL
图数据库系统重构之路:从OrientDB迁移到NebulaGraph 真实案例分享
图数据库系统重构之路:从OrientDB迁移到NebulaGraph 真实案例分享
188 0
|
NoSQL 数据库 混合部署
图数据库 NebulaGraph 的内存管理实践之 Memory Tracker
数据库的内存管理是数据库内核设计中的重要模块,内存的可度量、可管控是数据库稳定性的重要保障。同样的,内存管理对图数据库 NebulaGraph 也至关重要。
161 0
|
存储 数据可视化 算法
揭秘可视化图探索工具 NebulaGraph Explore 是如何实现图计算的
在可视化图探索工具 NebulaGraph Explorer 3.1.0 版本中加入了图计算工作流功能,针对 NebulaGraph 提供了图计算的能力,同时可以利用工作流的 nGQL 运行能力支持简单的数据读取,过滤及写入等数据处理功能。 本文将简单分享下 NebulaGraph Explorer 中集成图计算的基本实现原理。
490 0
|
SQL NoSQL 关系型数据库
有了 ETL 数据神器 dbt,表数据秒变 NebulaGraph 中的图数据
数据处理是一大难题,如果你要从一个数据库迁移到另外一个数据库,这个问题一定会出现,只不过是成本高低问题。而本文则讲述了一个神奇的 ETL 工具它是如何处理不同结构的数据。
711 0
有了 ETL 数据神器 dbt,表数据秒变 NebulaGraph 中的图数据