【云原生专题】基于Docker+Neo4j图数据库搭建企业级分布式应用拓扑图

简介: 【云原生专题】基于Docker+Neo4j图数据库搭建企业级分布式应用拓扑图

正文


一、图数据库简介


图数据库是NoSQL领域中的一种,在处理相关联的大数据方面比关系型数据库天然具有优势,近年来在知识图谱、金融风控、社交关系等场景中发挥了重要的角色功能。同时,图数据库在AI领域,天然适合诸如记忆提取、关联推理、归纳探索等场景,成为了人工智能领域不可缺少的部分。


Neo4J是比较通用和常见的图数据库,具有社区版和企业版之分,普通学习使用免费的社区版即可。Neo4J还提供了一个Web访问的可视化执行与查询的界面,类似ElasticSearch一样,非常容易上手。Neo4J配套的DSL语言为Cypher查询语言,可以对数据进行高效地查询,同时语法上类似SQL,方便开发者快速上手。


二、Neo4J环境搭建


本文使用Docker来搭建Neo4J环境,需要提前在开发机上装好Docker Desktop。


首先访问DockerHub官网,查询Neo4J官方仓库,将远程镜像拉取到本地,默认情况下拉取的镜像是最新的社区版。

docker pull neo4j

然后现在本地找个目录存放neo4j数据库文件,这里以E:\docker-volume\neo4j-data为例,然后按照使用描述,执行启动命令:

docker run --publish=7474:7474 --publish=7687:7687 --volume=E:\docker-volume\neo4j-data:/data neo4j

等待片刻,容器就完成启动了,此时访问localhost:7474就能访问到neo4j的主页了,默认登录密码是neo4j/neo4j,首次登录后会要求修改默认密码。


三、创建系统架构


3.1 系统架构梳理


现有的系统在架构图中都表现为顶点,是一个实体,实体会包含若干属性,来对实体进行表述。比如“订单系统”是图中的一个顶点实体,该系统是用Java编写,首次部署时间是2020年1月1日,系统负责人是张三等等,这些都是这个系统的属性。我们对现有的系统做了下梳理,以表格的形式内容如下:

系统名称 类型 首次部署时间 系统负责人
订单系统 Java 2020-1-1 jack
商品系统 Python 2021-5-1 mason
淘宝商城 APP 2021-6-1 peter
闲鱼 小程序(MinPro) 2021-8-1 steve
商家管理平台 Web 2021-9-1 lisa
中台MQ MQ 2020-9-1 jane
每日精选 公众号(Public) 2021-4-25 lucy

这些系统中,订单系统和商品系统属于中台后端应用,淘宝、咸鱼、每日精选都是前端面向客户的应用,它们都调用中台的后端应用,商家管理平台是内网供作业人员使用的Web应用,也是调用的中台数据,中台每隔5分钟会推送热点商品数据通过MQ给到每日精选。


上面的关系描述不够直观,系统一旦多了,就可能乱的不行,所以我们需要通过图数据库来描述相互之间的关系。


下面,我们就可以基于如上梳理的关系,进行节点和关系的操作了。在操作之前,我们需要清理一下数据库中的内容,防止产生干扰。

MATCH (n) DETACH DELETE n;


3.2 系统节点的CRUD


增加节点

CREATE (n:Java {name:'订单系统',firstDeploy:'2020-1-1',leader:'jack'});
CREATE (n:Java {name:'商品系统',firstDeploy:'2021-5-1',leader:'mason'});
CREATE (n:App {name:'淘宝商城',firstDeploy:'2021-6-1',leader:'peter'});
CREATE (n:MinPro {name:'闲鱼',firstDeploy:'2021-8-1',leader:'steve'});
CREATE (n:Web {name:'商家管理平台',firstDeploy:'2021-9-1',leader:'lisa'});
CREATE (n:MQ {name:'中台MQ',firstDeploy:'2020-9-1',leader:'jane'});
CREATE (n:Public {name:'每日精选',firstDeploy:'2021-4-25',leader:'lucy'});

执行后,我们执行查询语句:

MATCH (n) RETURN n

得到的图如下:


00.png


创建系统节点

MATCH (n) WHERE n.name='闲鱼' DELETE n;
// 等价于
MATCH (n:MinPro{name:'闲鱼'}) DELETE n;

删除节点的属性

MATCH (n) WHERE n.name='闲鱼' REMOVE n.leader;
// 等价于
MATCH (n:MinPro{name:'闲鱼'}) REMOVE n.leader;

查询节点

// 根据节点的属性进行查询(更接近SQL语法,推荐)
MATCH (n) WHERE n.name='闲鱼' RETURN n;
// 等价查询语句如下,增加了节点的类型MinPro,查询结果更加准确
MATCH (n:MinPro{name:'闲鱼'}) RETURN n;


修改/新增节点属性

MATCH (n) WHERE n.name='闲鱼' SET n.leader='steve';


3.3 系统关系的CRUD


新增/修改关系(属性)

MATCH (a),(b) where a.name='闲鱼' AND b.name='商品系统' MERGE (a)-[:invoke]->(b) RETURN a,b;
MATCH (a:MinPro{name:'闲鱼'}),(b:Java{name:'订单系统'}) MERGE (a)-[:invoke]->(b) RETURN a,b;
MATCH (a),(b) where a.name='淘宝商城' AND b.name='商品系统' CREATE (a)-[:invoke]->(b) RETURN a,b; 
MATCH (a),(b) where a.name='淘宝商城' AND b.name='订单系统' CREATE (a)-[:invoke]->(b) RETURN a,b;   
MATCH (a),(b) where a.name='商品系统' AND b.name='中台MQ' CREATE (a)-[:produce]->(b) RETURN a,b; 
MATCH (a),(b) where a.name='每日精选' AND b.name='中台MQ' CREATE (a)-[:consume]->(b) RETURN a,b; 
// 也可以对关系增加属性
// MERGE语句会覆盖现有的关系,达到更新关系及其属性的目的
MATCH (a),(b) where a.name='商家管理平台' AND b.name='订单系统' MERGE (a)-[:invoke{since:2021-1-1}]->(b) RETURN a,b; 

然后执行查询语句:

MATCH (n) RETURN n

得到的图如下:


0.png


增加系统间的关系

删除关系

MATCH (a)-[r:consume]->(b) WHERE a.name='每日精选' AND b.name='中台MQ' DELETE r;

删除关系属性

MATCH (a)-[r:invoke]->(b) WHERE a.name='商家管理平台' AND b.name='订单系统' REMOVE r.since;

增加/更新关系属性

MATCH (a)-[r:invoke]->(b) WHERE a.name='闲鱼' AND b.name='商品系统' set r.since=2021;

查询关系

// 查询所有调用商品系统的关联系统
MATCH (n)-[r:invoke]->(b) WHERE b.name='商品系统' RETURN n;
// 查询所有调用商品系统的关联系统及其调用商品系统的关系
MATCH (n)-[r:invoke]->(b) WHERE b.name='商品系统' RETURN n,r,b;
// 查询所有和商品系统有关联的系统及其和商品系统的关系
MATCH (n)-[r]-(b) WHERE b.name='商品系统' RETURN n,r,b;

本文到此结束,下一篇会讲述如何使用SpringBoot+neo4j来实现本次的案例



相关实践学习
阿里云图数据库GDB入门与应用
图数据库(Graph Database,简称GDB)是一种支持Property Graph图模型、用于处理高度连接数据查询与存储的实时、可靠的在线数据库服务。它支持Apache TinkerPop Gremlin查询语言,可以帮您快速构建基于高度连接的数据集的应用程序。GDB非常适合社交网络、欺诈检测、推荐引擎、实时图谱、网络/IT运营这类高度互连数据集的场景。 GDB由阿里云自主研发,具备如下优势: 标准图查询语言:支持属性图,高度兼容Gremlin图查询语言。 高度优化的自研引擎:高度优化的自研图计算层和存储层,云盘多副本保障数据超高可靠,支持ACID事务。 服务高可用:支持高可用实例,节点故障迅速转移,保障业务连续性。 易运维:提供备份恢复、自动升级、监控告警、故障切换等丰富的运维功能,大幅降低运维成本。 产品主页:https://www.aliyun.com/product/gdb
相关文章
|
人工智能 关系型数据库 OLAP
光云科技 X AnalyticDB:构建 AI 时代下的云原生企业级数仓
AnalyticDB承载了光云海量数据的实时在线分析,为各个业务线的商家提供了丝滑的数据服务,实时物化视图、租户资源隔离、冷热分离等企业级特性,很好的解决了SaaS场景下的业务痛点,也平衡了成本。同时也基于通义+AnalyticDB研发了企业级智能客服、智能导购等行业解决方案,借助大模型和云计算为商家赋能。
1214 17
|
关系型数据库 MySQL 数据库连接
docker拉取MySQL后数据库连接失败解决方案
通过以上方法,可以解决Docker中拉取MySQL镜像后数据库连接失败的常见问题。关键步骤包括确保容器正确启动、配置正确的环境变量、合理设置网络和权限,以及检查主机防火墙设置等。通过逐步排查,可以快速定位并解决连接问题,确保MySQL服务的正常使用。
3140 82
|
SQL 数据库 Docker
【赵渝强老师】在Docker中运行达梦数据库
本文介绍了在Docker容器中部署达梦数据库(DM 8)的具体步骤,包括创建文件夹、下载安装包、导入镜像、启动容器、登录数据库及查看状态等操作。同时,通过视频讲解辅助理解。文中还分析了将数据库服务容器化的潜在问题,如数据安全性、硬件资源争用、网络带宽占用和额外隔离带来的挑战,指出数据库服务在生产环境中可能不适合容器化的原因。
2377 4
【赵渝强老师】在Docker中运行达梦数据库
|
关系型数据库 MySQL 数据库
Docker Compose V2 安装常用数据库MySQL+Mongo
以上内容涵盖了使用 Docker Compose 安装和管理 MySQL 和 MongoDB 的详细步骤,希望对您有所帮助。
1481 42
|
SQL 关系型数据库 网络安全
Navicat Premium 17 最新版下载与配置:5分钟完成企业级数据库工具部署
Navicat Premium 17 是一款支持多种主流数据库(如 MySQL、Oracle、PostgreSQL 等)的多数据库管理工具,提供可视化数据建模、SQL 编辑和数据同步等功能。试用版提供 14 天全功能体验,商业版支持跨平台使用。安装环境要求 Windows 10/11 或 macOS 12.0+,最低配置为 4GB 内存。下载并解压安装包后,按步骤启动安装程序、接受许可协议、自定义安装路径并完成安装。首次运行时需激活许可证并配置数据库连接。常见问题包括无法写入注册表、试用期续费及连接数据库权限问题。高级功能涵盖 SSH 通道加速、自动化任务调度和性能调优建议。
6637 20
|
中间件 关系型数据库 数据库
docker快速部署OS web中间件 数据库 编程应用
通过Docker,可以轻松地部署操作系统、Web中间件、数据库和编程应用。本文详细介绍了使用Docker部署这些组件的基本步骤和命令,展示了如何通过Docker Compose编排多容器应用。希望本文能帮助开发者更高效地使用Docker进行应用部署和管理。
544 19
|
SQL 关系型数据库 数据库
国产数据实战之docker部署MyWebSQL数据库管理工具
【10月更文挑战第23天】国产数据实战之docker部署MyWebSQL数据库管理工具
1279 4
国产数据实战之docker部署MyWebSQL数据库管理工具
|
存储 Cloud Native 块存储
EBS深度解析:云原生时代企业级块存储
企业上云的策略,从 Cloud-Hosting 转向 Serverless 架构。块存储作为企业应用上云的核心存储产品,将通过 Serverless 化来加速新的计算范式全面落地。在本话题中,我们将会介绍阿里云块存储企业级能力的创新,深入解析背后的技术细节,分享对未来趋势的判断。
1306 3
|
存储 NoSQL API
使用Py2neo进行Neo4j图数据库的增删改查操作
使用Py2neo进行Neo4j图数据库的增删改查操作
995 5
|
关系型数据库 MySQL 数据库
使用Docker部署的MySQL数据库,数据表里的中文读取之后变成问号,如何处理?
【10月更文挑战第1天】使用Docker部署的MySQL数据库,数据表里的中文读取之后变成问号,如何处理?
1046 3

热门文章

最新文章