【云原生专题】基于Docker+Neo4j图数据库搭建企业级分布式应用拓扑图

简介: 【云原生专题】基于Docker+Neo4j图数据库搭建企业级分布式应用拓扑图

正文


一、图数据库简介


图数据库是NoSQL领域中的一种,在处理相关联的大数据方面比关系型数据库天然具有优势,近年来在知识图谱、金融风控、社交关系等场景中发挥了重要的角色功能。同时,图数据库在AI领域,天然适合诸如记忆提取、关联推理、归纳探索等场景,成为了人工智能领域不可缺少的部分。


Neo4J是比较通用和常见的图数据库,具有社区版和企业版之分,普通学习使用免费的社区版即可。Neo4J还提供了一个Web访问的可视化执行与查询的界面,类似ElasticSearch一样,非常容易上手。Neo4J配套的DSL语言为Cypher查询语言,可以对数据进行高效地查询,同时语法上类似SQL,方便开发者快速上手。


二、Neo4J环境搭建


本文使用Docker来搭建Neo4J环境,需要提前在开发机上装好Docker Desktop。


首先访问DockerHub官网,查询Neo4J官方仓库,将远程镜像拉取到本地,默认情况下拉取的镜像是最新的社区版。

docker pull neo4j

然后现在本地找个目录存放neo4j数据库文件,这里以E:\docker-volume\neo4j-data为例,然后按照使用描述,执行启动命令:

docker run --publish=7474:7474 --publish=7687:7687 --volume=E:\docker-volume\neo4j-data:/data neo4j

等待片刻,容器就完成启动了,此时访问localhost:7474就能访问到neo4j的主页了,默认登录密码是neo4j/neo4j,首次登录后会要求修改默认密码。


三、创建系统架构


3.1 系统架构梳理


现有的系统在架构图中都表现为顶点,是一个实体,实体会包含若干属性,来对实体进行表述。比如“订单系统”是图中的一个顶点实体,该系统是用Java编写,首次部署时间是2020年1月1日,系统负责人是张三等等,这些都是这个系统的属性。我们对现有的系统做了下梳理,以表格的形式内容如下:

系统名称 类型 首次部署时间 系统负责人
订单系统 Java 2020-1-1 jack
商品系统 Python 2021-5-1 mason
淘宝商城 APP 2021-6-1 peter
闲鱼 小程序(MinPro) 2021-8-1 steve
商家管理平台 Web 2021-9-1 lisa
中台MQ MQ 2020-9-1 jane
每日精选 公众号(Public) 2021-4-25 lucy

这些系统中,订单系统和商品系统属于中台后端应用,淘宝、咸鱼、每日精选都是前端面向客户的应用,它们都调用中台的后端应用,商家管理平台是内网供作业人员使用的Web应用,也是调用的中台数据,中台每隔5分钟会推送热点商品数据通过MQ给到每日精选。


上面的关系描述不够直观,系统一旦多了,就可能乱的不行,所以我们需要通过图数据库来描述相互之间的关系。


下面,我们就可以基于如上梳理的关系,进行节点和关系的操作了。在操作之前,我们需要清理一下数据库中的内容,防止产生干扰。

MATCH (n) DETACH DELETE n;


3.2 系统节点的CRUD


增加节点

CREATE (n:Java {name:'订单系统',firstDeploy:'2020-1-1',leader:'jack'});
CREATE (n:Java {name:'商品系统',firstDeploy:'2021-5-1',leader:'mason'});
CREATE (n:App {name:'淘宝商城',firstDeploy:'2021-6-1',leader:'peter'});
CREATE (n:MinPro {name:'闲鱼',firstDeploy:'2021-8-1',leader:'steve'});
CREATE (n:Web {name:'商家管理平台',firstDeploy:'2021-9-1',leader:'lisa'});
CREATE (n:MQ {name:'中台MQ',firstDeploy:'2020-9-1',leader:'jane'});
CREATE (n:Public {name:'每日精选',firstDeploy:'2021-4-25',leader:'lucy'});

执行后,我们执行查询语句:

MATCH (n) RETURN n

得到的图如下:


00.png


创建系统节点

MATCH (n) WHERE n.name='闲鱼' DELETE n;
// 等价于
MATCH (n:MinPro{name:'闲鱼'}) DELETE n;

删除节点的属性

MATCH (n) WHERE n.name='闲鱼' REMOVE n.leader;
// 等价于
MATCH (n:MinPro{name:'闲鱼'}) REMOVE n.leader;

查询节点

// 根据节点的属性进行查询(更接近SQL语法,推荐)
MATCH (n) WHERE n.name='闲鱼' RETURN n;
// 等价查询语句如下,增加了节点的类型MinPro,查询结果更加准确
MATCH (n:MinPro{name:'闲鱼'}) RETURN n;


修改/新增节点属性

MATCH (n) WHERE n.name='闲鱼' SET n.leader='steve';


3.3 系统关系的CRUD


新增/修改关系(属性)

MATCH (a),(b) where a.name='闲鱼' AND b.name='商品系统' MERGE (a)-[:invoke]->(b) RETURN a,b;
MATCH (a:MinPro{name:'闲鱼'}),(b:Java{name:'订单系统'}) MERGE (a)-[:invoke]->(b) RETURN a,b;
MATCH (a),(b) where a.name='淘宝商城' AND b.name='商品系统' CREATE (a)-[:invoke]->(b) RETURN a,b; 
MATCH (a),(b) where a.name='淘宝商城' AND b.name='订单系统' CREATE (a)-[:invoke]->(b) RETURN a,b;   
MATCH (a),(b) where a.name='商品系统' AND b.name='中台MQ' CREATE (a)-[:produce]->(b) RETURN a,b; 
MATCH (a),(b) where a.name='每日精选' AND b.name='中台MQ' CREATE (a)-[:consume]->(b) RETURN a,b; 
// 也可以对关系增加属性
// MERGE语句会覆盖现有的关系,达到更新关系及其属性的目的
MATCH (a),(b) where a.name='商家管理平台' AND b.name='订单系统' MERGE (a)-[:invoke{since:2021-1-1}]->(b) RETURN a,b; 

然后执行查询语句:

MATCH (n) RETURN n

得到的图如下:


0.png


增加系统间的关系

删除关系

MATCH (a)-[r:consume]->(b) WHERE a.name='每日精选' AND b.name='中台MQ' DELETE r;

删除关系属性

MATCH (a)-[r:invoke]->(b) WHERE a.name='商家管理平台' AND b.name='订单系统' REMOVE r.since;

增加/更新关系属性

MATCH (a)-[r:invoke]->(b) WHERE a.name='闲鱼' AND b.name='商品系统' set r.since=2021;

查询关系

// 查询所有调用商品系统的关联系统
MATCH (n)-[r:invoke]->(b) WHERE b.name='商品系统' RETURN n;
// 查询所有调用商品系统的关联系统及其调用商品系统的关系
MATCH (n)-[r:invoke]->(b) WHERE b.name='商品系统' RETURN n,r,b;
// 查询所有和商品系统有关联的系统及其和商品系统的关系
MATCH (n)-[r]-(b) WHERE b.name='商品系统' RETURN n,r,b;

本文到此结束,下一篇会讲述如何使用SpringBoot+neo4j来实现本次的案例



相关实践学习
阿里云图数据库GDB入门与应用
图数据库(Graph Database,简称GDB)是一种支持Property Graph图模型、用于处理高度连接数据查询与存储的实时、可靠的在线数据库服务。它支持Apache TinkerPop Gremlin查询语言,可以帮您快速构建基于高度连接的数据集的应用程序。GDB非常适合社交网络、欺诈检测、推荐引擎、实时图谱、网络/IT运营这类高度互连数据集的场景。 GDB由阿里云自主研发,具备如下优势: 标准图查询语言:支持属性图,高度兼容Gremlin图查询语言。 高度优化的自研引擎:高度优化的自研图计算层和存储层,云盘多副本保障数据超高可靠,支持ACID事务。 服务高可用:支持高可用实例,节点故障迅速转移,保障业务连续性。 易运维:提供备份恢复、自动升级、监控告警、故障切换等丰富的运维功能,大幅降低运维成本。 产品主页:https://www.aliyun.com/product/gdb
相关文章
|
1月前
|
运维 Cloud Native 持续交付
深入理解云原生架构及其在现代企业中的应用
随着数字化转型的浪潮席卷全球,企业正面临着前所未有的挑战与机遇。云计算技术的迅猛发展,特别是云原生架构的兴起,正在重塑企业的IT基础设施和软件开发模式。本文将深入探讨云原生的核心概念、关键技术以及如何在企业中实施云原生策略,以实现更高效的资源利用和更快的市场响应速度。通过分析云原生架构的优势和面临的挑战,我们将揭示它如何助力企业在激烈的市场竞争中保持领先地位。
|
1月前
|
运维 Cloud Native 安全
云原生技术在现代企业中的应用与挑战####
本文探讨了云原生技术在现代企业IT架构中的关键作用,分析了其带来的优势和面临的主要挑战。通过实际案例分析,揭示了如何有效应对这些挑战,以实现业务敏捷性和技术创新的平衡。 ####
|
1月前
|
Cloud Native 持续交付 开发者
云原生技术在现代企业中的应用与实践####
本文深入探讨了云原生技术的核心概念及其在现代企业IT架构转型中的关键作用,通过具体案例分析展示了云原生如何促进企业的敏捷开发、高效运维及成本优化。不同于传统摘要仅概述内容,本部分旨在激发读者对云原生领域的兴趣,强调其在加速数字化转型过程中的不可或缺性,为后续详细论述奠定基础。 ####
|
1月前
|
Kubernetes Cloud Native 物联网
云原生技术在现代软件开发中的应用与挑战####
本文探讨了云原生技术的兴起背景、核心理念及其在现代软件开发中的广泛应用。通过具体案例分析,揭示了云原生架构如何促进企业数字化转型,并指出了在实施过程中面临的主要挑战及应对策略。 ####
|
1月前
|
人工智能 缓存 异构计算
云原生AI加速生成式人工智能应用的部署构建
本文探讨了云原生技术背景下,尤其是Kubernetes和容器技术的发展,对模型推理服务带来的挑战与优化策略。文中详细介绍了Knative的弹性扩展机制,包括HPA和CronHPA,以及针对传统弹性扩展“滞后”问题提出的AHPA(高级弹性预测)。此外,文章重点介绍了Fluid项目,它通过分布式缓存优化了模型加载的I/O操作,显著缩短了推理服务的冷启动时间,特别是在处理大规模并发请求时表现出色。通过实际案例,展示了Fluid在vLLM和Qwen模型推理中的应用效果,证明了其在提高模型推理效率和响应速度方面的优势。
云原生AI加速生成式人工智能应用的部署构建
|
1月前
|
Cloud Native JavaScript Docker
云原生技术:构建现代应用的基石
在数字化转型的浪潮中,云原生技术如同一艘承载梦想的航船,引领企业驶向创新与效率的新海域。本文将深入探索云原生技术的核心价值,揭示其如何重塑软件开发、部署和运维模式,同时通过一个简易代码示例,展现云原生应用的构建过程,让读者领略到云原生技术的魅力所在。
|
2月前
|
消息中间件 Cloud Native 持续交付
云原生技术在现代企业中的应用与优势###
本文深入探讨了云原生技术在现代企业中的具体应用及其带来的显著优势。随着云计算的普及,云原生作为一种新兴的技术架构,正逐渐成为企业数字化转型的关键驱动力。文章将详细介绍云原生的核心概念、主要技术组件以及在实际业务场景中的成功案例,旨在为读者提供一个全面且实用的参考框架,以便更好地理解和应用云原生技术。 ###
|
2月前
|
Cloud Native 持续交付 云计算
深入理解云原生技术及其在现代IT架构中的应用
在数字化浪潮的推动下,云原生技术已成为企业转型的关键。本文将通过浅显易懂的语言和生动的比喻,带领读者探索云原生的核心概念、优势以及如何在企业中实现云原生架构。我们将一起揭开云原生的神秘面纱,了解它如何助力企业快速适应市场变化,提升业务的灵活性和创新能力。
|
2月前
|
Cloud Native JavaScript Devops
云原生技术在现代软件开发中的应用与实践
本文将深入探讨云原生技术如何改变现代软件开发的格局。通过分析云原生的核心概念、优势以及在实际开发中的应用案例,我们将了解这一前沿技术如何助力企业快速适应市场变化,提高开发效率和系统稳定性。文章还将提供实用的代码示例,帮助开发者更好地理解和运用云原生技术。
|
2月前
|
Kubernetes Cloud Native Devops
云原生技术在现代软件开发中的应用与挑战####
云原生,这一词汇如同云计算浪潮中的灯塔,引领着技术革新的方向。本文旨在探讨云原生技术的核心概念、关键组件及其在现代软件开发中的实践应用,同时剖析面临的挑战与应对策略。通过深入分析Kubernetes、微服务架构、DevOps文化等要素,揭示云原生如何赋能企业实现高效、弹性的IT系统构建,并展望其未来发展趋势。 ####
21 0