备案控制台

翀举_个人页

翀举

文章

1

问答

0

视频

0

个人介绍

暂无个人介绍

擅长的技术

获得更多能力

通用技术能力：

暂时未有相关通用技术能力~

云产品技术能力：

Clouder
- Apsara Clouder云计算专项技能认证：云服务器ECS入门
  获得于2023-03-03 16:49:36
ACE
- 阿里云云计算架构师 ACE 认证
  获得于2024-08-30 16:59:07

阿里云技能认证

详细说明

文章
问答
视频

发表了文章 2024-05-27

Spline部署&测试

Spline是Spark的元数据管理和血缘追踪工具，通过Docke部署。安装涉及下载docker-compose.yml和.env文件，使用`docker compose up -d`命令启动，包括rest-server（核心，处理血缘数据并存储在ArangoDB）、arangodb（多模型数据库）、ui（Web服务）等组件。测试中使用pyspark进行血缘捕获，通过spark-submit命令指定Spline相关依赖并连接到Spline服务器。成功后，血缘数据可在Spline UI中查看。未来计划在DolphinScheduler上测试Spark SQL任务并启用血缘追踪。

暂无更多信息

发表了文章 2024-05-27

Spline部署&测试

正在加载, 请稍后...

滑动查看更多

正在加载, 请稍后...

暂无更多信息

正在加载, 请稍后...

暂无更多信息