AllData数据中台商业版-核心内参资料分享

本文涉及的产品
实时计算 Flink 版,5000CU*H 3个月
数据管理 DMS,安全协同 3个实例 3个月
推荐场景:
学生管理系统数据库
阿里云百炼推荐规格 ADB PostgreSQL,4核16GB 100GB 1个月
简介: 杭州奥零数据科技有限公司成立于2023年,专注于数据中台业务,维护开源项目AllData并提供商业版解决方案。AllData提供数据集成、存储、开发、治理及BI展示等一站式服务,支持AI大模型应用,助力企业高效利用数据价值。

🔥🔥 AllData大数据产品是可定义数据中台,以数据平台为底座,以数据中台为桥梁,以机器学习平台为中层框架,以大模型应用为上游产品,提供全链路数字化解决方案。

数据中台行业背景
随着数据量激增和数据处理技术飞跃,数据中台产品商业化进程加速,企业对其认知日益增强。数字经济蓬勃发展下,企业数字化转型需求迫切。我们有现成的AllData数据中台商业版软件,致力于实时数据处理与智能化分析场景,相信Data与AI是推动行业发展的新趋势。

数据中台转型与挑战
数据中台转型是企业数字化转型的关键步骤,旨在通过整合、管理、分析和应用数据资源,提升业务决策效率和创新能力。然而,转型过程中也面临诸多挑战,如数据孤岛、数据质量不高、技术选型复杂、组织架构调整困难等。克服这些挑战需要企业具备强大的数据治理能力、技术创新能力和组织变革能力,以实现数据中台的价值最大化。

快速集成与商业化
微信图片_20241202113319.png

数据中台通过快速集成多种数据源与先进技术,实现了数据的统一管理和高效利用,加速了企业数字化转型进程。其商业化发展迅猛,为企业提供了灵活的数据服务,助力企业挖掘数据价值,优化业务决策,同时推动了数据治理、分析、应用等领域的创新发展,形成了新的经济增长点。

AllData数据中台
AllData是一个强大的可定义数据中台项目,旨在通过数据平台为基础,数据中台为纽带,结合机器学习能力以及集成的大模型应用,提供一个从数据整合到分析展示的全链条数字化解决方案。

AllData数据中台亮点展示
01-坚持是融汇的经营理念一站式AllData数字化解决方案:集成大数据与AI领域的核心生态组件,实现全面融合与高效利用。
02-降本增效机器学习平台,解决依赖第三方商业版AI套件进行机器学习开发问题。
03-严控质量,筑就企业发展根基提供细分领域AllData数据化解决方案。

按需自定义化数据中台
AllData大数据中台架构图展示其模块化、灵活性的特点,允许企业根据实际需求选择和集成不同的组件或服务。以下是对AllData数据中台可插拔架构图的描述:
whiteboard_exported_image-3_副本2.png

数据中台可插拔架构图由多个可插拔的模块组成,比如WuJie+可插拔架构建设可定义数据中台、DataVines建设数据质量、Datahub/OpenMetaData元数据管理平台等这些模块,包括数据存储、数据处理、数据服务、数据应用等核心层。各模块之间通过标准的接口和协议进行通信,确保系统的灵活性和可扩展性。企业可以根据业务需求,选择性地启用或禁用某些模块,实现定制化的数据中台解决方案。
微信图片_20241202113518.jpg

AllData数据中台采用Java作为核心开发语言,并结合Vue等技术栈构建用户界面。其底层架构灵活,支持微前端(如Wujie架构)和可插拔的后端设计,确保系统的高度可扩展性和定制性。

AllData数据中台的调研选型

AllData数据中台集成了丰富的功能模块,覆盖了数据集成、数据质量管理、数据标准化、元数据管理、数据资产管理、数据服务、数据对比、BI报表、流程编排、系统管理、系统监控和运维管理等方面。
whiteboard_exported_image-4.png

AllData数据中台优势
数据中台在零售、金融、制造、医疗等行业有广泛应用,通过集成和分析各类数据,支持企业的精准营销、风险控制、生产优化等决策和运营优化,通过数据的集成与管理,实现数据的高效共享与复用,提升数据质量,降低重复建设成本,促进业务的快速响应和创新发展。
whiteboard_exported_image-3_副本.png

高效数据处理:AllData数据中台支持多种数据源的实时或批量集成,提供全面的数据质量评估和改进工具,保障数据分析的准确性。

灵活定制:作为一个开源项目,AllData降低了企业的技术门槛和成本,同时支持根据企业需求进行深度定制,满足不同业务场景的需求。

广泛应用场景:AllData数据中台适用于多种业务场景,包括但不限于金融行业的风险控制、客户分析和产品推荐,零售行业的库存管理、客户关系管理和市场营销策略优化,以及制造业的生产效率提升、质量控制和供应链管理等。

社区支持:AllData拥有活跃的社区和丰富的文档资源,为开发者提供了强大的支持。
持续更新:项目持续更新,引入最新的技术趋势,保持竞争力。

集成开源组件案例
数据中台商业版发布功能汇总
whiteboard_exported_image-6.png
whiteboard_exported_image-4_副本.png

奥零数据科技AllData公司团队未来工作规划
whiteboard_exported_image-3_副本4.png

奥零数据科技AllData公司团队在开发过程中的一些工作内容和未来计划。
1.技术创新:加大技术研发投入,持续优化算法,提高数据处理和分析的精度与效率。
2.市场拓展:积极寻找新客户,拓展业务范围,同时深化与现有客户的合作关系。
3.人才培养:加强团队培训和学习,提升团队整体技术水平,吸引更多优秀人才加入。
4.团队协作:优化团队协作机制,提高沟通效率,确保项目高质量完成。
5.客户服务:完善客户服务体系,提高客户满意度,为企业创造更大价值。

此外,团队还会分享一些典型案例,如可插拔架构案例,介绍如何提高效率和效率。最后,数据质量和数据管理的重要性,以及未来可能的发展方向。

AllData数据中台-主页面效果图
微信图片_20241022152206.png

核心功能一:Moat主应用

01-数据集成-项目管理
1_数据集成_项目管理.jpg

01-数据集成-数据源管理
2_数据集成_数据源管理.jpg

01-数据集成-注册中心
3_数据集成_注册中心.jpg

01-数据集成-单任务
4.1_数据集成_单任务.jpg
4.2_数据集成_单任务.jpg
4.3_数据集成_单任务.jpg
4.4_数据集成_单任务.jpg
4.5_数据集成_单任务.jpg
4.6_数据集成_单任务.jpg

01-数据集成-多任务
5_数据集成_多任务.jpg

01-数据集成-任务模版
6_数据集成_任务模版.jpg

01-数据集成-任务详情
7_数据集成_任务详情.jpg

01-数据集成-运行日志
8_数据集成_运行日志.jpg

01-数据集成-执行配置
9_数据集成_执行配置.jpg

01-数据质量-质量报告
10_数据质量_质量报告.jpg

01-数据质量-质量任务
11_数据质量_质量任务.jpg

01-数据质量-规制引擎
12_数据质量_规制引擎.jpg

01-数据质量-日志监控
13_数据质量_日志监控.jpg

01-数据质量-质量统计
14_数据质量_质量统计.jpg

01-数据标准-对比度统计
15_数据标准_对比度统计.jpg

01-数据标准-数据字典
16_数据标准_数据字典.jpg

01-数据标准-字典对比
17_数据标准_字典对比.jpg

01-数据标准-字典映射
18_数据标准_字典映射.jpg

01-元数据管理-数据授权
19_元数据管理_数据授权.jpg

01-元数据管理-数据字段
20_元数据管理_数据字段.jpg
alicdn.com/pic/developer-ecology/zjpopnwo3crqk_8902cea1dc854c15a6129fe9fa133105.jpg)

01-元数据管理-数据地图
21_元数据管理_数据地图.jpg

01-元数据管理-数据查询
22_元数据管理_数据查询.jpg

01-元数据管理-数据源
23_元数据管理_数据源.jpg

01-元数据管理-SQL控制台
24_元数据管理_SQL控制台.jpg

01-元数据管理-行级变更
25_元数据管理_行级变更.jpg

01-数据资产-数据管理
26_数据资产_数据管理.jpg

01-数据资产-数据模型
27_数据资产_数据模型.jpg

01-数据服务-API日志
28_数据服务_API日志.jpg

01-数据服务-API Mask
29_数据服务_API Mask.jpg

01-数据服务-数据接!
30数据服务数据接口.jpg

01-数据服务-服务接口
31_数据服务_服务接口.jpg

01-数据服务-服务日志
32_数据服务_服务日志.jpg

01-数据比对-数据库配置
33_数据比对_数据库配置.jpg

01-数据比对-调度任务
34_数据比对_调度任务.jpg

01-数据比对-任务配置
35_数据比对_任务配置.jpg

01-数据比对-任务实例
36_数据比对_任务实例.jpg

01-数据比对-调度日志
37_数据比对_调度日志.jpg

01-BI报表-数据看板
38_BI报表_数据看板.jpg

01-BI报表-数据大屏
39_BI报表_数据大屏.jpg

01-BI报表-数据集
40_BI报表_数据集.jpg

01-BI报表-数据图表
41_BI报表_数据图表.jpg

01-流程编排-流程实例-发起流程
42_流程编排_流程实例_发起流程.jpg

01-流程编排-流程实例-流程执行
43_流程编排_流程实例_流程执行.jpg

01-流程编排-流程实例-流程状态
44_流程编排_流程实例_流程状态.jpg

01-流程编排-流程实例-流程结束
45_流程编排_流程任务_流程结束.jpg

01-流程编排-流程实例-流程待办
46_流程编排_流程任务_流程待办.jpg

01-流程编排-业务流程
47_流程编排_业务流程.jpg

01-流程编排-流程定义
48_流程编排_流程定义.jpg

01-系统管理-用户管理
49_系统管理_用户管理.jpg

01-系统管理-角色管理
50_系统管理_角色管理.jpg

01-系统管理-菜单管理
51_系统管理_菜单管理.jpg

01-系统管理-部门管理
52_系统管理_部门管理.jpg

01-系统管理-岗位管理
53_系统管理_岗位管理.jpg

01-系统管理-字典管理
54_系统管理_字典管理.jpg

01-系统管理-任务调度
55_系统管理_任务调度.jpg

01-系统监控-在线用户
56_系统监控_在线用户.jpg

01-系统监控-操作日志
57_系统监控_操作日志.jpg

01-系统监控-异常日志
58_系统监控_异常日志.jpg

01-系统监控-SQL监控
59_系统监控_SQL监控.png

01-运维管理-服务器
60_运维管理_服务器.jpg

01-运维管理-应用管理
61_运维管理_应用管理.jpg

01-运维管理-部署管理
62_运维管理_部署管理.jpg

01-运维管理-部署备份
63_运维管理_部署备份.jpg

01-运维管理-数据库管理
64_运维管理_数据库管理.jpg

核心菜单二:数据平台

02-集群管理-总览
1.1_集群管理_总览.jpg
1.2_集群管理_总览.jpg

02-集群管理-集群列表
2_集群管理_集群列表.jpg

02-集群管理-主机管理
3_集群管理_主机管理.jpg

02-集群管理-主机管理-添加新主机
4_集群管理_主机管理_添加新主机.jpg

02-集群管理-服务管理-Flink
5_集群管理_服务管理_Flink.jpg

02-集群管理-服务管理-AlertManager
6_集群管理_服务管理_AlertManager.jpg

02-集群管理-服务管理-Promethues
7_集群管理_服务管理_Promethues.jpg

02-集群管理-服务管理-Grafana
8_集群管理_服务管理_Grafana.jpg

02-集群管理-告警管理-告警组管理
9_集群管理_告警管理_告警组管理.jpg

02-集群管理-告警管理-告警指标管理
10_集群管理_告警管理_告警指标管理.jpg

02-集群管理-系统管理-租户管理
11_集群管理_系统管理_租户管理.jpg

02-集群管理-系统管理-机架管理
12_集群管理_系统管理_机架管理.jpg

02-集群管理-系统管理-标签管理
13_集群管理_系统管理_标签管理.jpg

02-存储库管理
14_存储库管理.jpg

02-集群框架
15_集群框架.jpg

核心菜单三:数据平台K8S

  1. 基于开源项目CloudEon建设,简化kubernetes上大数据集群的运维管理,一款基于kubernetes的开源大数据平台,旨在为用户提供一种简单、高效、可扩展的大数据解决方案。
  2. CloudEon 将基于 Kubernetes 的资源安装部署开源大数据组件,实现开源大数据平台的容器化运行,您可减少对于底层资源的运维关注。
  3. 功能特性快速搭建大数据集群容器化运行大数据服务支持监控告警等功能支持配置修改等功能自动化运维可视化管理界面
    03-集群管理-查看集群
    1_集群管理_查看集群.jpg

03-集群管理-新增集群
2_集群管理_新增集群.jpg

apiVersion: v1
clusters:
- cluster:
    certificate-authority-data: LS0tLS1CRUdJTiBDRVJUSUZJQ0FURS0tLS0tCk1JSUMvakNDQWVhZ0F3SUJBZ0lCQURBTkJna3Foa2lHOXcwQkFRc0ZBREFWTVJNd0VRWURWUVFERXdwcmRXSmwKY201bGRHVnpNQjRYRFRJME1EUXhOakEzTXprd09Wb1hEVE0wTURReE5EQTNNemt3T1Zvd0ZURVRNQkVHQTFVRQpBeE1LYTNWaVpYSnVaWFJsY3pDQ0FTSXdEUVlKS29aSWh2Y05BUUVCQlFBRGdnRVBBRENDQVFvQ2dnRUJBTFl6ClM4cEpXSXBFTHhVTnlCc3gxbnpJREtPSWd3cGdwQmhSVFFKaW9SVllHNmJkei9oT3FiLzZGYzRGdExZS3lUUWMKSzZoNk1KNGQrMUhLUUNnYnBDRHRLRGRaZFZpZWxHNmZEODdhdUpuZDkxZG5jWEFFeHZFeGsrOUMrUURxOUNlVwpyM3NjSUpiOVRoZnRnL0ZxNWQ4OTZ5QlRJbks4TTRJcWJoRmRaZzVOck9BWUhFR2ZNK0ZiT0pvKzN6UHZsQnFkClhhQ1Nqc0VaZWxMZjViSGF0VFhyS0VmZllRWUluWUVQRHVwR0k2Q1NlTU5Zemp1R051MGRsWXR0bXJKcUVxcm0KeldtZ1pwMTFqVEhFTGlwZjBwU1ptNk52UGc5dWdHNVdOQXhqWnpISytMR3l6K2thNDZhUnVGNkgra0ZoOXVtNAozMlZXTGpwT2VBekc4RHZpanI4Q0F3RUFBYU5aTUZjd0RnWURWUjBQQVFIL0JBUURBZ0trTUE4R0ExVWRFd0VCCi93UUZNQU1CQWY4d0hRWURWUjBPQkJZRUZGWUNVUnoxYVlaVzduN01yVDFMRm9IOUdsWXNNQlVHQTFVZEVRUU8KTUF5Q0NtdDFZbVZ5Ym1WMFpYTXdEUVlKS29aSWh2Y05BUUVMQlFBRGdnRUJBR0tBWTR0OEpCOGdDeE1Fc0JFegoyL0U2UWhXeHYvaXJNR0dPSi93M3BiMFRkK2FpWktGOXhPVEltQW5lbkp1N0l1VFJKV0dBOVJaTEVjbDNPenRLCms1RndKM1d6aTh3ZmJHb2RwdDNXaGhmN2FLMG9pdWRuV0M4RVBWZFJ0c0h5TWpFbWRNemJaWG1PMi81a0xldWYKOG4rdFdHNTJiZVowMEN1emRMa2drQ1VNbytaRjRXUkJsSHZrNDBiNFVabFVnQzBWS2c0YktIWW1pNWdHWXN3eQpEWmd3WTF4eFdXODJTdERZVGk0a3g3eDhqa2diMVJpWmllTGRJeUxkVEdkZGwxbVhGVC81dXFYbzZLM0M4QXIvCllWeklIVG5EOThnNXMrUWxsL01vRTNPdXEyMVdZcTJRMWxzcDBMbWttV01NTXJtVjZLNFlJL21HK2FHdlFkMzEKeitZPQotLS0tLUVORCBDRVJUSUZJQ0FURS0tLS0tCg==
    server: https://lb.kubesphere.local:6443
  name: cluster.local
contexts:
- context:
    cluster: cluster.local
    user: kubernetes-admin
  name: kubernetes-admin@cluster.local
current-context: kubernetes-admin@cluster.local
kind: Config
preferences: {}
users:
- name: kubernetes-admin
  user:
    client-certificate-data: LS0tLS1CRUdJTiBDRVJUSUZJQ0FURS0tLS0tCk1JSURJVENDQWdtZ0F3SUJBZ0lJR1UrVGZQYmcvSXN3RFFZSktvWklodmNOQVFFTEJRQXdGVEVUTUJFR0ExVUUKQXhNS2EzVmlaWEp1WlhSbGN6QWVGdzB5TkRBME1UWXdOek01TURsYUZ3MHlOVEEwTVRZd056TTVNVEZhTURReApGekFWQmdOVkJBb1REbk41YzNSbGJUcHRZWE4wWlhKek1Sa3dGd1lEVlFRREV4QnJkV0psY201bGRHVnpMV0ZrCmJXbHVNSUlCSWpBTkJna3Foa2lHOXcwQkFRRUZBQU9DQVE4QU1JSUJDZ0tDQVFFQXFWcDhHeHdZRUhGNjhaR1oKTTQ5V2V4MGIxZldNc0tQdUxVZExIVzhyTFpBanA0RHY5NmdDaGl1ajBFN3RYdkpPbmVEem5vZ2gzMDRHV2lBLworeC8wWDBsdWlFWHc1aDVQTHBhQ25MR2t2ZGkyUzNLZG5IUzBsRmdHZ3lDQmpqUTh5T3FDcklGVE1pT01DZGlWCnRhNjA2Z3NRVm8rZDdvbzE3TVFqTFdJRHc3WkpvaTNCOHdVemx1THhWKzkwbVMwdEVqMnhYZTNOUjQwSGZVcUUKSThmdVFlbnVhLzVXYTdYWmRxNko3RU5lL0wwelBqNzRseldzTjZKWTNBQy9ERmRXYnlyWWNZZ0dwK2wxVktENgo0aE03WHZYV0hhSm5HK1l5dGVuYmxWajQvRENaSzNIRDlkRGNweno0cTdYOW1meEt5SmpEcmdHMzFRWStLWmJUCmMvSHR6UUlEQVFBQm8xWXdWREFPQmdOVkhROEJBZjhFQkFNQ0JhQXdFd1lEVlIwbEJBd3dDZ1lJS3dZQkJRVUgKQXdJd0RBWURWUjBUQVFIL0JBSXdBREFmQmdOVkhTTUVHREFXZ0JSV0FsRWM5V21HVnU1K3pLMDlTeGFCL1JwVwpMREFOQmdrcWhraUc5dzBCQVFzRkFBT0NBUUVBZzdIdFpUMXBwQ0hVamt3ZUh4MlNrRm84Nlg2Q2JuUWRKa0l1Cm5Jbkk3MnMyU2xZNVFQb3Y3ZnIxdzVWZWE1VFBsV1N3ellRSHdmak9PMlpUTHFBVk5iNE1oKzVNWXdVS0ZSTVcKY2tBTFB0dEFwK3IrMHAwajhVVnNVazcwMDVZN0I5RDNYZHNNeWlFRkNXS0h5VkpodzZxU3M3aFJsbFJ6NTlGcQpMK0FCL0lPWUVRTkJaQkxkTkpvMloxN0hiM2dEWlZUdElUV3V6a3BQV3BBeURnVTVWOFpjWjRNdHZaWW5MMHc2CmZ3STlQWCt2c2YwOHl2UklFbUI1RkZtcThVZ2lrUkVpQXpKWVNMTmpFZjVpTXZRbUcvM2lQU2JhZWlQeE1Ddk0KdGhVbHNyMWhLWmU2b0V1aXYzWktvQTJhdGN1dkJOZjFzR2Z4T2g3YytJRENIc2ZTZXc9PQotLS0tLUVORCBDRVJUSUZJQ0FURS0tLS0tCg==
    client-key-data: LS0tLS1CRUdJTiBSU0EgUFJJVkFURSBLRVktLS0tLQpNSUlFcEFJQkFBS0NBUUVBcVZwOEd4d1lFSEY2OFpHWk00OVdleDBiMWZXTXNLUHVMVWRMSFc4ckxaQWpwNER2Cjk2Z0NoaXVqMEU3dFh2Sk9uZUR6bm9naDMwNEdXaUEvK3gvMFgwbHVpRVh3NWg1UExwYUNuTEdrdmRpMlMzS2QKbkhTMGxGZ0dneUNCampROHlPcUNySUZUTWlPTUNkaVZ0YTYwNmdzUVZvK2Q3b28xN01RakxXSUR3N1pKb2kzQgo4d1V6bHVMeFYrOTBtUzB0RWoyeFhlM05SNDBIZlVxRUk4ZnVRZW51YS81V2E3WFpkcTZKN0VOZS9MMHpQajc0Cmx6V3NONkpZM0FDL0RGZFdieXJZY1lnR3ArbDFWS0Q2NGhNN1h2WFdIYUpuRytZeXRlbmJsVmo0L0RDWkszSEQKOWREY3B6ejRxN1g5bWZ4S3lKakRyZ0czMVFZK0taYlRjL0h0elFJREFRQUJBb0lCQUIzM3VoQmVCMUFabEtUYwptOXlJMThmUFhkYWRyZml2K1h5ZnFnWWFYdXlnSGY4TkRPbXBIRkU3dGJBdDEwayszWFNJa3ZPUnFWVEhqTTR6CitMNXFhQ2JZYXF2SW5KbEw4YjBQdXlzWk1FcTc1MzR3V1AyUGxVak96dEF6VjFtZm1zWCs0WUsvRzhhNmpaUk0KZENtRE1kWmNnTmFnY1ZUOXRnOGdvZ3pzMURlMFoxMkN1aHg5ejRyYk1Kek9RQmM5c2YxYmVtd25HcnFMb0hWNAp3YTA4SitLRHlXc2VXSzZOTElYTFIvZDkzejkxMGZtQk9GUWJIRkNrUHg3bHEvZEZ5ZDN6bnc5QVBROTVuWnZ5Cmxrb2tCVE50WnNhcGZNbis0dUNjQXIvUEMzZlBqc2RJU0JZZGFQeUNiNDEzWnI4UlVlcHV3WnJuTExub29WU2YKbTArYnVVRUNnWUVBekpZVTNIbEt3OWc0bDVWWmdnS1lOV0w1WHVMRlMrRFlQWVExbHFIa0VxY1NrSmtJaWdybgpxQ2tNd1pnNzhITVlOZ3FBMWJqeWIvOWtxbit2emUwd1YxR1J1VWgwZUpZanJMRGFqUU16S2hkOERhTG41SGlYClIvTTU0Nmtzd3NMQVJKQkkzakR4R2VuZUovYUVpVzNPSm9WWGNCNTd4cFJHdFFlTlM0cHR1ZkVDZ1lFQTArbTUKbGhjVUNXK2ZOdkxNd3VWa3Fiemdhc1Y0MW53V3RrMWhVeTc3TmM4cVhtWnNsaW85Y29NMkp0VytUZHdkTFJNdApvNW03ci93WTNhUXlKcFo0cTNWVmpRZG42dUN2aDlhUWlpZCtmV25FTnVWQlQzVktMSHpwYThDYUVrU1YvN3VGCkdHWkxramlya1VvV2Z2VHRCWS96S0w1SVFIb2liTWlSNk9Hb05aMENnWUVBak56NVdDU2JlZVV5Y2d4L0tLa28KcS9tTndldFo5VGpIS3ZRUkFicE9FeG0rQ3BtVDY1ZytrT1pTeGlsUGUrdURUQkpIU3VDZzdNUm9SNHpMTzNxSQp3bGFEZzVPRHZsT0NGTEZnaVo4ZVoyanNIV2VCU3lwTTMxbDFEbSs1UmhCWjJkdU9rSTRhTThGM0dRVC9sTEJxCk5OT3l0SndJbFY0YW9TS21BdEU1WThFQ2dZQUVYS3BDU2FWUzhHWkJsa3Zhc3lnWVNsZ0FPcUpiSCtERHplSHoKK1dLWVgvUktUeWRyQytHSjZ1T0JkeUxjcld3NFVrMjlNVnZvcW5MRWxTMm5GNi9TTDY4Y0lRdmxqTXh3S2wxOQpTb1RUQmd0UTZmVW5NbzNkVHBEcmMrSjMvOHRxb1N5RExRL2ZLYVYyYnlUNVpnYys5eENWUlIxdG5sWDVFVVBYCm5GVi9EUUtCZ1FETG1vSXRJNzNIb2tmbmkzOFdSU29IazE1U2ZxK2VXdzRiRnlYajdUcnFIc2RzdXB5YlpYaVMKY3dnRnBhYllsRkZLSXhUVmluVUlqMzFpbTVmc01yT2VLd0VaY3FnV0FMVUpWRkQzRk1ETGNiRmR5R0M4akRTcApwdWN0cjMyY0RJS2lNaWFZcGRNZ3k5WStmc3FMb1Bhb2Y0RGdNSmxOZmFCMFduMU1uMTRGcnc9PQotLS0tLUVORCBSU0EgUFJJVkFURSBLRVktLS0tLQo=

03-集群管理-集群实例-节点管理
3_集群管理_集群实例_节点管理.jpg

03-集群管理-集群实例-服务管理
4_集群管理_集群实例_服务管理.jpg

03-集群管理-集群实例-指令列表
5_集群管理_集群实例_指令列表.jpg

03-集群管理-集群实例-告警管理
6_集群管理_集群实例_告警管理.jpg

03-集群管理-集群实例-日志管理
7_集群管理_集群实例_日志管理.jpg

核心菜单四:实时开发

1、AllData实时开发功能基于开源项目StreamPark建设。
2、StreamPark提供了一系列快捷 API 和 Connector,开箱即用,作业状态自动追踪,快速完成作业的开发和管理。同时支持 Flink & Spark,无缝支持流式处理和批处理,连接互通,创造无限可能。
3、StreamPark 是一个流处理应用程序开发管理框架,旨在轻松构建和管理流处理应用程序,提供使用Flink 和Spark 编写流处理应用的开发框架和一站式实时计算平台,核心能力包括不限于应用开发、部署、管理、运维、实时数仓等。
4、StreamPark 为流处理作业提供全生命周期支持,从开发到部署,集众多功能于一身,是一站式流处理平台。

04-开发管理-项目管理
1_开发管理_项目管理.jpg

04-开发管理-作业管理
2.1_开发管理_作业管理.jpg
2.2_开发管理_作业管理.jpg

CREATE TABLE doris_table (
    cid INT,
    sid INT,
    name STRING,
    cls STRING,
    score INT,
    PRIMARY KEY (cid) NOT ENFORCED
) WITH (
'connector' = 'doris',
'fenodes' = '127.0.0.1:8030' ,
'table.identifier' = 'test.scoreinfo',
'username' = 'root',
'password'=''
);




CREATE TABLE JDBC_table (
  id BIGINT,
  name STRING,
  age INT,
  status BOOLEAN,
  PRIMARY KEY (id) NOT ENFORCED
) WITH (
   'connector' = 'jdbc',
   'url' = 'jdbc:mysql://localhost:3306/mydatabase',
   'table-name' = 'users',
   'username' = 'root',
   'password' = '123456'
);
--可选: 'sink.parallelism'='1',
--可选: 'lookup.cache.ttl'='1000s',

04-开发管理-变量管理
3_开发管理_变量管理.jpg

04-设置中心-系统管理
4_设置中心_系统管理.jpg

04-设置中心-告警设置
5_设置中心_告警设置.jpg

04-设置中心-Flink版本
6_设置中心_Flink版本.jpg

04-设置中心-Flink集群
7_设置中心_Flink集群.jpg

04-设置中心-扩展链接
8_设置中心_扩展链接.jpg

04-设置中心-Yarn队列
9_设置中心_Yarn队列.jpg

04-系统设置-用户管理
10_系统设置_用户管理.jpg

04-系统设置-Token管理
11_系统设置_Token管理.jpg

‍04-系统设置-成员管理
12_系统设置_成员管理.jpg

04-系统设置-团队管理
13_系统设置_团队管理.jpg

04-系统设置-角色管理
14_系统设置_角色管理.jpg

核心菜单五:实时开发IDE
05-数据开发-项目
1_运维中心_任务实例.jpg

05-运维中心-任务实例
2_运维中心.jpg

05-注册中心-集群-Flink实例
3_注册中心_集群_Flink实例.jpg

05-注册中心-集群-集群配置
4_注册中心_集群_集群配置.jpg

05-注册中心-数据源
5_注册中心_数据源.jpg

05-注册中心-告警-告警实例
6_注册中心_告警_告警实例.jpg

05-注册中心-告警-告警组
7_注册中心_告警_告警组.jpg

05-注册中心-告警-告警模版
8_注册中心_告警_告警模板.jpg

05-注册中心-文档
9_注册中心_文档.jpg

05-注册中心-全局变量
10_注册中心_全局变量.jpg

05-注册中心-Git项目(Beta)‍‍
11_注册中心_Git项目(Beta).jpg

05-注册中心-UDF
12_注册中心_UDF.jpg

05-注册中心-资源
‍‍13_注册中心_资源.jpg

05-认证中心-用户‍
14_认证中心_用户.jpg

05-认证中心-角色‍
15_认证中心_角色.jpg

05-认证中心-菜单
16_认证中心_菜单.jpg

05-认证中心-行权限
17_认证中心_行权限.jpg

05-认证中心-租户
18_认证中心_租户.jpg

05-认证中心-令牌
19_认证中心_令牌.jpg

05-配置中心-系统日志
20_配置中心_系统日志.jpg

05-配置中心-告警策略
21_配置中心_告警策略.jpg

05-监控-服务端监控
22_监控_服务端监控.jpg

核心菜单六:离线开发

06-项目
微信图片_20241015103027.png

06-项目-项目管理
微信图片_20241015103037.png

06-项目管理-工作流关系
微信图片_20241015103041.png

06-项目管理-工作流定义
微信图片_20241015103046.png

06-项目管理-工作流详情
微信图片_20241015103050.png

06-项目管理-工作流实例
微信图片_20241015103055.png

06-项目管理-工作流定时
微信图片_20241015103100.png

06-项目管理-任务定义
微信图片_20241015103104.png

06-项目管理-任务实例
微信图片_20241015103109.png

06-资源-文件管理
微信图片_20241015103113.png

06-资源-UDF管理-资源管理
微信图片_20241015103118.png

06-资源-UDF管理-函数管理
微信图片_20241015103122.png

06-资源-任务组管理-任务组配置
微信图片_20241015103125.png

06-资源-任务组管理-任务组队列
微信图片_20241015103129.png

06-质量-任务结果
微信图片_20241015103132.png

06-质量-规制管理
微信图片_20241015103137.png

06-数据源
微信图片_20241015103140.png

06-监控-服务管理-Master
微信图片_20241015103144.jpg

06-监控-服务管理-Worker ‍
微信图片_20241015103148.png

06-监控-服务管理-DB
微信图片_20241015103152.png

06-监控-统计管理-Statistics
微信图片_20241015103156.png

06-监控-统计管理-审计日志
微信图片_20241015103200.png

06-安全-租户管理
微信图片_20241015103205.jpg

06-安全-令牌管理
微信图片_20241015103209.png

核心菜单七:数据质量平台

07-数据源管理-数据源实例
1_数据源管理_数据源实例.jpg

07-数据源管理-质量大盘
2_数据源管理_质量大盘.jpg

07-数据源管理-数据目录
3_数据源管理_数据目录.jpg

07-数据源管理-作业管理-数据质量作业
11.jpg
12.png

07-数据源管理-作业管理-数据比对作业
21.png
22.png

07-数据源管理-作业执行记录
6.1_数据源管理_作业执行记录.jpg
6.2_数据源管理_作业执行记录.jpg

07-告警管理-SLA管理
7_告警管理_SLA管理.jpg

07-错误数据管理-存储管理
8_错误数据管理_存储管理.jpg

07-用户管理-用户管理
9_用户管理_用户管理.jpg

07-标签管理-标签分类
10_标签管理_标签分类.jpg

07-参数管理
11_参数管理.jpg

核心菜单八:BI平台

08-数据视图-数据图表
1_数据视图_数据图标.png

08-数据视图-BI平台仪表盘
2  BI平台仪表盘.png

08-数据视图-BI图标测试
3  BI图表测试.png

08-数据视图-图表演示
4  图表演示.jpeg

08-数据视图-BI视图
5  BI视图.png

08-数据视图-新建计算字段
7_数据视图_新建计算字段.png

08-数据视图- SQL视图
8_数据视图_SQL视图.png

08-数据源-数据源管理
9_数据源_数据源管理.png

08-定时任务-定时任务管理
10_定时任务_定时任务管理.png

08-角色与成员-角色管理
11_角色与成员_角色管理.png

08-权限-资源视图- BI可视化
12_权限_资源视图_BI可视化.png

核心菜单九:元数据管理

09-元数据资产-数据库
01元数据资产-数据库.jpg

09-元数据资产-数据模式
02元数据资产-数据模式.jpg

09-元数据资产-活动信息流
03元数据资产-活动信息流.jpg

09-元数据资产-样本数据
04元数据资产-样本数据.jpg

09-元数据资产-样本数据-分析器提取
05元数据资产-样本数据-分析器提取.jpg

09-元数据资产-查询
06元数据资产-查询.jpg

09-元数据资产-查询-添加查询
07元数据资产-查询-添加查询.jpg

09-元数据资产-数据分析质控-数据表分析
08元数据资产-数据分析质控-数据表分析.jpg

09-元数据资产-数据分析质控-列分析
09元数据资产-数据分析质控-列分析.jpg

09-元数据资产-数据分析质控-数据质控
10元数据资产-数据分析质控-数据质控.jpg

09-数据分析质控-数据质控测试
11数据分析质控-数据质控测试.jpg

09-元数据资产-血缘关系
12元数据资产-血缘关系  .jpg

09-元数据资产-自定义属性
13元数据资产-自定义属性.jpg

09-元自定义属性-文档、
14自定义属性-文档.jpg

09-元数据检测
15元数据检测.jpg

09-元数据洞察-数据资产
16元数据洞察-数据资产.jpg

09-元数据洞察-应用分析
17元数据洞察-应用分析.jpg

09-元数据洞察-KPIs
18元数据洞察-KPIs.jpg

09-元数据工作区-添加元数据工作区
19元数据工作区-添加元数据工作区.jpg

09-元数据系统-术语库-添加术语
20元数据系统-术语库-添加术语.jpg

09-元数据系统-分类-添加分类
21元数据系统-分类-添加分类.jpg

09-元数据拾取-服务+团队和用户管理
22元数据拾取-服务+团队和用户管理.jpg

09-元数据拾取-服务
23元数据拾取-服务.jpg

09-元数据拾取-团队和用户管理
24元数据拾取-团队和用户管理 .jpg

09-元数据拾取-团队和用户管理-团队
25元数据拾取-团队和用户管理-团队.jpg

09-元数据拾取-团队和用户管理-角色
26元数据拾取-团队和用户管理-角色.jpg

09-元数据拾取-团队和用户管理-策略
27元数据拾取-团队和用户管理-策略.jpg

09-元数据拾取-团队和用户管理-用户
28元数据拾取-团队和用户管理-用户.jpg

09-元数据拾取-团队和用户管理-管理员
29元数据拾取-团队和用户管理-管理员.jpg

核心菜单十:指标体系

10-问答对话-算指标
1_问答对话_算指标.jpg

10-问答对话-做圈选
2_问答对话_做圈选.jpg

10-问答对话-来闲聊
3_问答对话_来闲聊.jpg

10-助理管理
4_助理管理.jpg

10-助理管理-新建助理-基本信息
5_助理管理_新建助理_基本信息.jpg

10-助理管理-大模型配置
6_助理管理_新建助理_大模型配置.jpg

10-助理管理-提示词配置
7_助理管理_新建助理_提示词配置.jpg

10-助理管理-工具管理-新增工具
8_助理管理_新建助理_工具管理_新增工具.jpg

10-助理管理-记忆管理
9_助理管理_新建助理_记忆管理.jpg

10-插件管理
10_插件管理.jpg

10-插件管理-新建插件
11_插件管理_新建插件.jpg

10-指标管理-模型管理-列表
12_指标管理_模型管理_列表.jpg

10-指标管理-模型管理-画布
13_指标管理_模型管理_画布.jpg

10-指标管理-模型管理-创建模型
14_指标管理_模型管理_创建模型.jpg

10-指标管理-模型管理-快速创建
15_指标管理_模型管理_快速创建.jpg

10-指标管理-模型管理- SQL脚本
16_指标管理_模型管理_SQL脚本.jpg

10-模型管理-指标管理
17_指标管理_模型管理_指标管理.jpg

10-模型管理-指标管理-创建指标
18_指标管理_模型管理_指标管理_创建指标.jpg

10-模型管理-维度管理
19_指标管理_模型管理_ 维度管理.jpg

10-模型管理-维度管理-创建维度
20_指标管理_模型管理_维度管理_创建维度.jpg

10-模型管理-权限管理
21_指标管理_模型管理_权限管理.jpg

10-模型管理-权限管理-新建授权
22_指标管理_模型管理_权限管理_新建授权.jpg

10-模型管理-推荐问题
23_指标管理_模型管理_推荐问题.jpg

10-指标管理-数据集管理
24_指标管理_数据集管理.jpg

10-指标管理-数据集管理-创建数据集
25_指标管理_数据集管理_创建数据集.jpg

10-指标管理-标签对象管理
26_指标管理_标签对象管理.jpg

10-指标管理-标签对象管理-新建标签对象
27_指标管理_新建标签对象.jpg

10-指标管理-术语管理
28_指标管理_术语管理.jpg

10-指标管理-术语管理-新建术语
29_指标管理_新建术语.jpg

10-指标血缘
30_指标血缘.jpg

10-指标检索
31_指标检索.jpg

10-指标检索-基础信息
32_指标检索_基础信息.jpg

10-指标检索-指标探索
33_指标检索_指标探索.jpg

10-标签市场
34_标签市场.jpg

10-数据库管理
35_数据库管理.jpg

10-数据库管理-创建数据库链接
36_数据库管理_创建数据库链接.jpg

10-系统设置
37_系统设置.jpg

相关实践学习
阿里云百炼xAnalyticDB PostgreSQL构建AIGC应用
通过该实验体验在阿里云百炼中构建企业专属知识库构建及应用全流程。同时体验使用ADB-PG向量检索引擎提供专属安全存储,保障企业数据隐私安全。
AnalyticDB PostgreSQL 企业智能数据中台:一站式管理数据服务资产
企业在数据仓库之上可构建丰富的数据服务用以支持数据应用及业务场景;ADB PG推出全新企业智能数据平台,用以帮助用户一站式的管理企业数据服务资产,包括创建, 管理,探索, 监控等; 助力企业在现有平台之上快速构建起数据服务资产体系
相关文章
|
2月前
|
存储 机器学习/深度学习 数据采集
推荐| AllData数据中台开源项目
杭州奥零数据科技有限公司成立于2023年,专注于数据中台业务,维护开源项目AllData并提供商业版解决方案。AllData提供数据集成、存储、开发、治理及BI展示等一站式服务,支持AI大模型应用,助力企业高效利用数据价值。
推荐| AllData数据中台开源项目
|
4月前
|
数据采集 存储 数据库
从零到一建设数据中台(番外篇)- 数据中台UI欣赏
从零到一建设数据中台(番外篇)- 数据中台UI欣赏
79 0
从零到一建设数据中台(番外篇)- 数据中台UI欣赏
|
5月前
|
存储 分布式计算 大数据
从零到一建设数据中台 - 架构概览
从零到一建设数据中台 - 架构概览
120 1
|
6月前
|
数据采集 数据管理 大数据
推荐 | AllData开源数据中台技术分享
AllData数据中台架构师团队全面解析开源项目[alldata](https://github.com/alldatacenter/alldata),涵盖功能设计、架构分析及源码解读。团队分享了项目总结、发展规划,推荐关注公众号“大数据商业驱动引擎”以获取更多信息。他们讨论了数据治理、调度引擎、商业化探索及未来规划,涉及元数据管理、数据安全、Airflow调度引擎等。此外,还介绍了数据平台功能,如用户管理、权限控制,并提到了商业化版本的源码支持。鼓励用户参与社区交流,共同推动项目发展。
推荐 | AllData开源数据中台技术分享
|
6月前
|
大数据 BI 数据采集
推荐 | AllData开源数据中台项目
AllData是一个可定义的数据中台,采用Wujie微前端架构和可插拔后端设计,提供全链路数字化解决方案。它包括数据平台、数据中台、机器学习平台和大模型应用,旨在连接和优化数据处理流程。项目已在GitHub上开源(https://github.com/alldatacenter/alldata),并提供了详细的官方文档和安装指南。AllData 2.0版本针对商业版和开源版的功能进行了区分,商业版在稳定性方面表现更优,同时增加了数据平台等功能。项目团队积极参与开源社区,致力于提供稳定的架构和不断改进的用户体验。
推荐 | AllData开源数据中台项目
|
新零售
重磅发布 | 阿里云发布《数据中台交付标准化》白皮书,促进数据中台高效高质量履约 原创 肖剑 阿里云研究院
编者按: 企业进行数字化建设是实现精细化运营和数字化创新发展的关键所在,数据中台建设是企业实现数智化转型的必经之路。在数据中台建设与交付过程中,存在专业度要求高、交付过程管控难、交付协同难等挑战,为应对这些挑战并实现数据中台交付,需要有一套数据中台交付的方法论、交付标准、交付工具和数字化交付工作台来指导、帮助企业和数据中台服务商来建设好数据中台,为企业的数字化转型提供数据咨询规划服务、数据资产建设服务和数据应用建设服务等,提升数据中台交付的效率和质量,降低规模化交付成本。
882 0
重磅发布 | 阿里云发布《数据中台交付标准化》白皮书,促进数据中台高效高质量履约 原创 肖剑 阿里云研究院
|
SQL 机器学习/深度学习 分布式计算
流批一体架构在快手的实践和思考|行业实践专栏上线
Flink-learning 学训平台和互娱行业实践专栏来啦!
10388 0
流批一体架构在快手的实践和思考|行业实践专栏上线
|
供应链 Cloud Native 安全
OSCAR 分享之蚂蚁开源治理的方法和实践
用不用开源技术不再是个问题,如何用好开源技术才是
643 1
OSCAR 分享之蚂蚁开源治理的方法和实践
|
存储 数据采集 XML
百度、阿里、腾讯平台架构都熟悉,小米大数据平台架构OLAP架构演进是否了解(一)
百度、阿里、腾讯平台架构都熟悉,小米大数据平台架构OLAP架构演进是否了解(一)
442 0
百度、阿里、腾讯平台架构都熟悉,小米大数据平台架构OLAP架构演进是否了解(一)