带你读《构建企业级好数据(Dataphin智能数据建设与治理白皮书)》——6. 数据服务:集中管控,快速服务业务系统

本文涉及的产品
智能数据建设与治理Dataphin,200数据处理单元
简介: 带你读《构建企业级好数据(Dataphin智能数据建设与治理白皮书)》——6. 数据服务:集中管控,快速服务业务系统

6. 数据服务:集中管控,快速服务业务系统


1) 传统数据服务面临的问题


在数据的消费场景中,除了简单地提供数据表,另一种常见的方式是提供数据服务,也被称为API或接口,这种方式可以改善用户的使用体验,更加便捷、安全和高效。在企业中,常见的数据服务场景如下:

 

对内的数据服务:


企业不同部门之间通过数据服务实现数据共享,实现跨部门的协作;


数据部门提供数据服务给业务团队,实现数据赋能业务,用于进一步的商业分析决策;


对外的数据服务:企业将部分数据服务开放给合作伙伴或第三方,实现数据变现。


但是,在传统的数据服务开发模式中,一般数据服务的需求从提出到交付分为:需求提出-需求分析-需求评估与设计-开发-测试-上线-交付,完整的流程往往需要花费超过2周的时间。而且,在接口上线后,如果业务需求发生变更,则需要重新提交需求,安排迭代和开发。这种开发模式对于不同角色而言存在以下问题:

 

角色

问题

管理者

数据服务开发和管理体系不完善,影响企业对数据服务的管理

每个需求独立开发,浪费大量资源

权限体系不方便,网关策略不完善,数据安全无法保障

开发者

业务场景多样,个性化需求多

数据接入方式多样,接入效率低

多物理表关联查询 SQL 代码复杂,维护困难

数据应用者

没有全局服务市场和详细资料,不知道怎么查找已有服务

定制化开发响应缓慢,无法快速满足业务需求

 

2) Dataphin数据服务概述


Dataphin数据服务作为数据研发和应用之间的桥梁,致力于为企业提供便捷、高效的数据服务建设、共享与管理能力,帮助企业实现数据服务的统一市场化管理。

 

image.png

 

3) Dataphin数据服务核心功能与优势


为了解决传统数据服务中的问题,Dataphin数据服务提供统一规范的数据服务市场、简单高效的服务开发方式、服务运维监控和全生命周期的服务管理功能,具体如下:

 

数据服务市场


支持浏览所有已上线的数据服务,提供API文档帮助用户快速了解每个服务的参数列表;


提供申请权限功能,获取权限后即可轻松调用数据服务,减少重复开发、提高工作效率。

 

服务开发


支持界面化配置,可选择Dataphin中的逻辑表和预先创建的服务单元快速生成数据服务;


支持SQL式开发和自动解析,提供逻辑清晰的解析效果,杜绝错误代码的提交;


支持从数据源创建,直接连接有权限的数据源生成服务;


支持外部API注册,复用已经实现的API;


支持编排和复用多个已有的API快捷构建新的服务。

 

服务运维


支持查看指定时间段内的API调用和运行情况;


支持对单个API进行限流和配置告警规则;


支持查看数据服务的调用日志。

 

服务管理


提供数据服务创建、修改、测试、发布、调用、监控的完整生命周期管理;


支持按照项目隔离人员、应用和服务,提高开发效率和安全性;


提供完整的权限管理,支持按需进行权限申请、授权和回收。

 

 

优势:

 

提高服务消费和开发效率:Dataphin服务提供统一的数据服务市场,帮助业务人员快速查找和申请已有服务;同时提供界面化配置、SQL式开发、组合API等多种方式,帮助开发人员快速开发统一规范的数据服务;


保障数据安全与合规 :减少明细、敏感数据在应用侧的存储和暴露,使用统一的平台数据安全管控策略,并提供完善的权限体系和网关配置功能,降低数据安全管控成本;


运维监控:支持对数据服务调用统计、调用日志明细信息的查询,为运维和开发人员排查问题提供帮助,及时发现并修正数据服务的调用异常。

相关文章
|
15天前
|
存储 分布式计算 Hadoop
【产品升级】Dataphin V4.4重磅发布:开发运维提效、指标全生命周期管理、智能元数据生成再升级
Dataphin V4.4版本引入了多项核心升级,包括级联发布、元数据采集扩展、数据源指标上架、自定义属性管理等功能,大幅提升数据处理与资产管理效率。此外,还支持Hadoop集群管理、跨Schema数据读取、实时集成目标端支持Hudi及MaxCompute delta等技术,进一步优化用户体验。
308 3
【产品升级】Dataphin V4.4重磅发布:开发运维提效、指标全生命周期管理、智能元数据生成再升级
|
1月前
|
人工智能 关系型数据库 MySQL
数据魔力,一触即发 —— Dataphin数据服务API,百炼插件新星降临!
本文通过一个利用百炼大模型平台和Dataphin数据服务API构建一个客户360智能应用的案例,介绍如何使用Dataphin数据服务API在百炼平台创建一个自定义插件,用于智能应用的开发,提升企业智能化应用水平。
137 3
数据魔力,一触即发 —— Dataphin数据服务API,百炼插件新星降临!
|
2月前
|
SQL 存储 人工智能
【产品升级】Dataphin V4.3重大升级:AI“弄潮儿”,数据资产智能化
DataAgent如何助理业务和研发成为业务参谋?如何快速低成本的创建行业数据分类标准?如何管控数据源表的访问权限?如何满足企业安全审计需求?
717 1
【产品升级】Dataphin V4.3重大升级:AI“弄潮儿”,数据资产智能化
|
1月前
|
安全 Java 数据库连接
Dataphin的数据共享的应用场景和方案
不同的业务场景对数据访问和使用有着各自独特的需求,从简单的数据下载到复杂的跨系统集成,选择合适的数据共享与访问方式至关重要。本文旨在探讨几种常见的Dataphin上的数据共享与访问机制——包括数据复制、数据下载、视图创建、行级及列级权限控制、API数据服务以及JDBC连接等,并分析它们各自的适用场景、优势及限制,以帮助企业更好地根据自身需求做出合理的选择。
112 0
|
2月前
|
自然语言处理 算法 Unix
【数据安全】敏感字过滤方案总结
【数据安全】敏感字过滤方案总结
55 1
|
2月前
|
Java fastjson Apache
【数据安全】数据脱敏方案总结
【数据安全】数据脱敏方案总结
135 1
|
2月前
|
数据处理 调度
Dataphin功能Tips系列(26)-事实逻辑表配置数据延迟
零售行业中,订单数据是每天晚上由pos系统同步至数据中台,但门店人员经常会没有及时将订单信息录入pos,也许隔天或是隔几天才录入,这会导致指标的不准确性,数据中台的开发人员往往需要进行批量补历史分区的数据,这时怎么才能减轻开发人员的工作,让系统能够自动补前几天分区中的事实逻辑表中的数据呢?
|
3月前
|
存储 安全 数据库
双重防护,无懈可击!Python AES+RSA加密方案,构建最强数据安全堡垒
【9月更文挑战第11天】在数字时代,数据安全至关重要。AES与RSA加密技术相结合,构成了一道坚固防线。AES以其高效性保障数据加密,而RSA则确保密钥安全传输,二者相辅相成,提供双重保护。本文通过Python代码示例展示了这一加密方案的魅力,强调了其在实际应用中的重要性和安全性。使用HTTPS等安全协议传输加密密钥和密文,确保数据在数字世界中自由流通而无忧。
84 1
|
5月前
|
SQL 运维 安全
【产品升级】Dataphin V4.2重大升级:上线敏捷版,打通数据资产管理和消费,开启数据价值放大新篇章
Dataphin 是阿里巴巴旗下的一个智能数据建设与治理平台,旨在帮助企业构建高效、可靠、安全的数据资产。在V4.2版本中,Dataphin敏捷版上线助力企业打造轻量版数据中台,打通数据资产管理和消费,陪伴企业迈入数据高价值应用新阶段。
2043 2
【产品升级】Dataphin V4.2重大升级:上线敏捷版,打通数据资产管理和消费,开启数据价值放大新篇章
|
4月前
|
JSON 数据管理 关系型数据库
【Dataphin V3.9】颠覆你的数据管理体验!API数据源接入与集成优化,如何让企业轻松驾驭海量异构数据,实现数据价值最大化?全面解析、实战案例、专业指导,带你解锁数据整合新技能!
【8月更文挑战第15天】随着大数据技术的发展,企业对数据处理的需求不断增长。Dataphin V3.9 版本提供更灵活的数据源接入和高效 API 集成能力,支持 MySQL、Oracle、Hive 等多种数据源,增强 RESTful 和 SOAP API 支持,简化外部数据服务集成。例如,可轻松从 RESTful API 获取销售数据并存储分析。此外,Dataphin V3.9 还提供数据同步工具和丰富的数据治理功能,确保数据质量和一致性,助力企业最大化数据价值。
227 1

热门文章

最新文章