带你读《构建企业级好数据(Dataphin智能数据建设与治理白皮书)》——6. 数据服务:集中管控,快速服务业务系统

本文涉及的产品
智能数据建设与治理Dataphin,200数据处理单元
简介: 带你读《构建企业级好数据(Dataphin智能数据建设与治理白皮书)》——6. 数据服务:集中管控,快速服务业务系统

6. 数据服务:集中管控,快速服务业务系统


1) 传统数据服务面临的问题


在数据的消费场景中,除了简单地提供数据表,另一种常见的方式是提供数据服务,也被称为API或接口,这种方式可以改善用户的使用体验,更加便捷、安全和高效。在企业中,常见的数据服务场景如下:

 

对内的数据服务:


企业不同部门之间通过数据服务实现数据共享,实现跨部门的协作;


数据部门提供数据服务给业务团队,实现数据赋能业务,用于进一步的商业分析决策;


对外的数据服务:企业将部分数据服务开放给合作伙伴或第三方,实现数据变现。


但是,在传统的数据服务开发模式中,一般数据服务的需求从提出到交付分为:需求提出-需求分析-需求评估与设计-开发-测试-上线-交付,完整的流程往往需要花费超过2周的时间。而且,在接口上线后,如果业务需求发生变更,则需要重新提交需求,安排迭代和开发。这种开发模式对于不同角色而言存在以下问题:

 

角色

问题

管理者

数据服务开发和管理体系不完善,影响企业对数据服务的管理

每个需求独立开发,浪费大量资源

权限体系不方便,网关策略不完善,数据安全无法保障

开发者

业务场景多样,个性化需求多

数据接入方式多样,接入效率低

多物理表关联查询 SQL 代码复杂,维护困难

数据应用者

没有全局服务市场和详细资料,不知道怎么查找已有服务

定制化开发响应缓慢,无法快速满足业务需求

 

2) Dataphin数据服务概述


Dataphin数据服务作为数据研发和应用之间的桥梁,致力于为企业提供便捷、高效的数据服务建设、共享与管理能力,帮助企业实现数据服务的统一市场化管理。

 

image.png

 

3) Dataphin数据服务核心功能与优势


为了解决传统数据服务中的问题,Dataphin数据服务提供统一规范的数据服务市场、简单高效的服务开发方式、服务运维监控和全生命周期的服务管理功能,具体如下:

 

数据服务市场


支持浏览所有已上线的数据服务,提供API文档帮助用户快速了解每个服务的参数列表;


提供申请权限功能,获取权限后即可轻松调用数据服务,减少重复开发、提高工作效率。

 

服务开发


支持界面化配置,可选择Dataphin中的逻辑表和预先创建的服务单元快速生成数据服务;


支持SQL式开发和自动解析,提供逻辑清晰的解析效果,杜绝错误代码的提交;


支持从数据源创建,直接连接有权限的数据源生成服务;


支持外部API注册,复用已经实现的API;


支持编排和复用多个已有的API快捷构建新的服务。

 

服务运维


支持查看指定时间段内的API调用和运行情况;


支持对单个API进行限流和配置告警规则;


支持查看数据服务的调用日志。

 

服务管理


提供数据服务创建、修改、测试、发布、调用、监控的完整生命周期管理;


支持按照项目隔离人员、应用和服务,提高开发效率和安全性;


提供完整的权限管理,支持按需进行权限申请、授权和回收。

 

 

优势:

 

提高服务消费和开发效率:Dataphin服务提供统一的数据服务市场,帮助业务人员快速查找和申请已有服务;同时提供界面化配置、SQL式开发、组合API等多种方式,帮助开发人员快速开发统一规范的数据服务;


保障数据安全与合规 :减少明细、敏感数据在应用侧的存储和暴露,使用统一的平台数据安全管控策略,并提供完善的权限体系和网关配置功能,降低数据安全管控成本;


运维监控:支持对数据服务调用统计、调用日志明细信息的查询,为运维和开发人员排查问题提供帮助,及时发现并修正数据服务的调用异常。

相关文章
|
7月前
|
安全 网络安全 数据库
数据安全之认识数据库漏洞扫描系统
数据库漏洞扫描系统是一种专业的数据库安全产品,它基于对数据库访问控制、数据库审计、资源管理、数据库加密以及数据库系统本身安全机制的深入分析,深入研究和发现数据库系统本身存在的BUG以及数据库管理、使用中存在的问题。
190 4
|
7月前
|
存储 供应链 安全
【区块链】智能交易模式下的数据安全流通模型
【区块链】智能交易模式下的数据安全流通模型
375 1
|
7月前
|
SQL 监控 安全
数据安全之认识数据库审计系统
随着企业业务数据量的不断增长和数据存储的集中化,数据库成为企业的核心资产之一。然而,数据库面临着各种安全威胁,如SQL注入、权限滥用、数据泄露等。为了保障数据库的安全性和完整性,企业需要采取有效的审计措施来监控和记录数据库的操作行为。本文让我们一起来认识数据库审计系统。
142 1
|
7月前
|
JSON 缓存 运维
Dataphin数据服务API开启IP白名单调用鉴权
Dataphin数据服务API提供便捷的API开发及运维、应用调用权限管理等功能,为数据业务化提供了坚实的支撑。在应用调用API的时候,Dataphin可支持通过AcessKey方式的调用鉴权。而在企业内部网络中,也可以使用IP白名单方式简化调用。本文将为您介绍如何开启IP白名单的调用鉴权。
223 0
|
7月前
|
存储 数据采集 安全
瓴羊Dataphin数据安全能力再升级,内置分类分级模板、上线隐私计算模块
瓴羊Dataphin数据安全能力再升级,内置分类分级模板、上线隐私计算模块
204 0
|
21天前
|
人工智能 关系型数据库 MySQL
数据魔力,一触即发 —— Dataphin数据服务API,百炼插件新星降临!
本文通过一个利用百炼大模型平台和Dataphin数据服务API构建一个客户360智能应用的案例,介绍如何使用Dataphin数据服务API在百炼平台创建一个自定义插件,用于智能应用的开发,提升企业智能化应用水平。
101 3
数据魔力,一触即发 —— Dataphin数据服务API,百炼插件新星降临!
|
5月前
|
SQL 关系型数据库 MySQL
如何在Dataphin中构建Flink+Paimon流式湖仓方案
当前大数据处理工业界非常重要的一个大趋势是一体化,尤其是湖仓一体架构。与过去分散的数据仓库和数据湖不同,湖仓一体架构通过将数据存储和处理融为一体,不仅提升了数据访问速度和处理效率,还简化了数据管理流程,降低了资源成本。企业可以更轻松地实现数据治理和分析,从而快速决策。paimon是国内开源的,也是最年轻的成员。 本文主要演示如何在 Dataphin 产品中构建 Flink+Paimon 的流式湖仓方案。
7809 10
如何在Dataphin中构建Flink+Paimon流式湖仓方案
|
4月前
|
数据安全/隐私保护
数据安全用户系统问题之实人认证信息在用户模型中体现的如何解决
数据安全用户系统问题之实人认证信息在用户模型中体现的如何解决
|
4月前
|
安全 数据安全/隐私保护
数据安全用户系统问题之需要限制验密错误次数以及冻结功能如何解决
数据安全用户系统问题之需要限制验密错误次数以及冻结功能如何解决
|
5月前
|
监控 数据可视化 BI
基于Dataphin+Flink构建期货交易监察实时应用
新一代证券交易监察系统利用大数据和实时计算技术强化风险控制、交易数据处理、识别异常交易等能力。通过Dataphin与Flink结合,构建期货交易监察实时数据应用;借助QuickBI用于打造实时看板和预警体系,实现期货交易监察的实时可视化分析和自动化预警。
308 0