华夏银行:大数据时代 商业银行该如何治理海量数据?

本文涉及的产品
数据管理 DMS,安全协同 3个实例 3个月
推荐场景:
学生管理系统数据库
云原生大数据计算服务 MaxCompute,5000CU*H 100GB 3个月
云原生大数据计算服务MaxCompute,500CU*H 100GB 3个月
简介:

ZD至顶网CIO与应用频道 03月11日 北京消息:

“激烈的市场竞争趋势和日趋严格的外部监管要求,对我们商业银行数据的准确性提出了更高的要求。在大数据时代,如何有效治理结构化、半结构化和非结构化的海量数据,是我们现在重点考虑的问题。为保证数据的健康发展,我们将通过建立健全的大数据治理体系,推动业务发展的全面提升。”

——华夏银行股份有限公司架构部

商业银行的新课题

华夏银行股份有限公司(以下简称华夏银行)是一家综合实力非常强的全国性股份制商业银行。经过20多年的发展,目前,华夏银行在87个中心城市设立了38家一级分行、43家二级分行和10家异地支行,营业网点达到638家,形成了“立足经济发达城市,辐射全国”的机构体系;与境外1千多家银行建立了代理业务关系,代理行网络遍及五大洲115个国家和地区的329个城市,建成了覆盖全球主要贸易区的结算网络。

目前,华夏银行总资产已达到19501.15亿,并且其资产规模始终保持着稳步增长,盈利能力逐年提升。如此迅猛的发展态势,一定程度上要归功于其强大的时代适应能力和前瞻性的预见能力。

在大数据时代的冲击下,华夏银行意识到,跟随时代发展,将企业管理高度信息化,将是国内银行向“以客户为中心”转型的必由之路,善于高效运用海量数据的金融机构,将会在未来的竞争中脱颖而出,大数据应用也将成为商业银行获取差异化竞争优势的重要途径。而大数据应用的前提是要具备高质量的数据,要优选高质量的数据,无疑要采用“大数据治理”这一基石和关键平台。

大数据治理下的商机洞察

随着金融创新的快速发展和信息科技的日新月异,商业银行积累的数据量呈现几何倍数的增长,数据来源从传统的结构化数据逐渐扩展到以网络日志、社交媒体为代表的半结构化和非结构化数据。大数据治理能够降低海量数据带来的各种噪声,解决日益突出的数据质量问题。大数据治理,究竟能给商业银行带来什么样的收益?结合商业银行涉及到的具体业务,我们从以下三个方面开展了业务场景分析。

在客户营销方面,商业银行可收集互联网上客户的消费频率、消费地点等信息,通过大数据治理平台,对获取到的海量数据进行质量把关,排除冗杂数据,更精准地获知客户行为,洞察客户情感与情绪,预测客户未来需求,并及时提供与之匹配的金融产品和个性化服务,提升客户满意度。

在风险管理方面,银行可利用互联网上的各类信息,利用大数据治理平台的文本分析能力,对非结构化信息进行梳理,精准地计算出客户的信用情况和违约概率,构建出新的信用评价模型,打造智能化引擎支持的“直通式”全流程在线融资服务模式,最大化提高融资效率,降低信贷风险。

在IT管控方面,在大数据的推动下,银行数据资产变得日益复杂,而与企业的其他资产不同,银行难以直接了解到自身数据资产的总体情况,大数据治理平台可以对整个企业的数据资产进行可视化展现,不仅可以帮助银行了解其内部的大数据资产情况,还能够进一步加强银行对复杂数据资产的管控能力。

除此之外,大数据治理还可以应用于反欺诈的实时可靠监控、客户流失的精准预测、增值服务的有效化提升等方面,全面提高银行的经营和服务能力。

治理有道,体系先行

大数据治理相关工作需要从管理和技术两个维度同时展开才可能达到预期效果。首先,银行需要建立完善的大数据治理管理体系,包括大数据管理规范与流程的制定、大数据标准体系的建设、大数据质量的规划等。同时,需要完善的大数据治理技术平台支撑,从技术层面落地管理体系内容,控制数据质量,辅助数据标准实施落地,形成自动化的管控能力。

华夏银行:大数据时代 商业银行该如何治理海量数据?

1、 制定科学的大数据管理规范与流程

大数据管控的核心是建立统一的企业级管理规范与流程体系,通过全行范围数据的有机共享,可有效提高数据的管理和使用水平。银行需要为大数据治理的开展提供有据可依的管理办法,明确大数据治理的业务流程和认责体系,并颁布大数据治理的规章制度政策。

2、 构建完整的数据标准体系

结合大数据治理平台的建设,依据数据标准管理的相关办法,落实数据标准管理相关人员的职责,紧扣数据标准管理的流程规范,持续对已有的数据标准管理框架进行优化,并使之真正成为可落地执行的框架体系。

3、 制定前瞻性的大数据质量规划

制定前瞻性的大数据质量规划是做好大数据质量管理的前提和基础。大数据的管理和应用要纳入商业银行全行统一的数据质量规划范畴。新建项目的业务范围和系统规划必须完全参照已正式发布的数据标准,已经建设完成的系统需在数据质量规划的要求下酌情进行适应性改造。

平台支撑,以行践言

管理体系的实际实施,需要技术平台的支撑。以银行业务的安全稳定运营为前提,为满足其在客户营销、风险管理、IT管控等方面的多重需要,大数据治理平台相关技术需要围绕大数据整个生命周期,以元数据管理为核心,建立数据标准的全流程管理和高效的智能化海量数据质量管理能力,并提供大数据全过程的追溯能力。

1、自动化的元数据管理

元数据管理是大数据治理平台的核心部分,为集中管理全行元数据,元数据管理部分提供了全自动化的元数据采集能力和元数据版本管理能力,以及大数据地图的自动展现能力,最大限度地实现了系统化的管理流程,通过人性化的元数据查询、分析和维护手段,确保元数据的有效应用,确保华夏银行元数据管理方案的贯彻执行。

2、全流程的数据标准管理

平台的数据标准管理为全行的数据标准提供了保证,最大限度地实现了自动化的管理流程,保证了数据标准应用的效率和效果。特别在标准落地方面,将数据标准与元数据管理紧密配合,通过元数据的核心技术手段检查数据标准的落地情况,从而能够在数据生命周期的中的多个阶段(如计划、规范定义、开发上线等),检查系统数据模型的合规性,确保数据标准落地。

3、智能化的数据质量管理

数据质量管理提供了统一的数据质量检核体系,对各数据质量统一汇总分析并形成分析报告,提供了数据质量规则引擎和基于模板化的配置,提供了复杂的度量规则和检核方法生成机制,提高了效率。同时在大数据环境中,数据质量检核方法需要智能化的检核方法发现能力支撑,高效智能地对海量数据进行质量检查。

华夏银行架构部表示:“通过本次合作,我们了解到普元在数据治理方面已经积累了相当多的经验,与其他公司相比,其大数据治理思路非常清晰。项目完工后,我们最终实现了企业级的数据管控,将以往杂乱无章的线下流程转换成合理规范的线上流程,形成了一套完整的管理体系,实现了高效的业务协同。这为我们日后快速响应市场变化提供了强有力的支撑。”

原文发布时间为:2016年3月11日
本文来自云栖社区合作伙伴至顶网,了解相关信息可以关注至顶网。
相关实践学习
基于MaxCompute的热门话题分析
本实验围绕社交用户发布的文章做了详尽的分析,通过分析能得到用户群体年龄分布,性别分布,地理位置分布,以及热门话题的热度。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
目录
相关文章
|
4月前
|
数据采集 监控 大数据
大数据时代的数据质量与数据治理策略
在大数据时代,高质量数据对驱动企业决策和创新至关重要。然而,数据量的爆炸式增长带来了数据质量挑战,如准确性、完整性和时效性问题。本文探讨了数据质量的定义、重要性及评估方法,并提出数据治理策略,包括建立治理体系、数据质量管理流程和生命周期管理。通过使用Apache Nifi等工具进行数据质量监控和问题修复,结合元数据管理和数据集成工具,企业可以提升数据质量,释放数据价值。数据治理需要全员参与和持续优化,以应对数据质量挑战并推动企业发展。
1033 3
|
5月前
|
存储 SQL 分布式计算
闲侃数仓优化-大数据治理和优化
闲侃数仓优化-大数据治理和优化
60 0
|
2月前
|
SQL 存储 分布式计算
"SQLTask携手Tunnel:打造高效海量数据导出解决方案,轻松应对大数据挑战
【8月更文挑战第22天】SQLTask搭配Tunnel实现高效海量数据导出。SQLTask擅长执行复杂查询,但直接导出受限(约1万条)。Tunnel专注数据传输,无大小限制。二者结合,先用SQLTask获取数据,再通过Tunnel高效导出至目标位置(如CSV、OSS等),适用于大数据场景,需配置节点及连接,示例代码展示全过程,满足企业级数据处理需求。
56 2
|
2月前
|
安全 关系型数据库 MySQL
揭秘MySQL海量数据迁移终极秘籍:从逻辑备份到物理复制,解锁大数据迁移的高效与安全之道
【8月更文挑战第2天】MySQL数据量很大的数据库迁移最优方案
293 17
|
5月前
|
存储 数据采集 算法
大数据平台治理——运营的角度看数仓
大数据平台治理——运营的角度看数仓
40 0
|
4月前
|
存储 分布式计算 DataWorks
MaxCompute产品使用问题之dataworks仅支持maxcompute上面的数据治理吗
MaxCompute作为一款全面的大数据处理平台,广泛应用于各类大数据分析、数据挖掘、BI及机器学习场景。掌握其核心功能、熟练操作流程、遵循最佳实践,可以帮助用户高效、安全地管理和利用海量数据。以下是一个关于MaxCompute产品使用的合集,涵盖了其核心功能、应用场景、操作流程以及最佳实践等内容。
|
4月前
|
存储 NoSQL 大数据
【大数据】LSM树,专为海量数据读写而生的数据结构
【大数据】LSM树,专为海量数据读写而生的数据结构
53 0
|
5月前
|
数据采集 存储 监控
大数据治理:确保数据质量和合规性
【5月更文挑战第30天】大数据治理涉及数据分类、访问控制和质量监控,以确保数据安全和合规性。企业需保护个人隐私,防止数据泄露,并遵守各地法规,如GDPR和CCPA。技术实践包括数据加密、匿名化和严格访问控制。管理策略则强调制定政策、员工培训和法律合作。全面的数据治理能保障数据质量,驱动组织的创新和价值增长。
118 0
|
5月前
|
存储 SQL 分布式计算
大数据平台治理资源成本化
大数据平台治理资源成本化
77 0
|
5月前
|
关系型数据库 分布式数据库 数据处理
【PolarDB 开源】PolarDB 在大数据分析中的应用:海量数据处理方案
【5月更文挑战第25天】PolarDB是解决大数据挑战的关键技术,以其高性能和可扩展性处理大规模数据。通过与数据采集和分析工具集成,构建高效数据生态系统。示例代码显示了PolarDB如何用于查询海量数据。优化策略包括数据分区、索引、压缩和分布式部署,广泛应用于电商、金融等领域,助力企业进行精准分析和决策。随着大数据技术进步,PolarDB将继续发挥关键作用,创造更多价值。
224 0

热门文章

最新文章

下一篇
无影云桌面