大数据驱动业务发展

本文涉及的产品
数据管理 DMS,安全协同 3个实例 3个月
推荐场景:
学生管理系统数据库
简介:
ZDNet至顶网软件频道消息: 数据如流水,本身具有动力。当大数据如浪潮般涌到我们面前时,能够提供什么样的动力?它不仅可以帮助企业规划和掌握自身资源,对企业内部做到更全面的内视,预测和优化生产运营;也可以帮助企业360度了解用户,通过数据分析客户的偏好获得,推出一些以客户为导向的产品或以客户为针对性的服务;它还能洞察业务、改善运营、推动决策,持续驱动业务创新。

提到增加用户满意度、推进决策,很多人都会说商务智能BI也可以实现。那么BI与大数据有何区别呢?传统的BI是一个逆向的思维过程,发现问题之后进行逻辑分析,然后找到因果关系,再提出解决方案,BI解决的多是结果的问题和已经发生的事情。而大数据是一种正向的思维,给企业提供的是可以预测未来的走向,先是收集数据后进行量化分析,然后发现数据之间关联关系,并以此提出一种优化的方案。从原来的事后诸葛亮到现在具有高瞻远瞩的能力,这是对于决策支持根本性的改变。

“做大数据“两类认识误区:保守vs激进
每天我们都能看见许多公司喊着要做“大数据”,各行业也流传着一些很经典或很神奇的大数据故事,当然,大数据做好,从中获得的利益将是巨大的。但没有一个深思熟虑的数据战略,做的越多可能只是浪费越多的时间和人力、财力。面对大数据滚滚大潮,传统企业呈现出完全不同的两种态度:一类是过于保守,觉得自己企业规模太小、数据量太少,还用不上大数据;另一类又走入了另一个极端,认为大数据是万能的,能够解决各种各样问题。

对于大数据保守派,要告知他们大数据离我们并不遥远的思想。数据无大小,大和小在于人们审视或者利用数据的方式。大数据对企业来说,最重要的是一种数据的思维,也就是说,企业需要站在数据的角度去考虑问题。没有企业永远都不需要大数据,因为市场是瞬息万变的,可能现在不需要大数据,但到了明天却发现竞争对手们都在用大数据开拓创新业务,到那个时候再去接受大数据就晚了。应该是:战略上可以轻视,但是战术上一定要重视。而对于大数据激进派,就要适时灭灭他们的火。在信息化的每个发展阶段都会有大量的各式各样的数据处理要求,这其实都是大数据,大数据是企业信息化发展到当前这个阶段的必然结果,没有必要去神话它。

企业在做大数据项目时需要注意一点,那就是大数据并不是一朝一夕就能完成的工作。并不是说,购买了一些机器,组建了一个Hadoop环境,就能称为做了大数据。除了设备上的投资,企业还需要在人员、在技术方面进行安排,同时,企业的组织架构也需要进行相应的调整,增设新的岗位去专门进行大数据的分析和研究。大数据的前期准备工作很多,这是一种思维上变革,切忌急功进利。

Informatica融入大数据时代的平台搭建
从大数据的孕育、出生到现在的成长阶段,Informatica一直都在密切关注并参与其中,而多达21年的数据管理平台搭建经验也在经历的过程中无痕的融入大数据时代的平台搭建中,这不是骤然的从传统到大数据,而是一个长时间的潜移默化过程,这也让Informatica在大数据成型之后可以迅速而稳定的推出一系列全面、先进、成熟的数据管理解决方案,帮助客户更加高效、全面地去管理数据。

大数据要落地,会有许许多多的基础工作要完成,比如数据的采集、数据的预处理、数据的清洗、数据的迁徙、数据的深加工以及数据的分析等,这些步骤都是不可或缺的。Informatica整体解决方案能够提供不同的产品、不同的方法手段,来去帮助客户完成上述不同的阶段的不同的要求,包括:企业数据集成、大数据、数据质量控制、主数据管理、B2B Data Exchange、应用程序信息生命周期管理、复杂事件处理、超级消息和云数据集成。此外,大数据时代还有一个热门的话题就是数据安全,Informatica在数据读取和使用两方面使用动态或静态的数据脱敏手段来保证数据的隐私;对于数据的生命周期管理,Informatica提供了一些运算、存储等系列新技术,对历史数据进行归档、留存及分析。

对于企业来讲,选用数据处理平台,最危险的莫过于新技术的采用,极易引起平台的紊乱,甚至是崩溃,而要想找寻其中的冲突所在则像大海捞针,不仅劳神费力,还极大的影响企业的正常运行。Informatica作为老资历企业,其丰富的经验足以使其解决方案可以在面对大数据时,最大程度的降低与采用 Hadoop 等最新技术相关联的风险,帮助企业屏蔽底层技术平台的差异,这同时也是对企业投资的一种保护。从2006年提出大数据概念一直到现在,大数据技术的迭代式发展非常快,如果企业自己去研究大数据技术非常不现实,这种风险通过Informatica平台可以屏蔽掉,企业只需在一些图形化界面里设计数据处理规则,而逻辑、底层则交由Informatica,Hadoop、Linux、Unix等不同平台上可以自由切换。

全球已有超过5500家企业利用Informatica方案成功地管理其在本地的、云中的和社交网络上的数据资产。在金融行业,一些银行客户利用Informatica方案来构建企业级的数据仓库,构建商务智能BI系统;电信运营商使用Informatica产品对通话详单信息做格式化处理,通过对这些结构化数据进行分析,以此改善改善用户投诉响应时间,并可做到反向的设备监察;能源行业的客户通过Informatica主数据平台消除不同系统中大数据存在的差异,使最终的数据报表展现更真实、一致;医疗行业能够采用Informatica方案集成和整合HIS、LIS、电子病例等各业务系统中的数据,提高数据的共享程度,完善患者的电子诊疗信息。

大数据应用需业务和IT人员良好协同
在传统业务模式中,IT部门是业务部门获取数据的桥梁,然而数据的描述和最终获取都会因为多了IT部门这道环节而大打折扣。Informatica认为数据不是IT的,数据真正属于业务,数据产生于业务又为业务所使用,IT只是承担着为数据服务的角色,是数据的管理者。所以,数据应用必须将业务人员和IT人员结合起来协同作业,而Informatica也一直把协作理念贯穿在产品整个的设计当中。比如很多产品即有专门针对IT技术人员使用的界面,也有非常简单易用的图形化界面提供给业务人员。还有一些整体的解决方案,包括数据的自助式服务、数据的虚拟化等等,这些方法从底层通过技术的手段将各种各样的数据呈现到最终业务用户面前,让他们自由地选择希望使用、浏览、分析什么样的数据,甚至能够参与到数据的操作过程中来,从而保证业务人员能够紧密地与IT人员协同。

Informatica最新推出的IDP(Intelligent Data Platform)智能数据集成平台,可以让业务部门成为真正数据受益者,IDP直接面向业务部门,将人员、位置与事物以更加智能的方式紧密相连,业务人员可以根据自己的需求,按需获得他所要的数据。举例来说,当传统数据管理解决方案能够生成30种报表,如果企业想要第31种,需要IT部门与供应商一起来进行再开发。而有了IDP,业务人员不需借助IT部门的帮助,不需关注后台运作,即可在这个平台上很方便地直接生成第31中分析报表。这些面对业务人员的操作都是交互式、自助式的。当然,IDP也解放了IT人员,使他们可以把工作重心放在开发和系统集成上。

IDP包含的三大要素:首先是Informatica Vibe 虚拟数据机:这是一种可嵌入式数据处理引擎,它提供了对任何位置、格式或来源的数据的近乎普遍的访问能力,支持客户“一次映射,多次部署”;其次是数据基础设施:数据基础设施层能够在任何规模下,系统、连续地交付干净、安全、互连的数据。从部门级到企业级,从事务数据到大数据,从内部部署到云端;最后是数据智能:为客户重新定位数据基础设施层所创建的元数据,进而提高可见性、改善决策过程并加强运营智能化水平。

Informatica提出“数据湖”的概念,意思就是无论是在云端还是在地上,无论是传统的还是大数据,都能够将数据放在一个“湖”里,让所需人员自由的按需索求而无任何障碍。Informatica希望能够帮助广大客户和合作伙伴轻松应对大数据时代的新需求,帮助他们向以数据驱动型的企业转变。
原文发布时间为:2014年12月16日
本文作者:Informatica中国区资深技术顾问孙大山
本文来自云栖社区合作伙伴至顶网,了解相关信息可以关注至顶网。
相关实践学习
简单用户画像分析
本场景主要介绍基于海量日志数据进行简单用户画像分析为背景,如何通过使用DataWorks完成数据采集 、加工数据、配置数据质量监控和数据可视化展现等任务。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
目录
相关文章
|
3月前
|
SQL 前端开发 搜索推荐
淘天业务技术2023年度热门文章盘点
淘天业务技术2023年度热门文章盘点
109 4
|
4月前
|
存储 机器学习/深度学习 数据采集
数据化转型的关键力量:大规模数据处理技术
随着数字化时代的到来,大数据已经成为企业和组织转型的重要基础。而对于这些海量的数据如何进行高效处理、挖掘和应用,则成为当前技术领域的关键问题。本文将探讨大规模数据处理技术的重要性,以及在面临挑战时如何制定解决方案,实现数据化转型的目标。
|
4月前
|
存储 机器学习/深度学习 数据采集
数据化时代的转型力量:大规模数据处理
在当今数据化时代,大规模数据处理已经成为企业和组织转型的关键力量。本文将深入探讨大规模数据处理的重要性、挑战和解决方案,揭示数据化转型中的技术奇迹。
|
9月前
|
机器学习/深度学习 分布式计算 搜索推荐
大数据在现代化业务决策中的作用
大数据在现代化业务决策中扮演着不可或缺的角色。通过数据驱动的决策、商业洞见的提取、个性化营销和风险管理等方式,大数据帮助企业更加精准、高效地运营。然而,同时也需要解决数据隐私、质量和人才等挑战。随着技术的不断发展,大数据将继续为企业创造更多的商业价值。
100 1
大数据在现代化业务决策中的作用
|
12月前
|
机器学习/深度学习 数据采集 存储
「数据战略」业务成果驱动的企业数据战略
「数据战略」业务成果驱动的企业数据战略
|
12月前
|
机器学习/深度学习 人工智能 监控
重塑IT和业务未来的趋势
重塑IT和业务未来的趋势
|
存储 机器学习/深度学习 运维
数据架构变革进行时:现代化应用需要怎样的数据策略?
数据架构变革进行时:现代化应用需要怎样的数据策略?
150 0
数据架构变革进行时:现代化应用需要怎样的数据策略?
|
安全 API 数据处理
如何提升IT对业务发展的贡献度
希望置身业务驱动型环境的 IT 团队们,能够八仙过海各显神通,提升 IT 团队对业务发展的贡献,获得稳定的立足之地,然后才能逐渐施展拳脚。
295 0
如何提升IT对业务发展的贡献度
|
SQL 大数据 BI
业务重要?还是技术重要?
业务重要?还是技术重要?
260 0
|
SQL 存储 消息中间件
DorisDB 叶谦:打造新一代企业数据驱动体系
DorisDB 叶谦:打造新一代企业数据驱动体系
DorisDB 叶谦:打造新一代企业数据驱动体系