大数据 为信息安全赋予新的逻辑思维

本文涉及的产品
云原生大数据计算服务 MaxCompute,5000CU*H 100GB 3个月
云原生大数据计算服务MaxCompute,500CU*H 100GB 3个月
简介:

信息工业技术的发展,催生了梦想的诞生与实现。一直以来,人类都希望机器能够具有人类智慧高效地完成工作,而这样的愿望,今天已经延伸至信息安全。

什么叫具有人类逻辑的信息安全?某位员工已经出差到外地,其账号却在公司办公室中登录内 网访问重要资料,作为一名网络管理人员,当你知道这一切的时候首先会想到:这名员工的账号被盗了,公司的商业机密正在被窃取。之所以得出这样的结论,是由 于按照正常的逻辑判断,将“出差”与“本地访问IP地址”联系在一起,在情理上是矛盾的。我们希望,机器也能够如同人类一般进行“逻辑思维”。结合大数据 技术,今天这种智慧型的解决方案已经成为下一代信息技术的发展趋势。

大数据,信息安全分水岭

大数据技术在今天已经成型并已经运用多年。在国外,不仅思科和IBM这样的传统巨头在进行相关研发,一些新的企业,如Fireeye、Splunk等,也都凭借大数据在IT业界暂露头角。

环顾国内,很多公司也在进行大数据相关的研究并取得相当成果,但大部分都在应用分析方 面,在信息安全分析方面却是新生事物,之所以新,是因为它引入了“列式数据模型”,弥补了传统“行式数据模型”的分析不足,这为信息安全的数据处理、数据 分析提供了新的逻辑思维、新的分析角度,带来了新的安全价值。

在这些公司中,包括杭州合众信息在内的一些领先公司正走在这样趋势的最前沿。“言而优则唱”,长期的传统数据交换、数据安全分析实践使得这些公司在大数据处理、大数据安全分析方面具有先天优势。来自杭州合众信息的官方数据称,其与大数据处理 相关的实时数据同步系统(RDS)、数据集成系统(ETL)、大数据一体化平台(UniOne)、大数据分布式全文数据库系统、大数据应用分析系统、综合 安全审计系统等已经在住房和城乡建设部、工商总局、公安部、浙江公安等项目中有着不同程度的广泛应用,取得了极佳的社会价值。

信息安全已经上升为国家战略,信息安全应用环境也正发生着革命性的变化,强劲的驱动着这 些传统的安全公司痴迷于大数据,希望利用大数据技术对传统信息安全赋予新的逻辑思维。于是,基于大数据的信息安全,这个综合了多项技术的新兴事物应运而 生,如雨后春笋。纵观这些公司,但凡能崭露头角的,其不仅需要有信息安全开发经验,需要对数据采集、处理、分析、应用等有较深的理解,更需要企业有较深 的、长期的业务和应用背景来构建大数据的整体逻辑。相信这一些安全企业可以借助大数据扬帆起航,开启安全市场新篇章,将经验拓展到更为广泛的应用领域。

大数据,业务的开发需要具备多方面的业务储备。

数据处理能力 数据处理是数据挖掘和分析的前道程序。数据处理的目的是从大量的、可能是杂乱无章的、难以理解的数据中抽取对于特定的人群有价值、有意义的数据。

数据分析能力 由于事务型数据和决策支持型数据的处理性能不同,需将决策支持型数据处理从事务型数据处理中分离出来,再从事务型数据库中导入数据仓库,继而采用OLAP(联机分析处理)工具、数据挖掘工具等进行分析、智能决策,提高决策的科学性及完善各种管理流程。

开源系统 开源技术将以成本的降低和企业级的IT自由度破解大数据之忧。性能方面,随着开源技术对数据掌控能力的不断加强,开源技术将在稳定性、安全性上得到不断完善和提升;创新方面,围绕开源技术的模式创新和服务创新已逐渐形成,更快地适应大数据时代的业务变革和转型升级。

分析调研机构Gartner很早之前就已经表态称,基于大数据分析的安全绝对是防范高级攻击的有效手段,但其“比较复杂”的体系构架让很多专业的信息安全公司难以涉足。实际上,在已经颇有些红海味道的信息安全领域中,基于大数据的安全已经成为了一道展现实力的分水岭。

大数据,受到资本市场追捧

直到今天,Gartner的态度依然没改变。在Gartner研究副总裁Anton Chuvakin近期撰写的博客文章中,尽管其依然承认基于大数据的安全技术具有良好的发展态势,但是由于复杂度太高,“95%的企业还未采用这一技术”。

布局未来,这是对当前着眼大数据技术的信息安全公司最为可靠的描述。实际上,一直在进行 产业萌芽投资的资本市场,对于大数据领域一直持以认可态度。成立于2004年的Fireeye,在2013年上市后首日股价大涨80%。业内普遍认为,其 在2011年前后转向APT防御与大数据方向,这一战略极大地推动了公司的发展。在国内,机构与投资人都对大数据保持着持续关注。光大证券分析认为,国内 公司在大数据领域的机会在于对细分行业市场的理解。实际上,这同实际产业状况不谋而合。以合众信息为例,除了主营信息安全业务以外,其另一项重点业务—— 大数据的分析和处理所瞄准的就是政府行业。合众信息的资料显示,其所提供的政府大数据服务,指的是服务于各个政府部门且根据部门业务需求搭建的大数据平 台。平台不但提供大规模云平台技术支持、维护管理,还会根据数据特点组织大数据模型,提供满足业务实战要求的数据集成处理、应用开发集成。而整套系统的成 功部署,已经为客户带了客观的经济效益。

大数据,似乎这是一个听起来已经被重复了无数次的老概念。但是,其所承载的是人们对于信息技术的向往与憧憬。这种憧憬的实现,毫无疑问是一个漫长且艰辛的过程。不过,我们相信,在逻辑思维的道路上的那群人会坚定不移地走下去。

原文发布时间为:2014年11月19日
本文作者:赛迪网
本文来自云栖社区合作伙伴至顶网,了解相关信息可以关注至顶网。
相关实践学习
基于MaxCompute的热门话题分析
本实验围绕社交用户发布的文章做了详尽的分析,通过分析能得到用户群体年龄分布,性别分布,地理位置分布,以及热门话题的热度。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
目录
相关文章
|
5月前
|
SQL 分布式计算 MaxCompute
ODPS SQL问题之为什么使用odps.sql.groupby.skewindata = true优化后,逻辑执行计划会发生改变如何解决
ODPS SQL问题之为什么使用odps.sql.groupby.skewindata = true优化后,逻辑执行计划会发生改变如何解决
|
5月前
|
存储 分布式计算 资源调度
ODPS SQL问题之ODPS逻辑层包含哪些角色,它们各自的功能是什么
ODPS SQL 问题之ODPS逻辑层包含哪些角色,它们各自的功能是什么
|
5月前
|
机器学习/深度学习 分布式计算 大数据
MaxCompute产品使用合集之表的物理存储量和逻辑存储量分别有什么意义
MaxCompute作为一款全面的大数据处理平台,广泛应用于各类大数据分析、数据挖掘、BI及机器学习场景。掌握其核心功能、熟练操作流程、遵循最佳实践,可以帮助用户高效、安全地管理和利用海量数据。以下是一个关于MaxCompute产品使用的合集,涵盖了其核心功能、应用场景、操作流程以及最佳实践等内容。
|
机器学习/深度学习 存储 SQL
带你读《2022年开源大数据热力报告》——TOP项目热力跃迁逻辑研究
带你读《2022年开源大数据热力报告》——TOP项目热力跃迁逻辑研究
219 0
|
SQL 分布式计算 BI
MaxCompute笛卡尔积逻辑的参数优化&复杂JOIN逻辑优化
这篇文章主要讲一个SQL优化反映的两个优化点。分别是: 一、笛卡尔积逻辑的参数优化。 二、一个复杂JOIN逻辑的优化思路。
2286 2
MaxCompute笛卡尔积逻辑的参数优化&复杂JOIN逻辑优化
|
人工智能 安全 大数据
大数据社交网络个人信息安全思考
大数据社交网络个人信息安全思考
445 1
|
存储 监控 安全
大数据个人信息安全保护浅论
大数据个人信息安全保护浅论
354 1
|
安全 大数据 Linux
知名大数据厂商云宏加入龙蜥社区,共同打造信息安全坚实“地基”
云宏加入龙蜥社区,助力国产技术力量的持续健康发展、创新及应用。
知名大数据厂商云宏加入龙蜥社区,共同打造信息安全坚实“地基”
|
数据可视化 算法 大数据
大数据可视分析背后的商业逻辑
大数据可视分析背后的商业逻辑
大数据可视分析背后的商业逻辑
|
SQL 分布式计算 关系型数据库
优化(2)MaxCompute 实现增量数据推送(全量比对增量逻辑)
MaxCompute(ODPS2.0) - 试用新的集合操作命令 EXCEPT & 增量识别
2609 1
下一篇
无影云桌面