基于数据包分析的大数据技术解决网络安全问题

本文涉及的产品
云原生大数据计算服务 MaxCompute,5000CU*H 100GB 3个月
云原生大数据计算服务MaxCompute,500CU*H 100GB 3个月
简介:

1.网络攻击简介

网络攻击是利用网络存在的漏洞和安全缺陷对网络系统的硬件、软件及其系统中的数据进行的攻击。网络信息系统所面临而对威胁来自很多方面,而且会随着时间的变化而变化。从宏观上看,这些威胁可分为人为威胁和自然威胁。

自然威胁来自于各种自然灾害、恶劣的场地环境、电磁干扰、网络设备的自然老化等。这些威胁是无目的性的,但会对网络通信系统造成损害,威胁通信安全。

而人为威胁是对网络信息系统的人为攻击,通常是通过寻找系统的弱点,以非授权方式达到破坏、欺骗和窃取数据信息等目的。两者相比,精心设计的人为攻击通常威胁大、难防备、种类多、数量大。

2.数据包分析介绍

数据包分析,经常也被称为数据包嗅探或协议分析,指的是通过捕获网络上传输的数据包并对数据包进行解码。由于网络中的通讯都源于数据包,尽管有些流量通过协议来看是正常的可信协议,但很可能在背地里进行不为人知的恶意行为,为了能够更加清楚透彻的了解网络,就需要进入数据包层面进行分析,在这个层面没有任何的异常情况能够逃脱我们的视线,能够详细的了解网络中发生任何的事情(加密除外)。

3.通过数据包分析发现、追溯网络攻击

I.大数据采集

基于数据包的大数据技术的第一前提条件是能够获取有效的数据包,通常情况下网络分析人员会使用抓包软件采集数据包,但由于抓包软件通常只能捕获短时间的数据包,但目前很多网络攻击不一定是在短时间内进行,其攻击过程可能持续几天、一周、一年,甚至更长的时间。这就需要能够对数据包进行不间断的采集,在采集的过程中对数据包进行分类展现及实时进行各项处理;

II.数据包解码

数据包是网络传输中最小的人工可读数据,通过数据包的解码分析能够掌握网络中最细微的变化,通过网络中的变化找到异常问题,发现可能的网络攻击,并对攻击过程进行深度还原,掌握各种网络攻击模型,对网络攻击做到知己知彼,做出有针对性并且最有效的防御;

III.快速发现网络攻击

通过解码数据包可针对数据包内的多中参数进行“与”、“或”关系组合配置警报,并可结合数据包特征值定义的方式,针对网络攻击的特征值或行为进行有效的告警信息配置,快速的发现网络中的攻击,并且能够提取相关原始数据包进行详细分析;

IV.数据包追溯分析

要想使用大数据技术对网络攻击进行长期的追溯分析,只有长期的数据包采集是不够的,还要对数据包和统计信息进行长期存储;并且在存储的基础上对数据包快速检索及可视化展现,这样能够帮助网络管理人员掌握网络的长期运行态势,快速定位网络异常、攻击发生时间,对问题时段进行追溯分析,发现网络攻击的行为并进行深入分析。

4.数据包分析快速发现、长期追溯网络攻击案例
数据包分析
如上图,网络在6月11-12日突然出现大流量传输;
数据包分析
并且网络中TCP同步包与TCP同步确认包差值巨大;
TCP
我们通过预先定义告警,通过多参数“与”“或”组合及特征值定义,配置灵活的告警信息,一旦网络中出现异常数据包达到出发要求时,会快速上报,及时发现网络中可能存在的攻击;
网络告警
如上图,对异常数据包进行tcp会话重组,可以看到每一个会话的异常行为(TCP同步位并且含有载荷数据);
异常数据包进行tcp会话重组

可对数据包进行深度解码,查看数据包级的内容,载荷内容全部填充为0,填充大量无效数据,形成DOS攻击。

本案例通过告警信息快速发现网络中可能存在异常攻击,并且能够长时间追溯网络攻击,并且快速判断网络攻击手法及攻击根源,及时定位各类网络安全问题。

小结

通过上述内容及案例,可以看出基于数据包分析的大数据技术可帮助网络管理人员快速的发现、定位各类网络攻击,并且能够在存储期内对任意网络攻击及问题进行回溯分析,做到精细化分析,提供数据包级的支撑,帮助网络管理人员更加安全的管理网络。


原文发布时间为:2015-12-23

本文来自云栖社区合作伙伴至顶网,了解相关信息可以关注至顶网。






相关实践学习
基于MaxCompute的热门话题分析
本实验围绕社交用户发布的文章做了详尽的分析,通过分析能得到用户群体年龄分布,性别分布,地理位置分布,以及热门话题的热度。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
相关文章
|
10天前
|
存储 监控 安全
单位网络监控软件:Java 技术驱动的高效网络监管体系构建
在数字化办公时代,构建基于Java技术的单位网络监控软件至关重要。该软件能精准监管单位网络活动,保障信息安全,提升工作效率。通过网络流量监测、访问控制及连接状态监控等模块,实现高效网络监管,确保网络稳定、安全、高效运行。
39 11
|
2天前
|
机器学习/深度学习 安全 网络安全
网络安全词云图与技术浅谈
### 网络安全词云图与技术浅谈 本文介绍了通过词云图展示网络安全关键术语的方法,并探讨了构建现代网络安全体系的关键要素。词云图利用字体大小和颜色突出高频词汇,如恶意软件、防火墙、入侵检测系统等。文中提供了生成词云图的Python代码示例,包括安装依赖库和调整参数。此外,文章详细讨论了恶意软件防护、加密技术、身份验证、DDoS防御、社会工程学防范及威胁情报等核心技术,强调了多层次、多维度的安全策略的重要性。
31 11
网络安全词云图与技术浅谈
|
5天前
|
机器学习/深度学习 数据可视化 大数据
机器学习与大数据分析的结合:智能决策的新引擎
机器学习与大数据分析的结合:智能决策的新引擎
64 15
|
7天前
|
分布式计算 大数据 数据处理
技术评测:MaxCompute MaxFrame——阿里云自研分布式计算框架的Python编程接口
随着大数据和人工智能技术的发展,数据处理的需求日益增长。阿里云推出的MaxCompute MaxFrame(简称“MaxFrame”)是一个专为Python开发者设计的分布式计算框架,它不仅支持Python编程接口,还能直接利用MaxCompute的云原生大数据计算资源和服务。本文将通过一系列最佳实践测评,探讨MaxFrame在分布式Pandas处理以及大语言模型数据处理场景中的表现,并分析其在实际工作中的应用潜力。
34 2
|
11天前
|
SQL 分布式计算 DataWorks
DataWorks产品测评|基于DataWorks和MaxCompute产品组合实现用户画像分析
本文介绍了如何使用DataWorks和MaxCompute产品组合实现用户画像分析。首先,通过阿里云官网开通DataWorks服务并创建资源组,接着创建MaxCompute项目和数据源。随后,利用DataWorks的数据集成和数据开发模块,将业务数据同步至MaxCompute,并通过ODPS SQL完成用户画像的数据加工,最终将结果写入`ads_user_info_1d`表。文章详细记录了每一步的操作过程,包括任务开发、运行、运维操作和资源释放,帮助读者顺利完成用户画像分析。此外,还指出了文档中的一些不一致之处,并提供了相应的解决方法。
|
10天前
|
分布式计算 DataWorks 搜索推荐
用户画像分析(MaxCompute简化版)
通过本教程,您可以了解如何使用DataWorks和MaxCompute产品组合进行数仓开发与分析,并通过案例体验DataWorks数据集成、数据开发和运维中心模块的相关能力。
|
22天前
|
存储 安全 网络安全
云计算与网络安全:技术融合的双刃剑
在数字化浪潮中,云计算如同一股不可阻挡的力量,推动着企业和个人用户步入一个高效、便捷的新时代。然而,随之而来的网络安全问题也如影随形,成为制约云计算发展的阿喀琉斯之踵。本文将探讨云计算服务中的网络安全挑战,揭示信息保护的重要性,并提供实用的安全策略,旨在为读者呈现一场技术与安全的较量,同时指出如何在享受云服务带来的便利的同时,确保数据的安全和隐私。
26 6
|
21天前
|
存储 人工智能 安全
云计算与网络安全:技术融合与挑战
在数字化时代的浪潮中,云计算和网络安全已成为推动社会进步的两大关键技术。本文将探讨云计算服务的发展,网络安全的重要性,以及信息安全技术的演进。我们将通过实例分析,揭示云服务如何增强数据保护,网络安全措施如何应对新兴威胁,以及信息安全技术的创新如何为企业带来竞争优势。文章旨在为读者提供对云计算和网络安全领域的深入理解,并展示它们如何共同塑造我们的未来。
|
20天前
|
监控 安全 网络安全
云计算与网络安全:技术挑战与解决方案
随着云计算技术的飞速发展,其在各行各业的应用越来越广泛。然而,随之而来的网络安全问题也日益凸显。本文将从云服务、网络安全和信息安全等技术领域出发,探讨云计算面临的安全挑战及相应的解决方案。通过实例分析和代码示例,旨在帮助读者更好地理解云计算与网络安全的关系,提高网络安全防护意识。
|
23天前
|
存储 监控 安全
云计算与网络安全:云服务、网络安全、信息安全等技术领域的融合与挑战
本文将探讨云计算与网络安全之间的关系,以及它们在云服务、网络安全和信息安全等技术领域中的融合与挑战。我们将分析云计算的优势和风险,以及如何通过网络安全措施来保护数据和应用程序。我们还将讨论如何确保云服务的可用性和可靠性,以及如何处理网络攻击和数据泄露等问题。最后,我们将提供一些关于如何在云计算环境中实现网络安全的建议和最佳实践。

热门文章

最新文章