视频云时代挑战下云计算、大数据技术及其应用

简介:

近年来,云计算、云存储、大数据等技术在互联网行业得到了高速发展,技术、产品都得到了较好的市场检验,已被全社会广泛认可。在安防行业,在市场客观需求引领下,主流厂商积极将相关技术引入到行业内,并结合行业特征进行演进,推动云计算、云存储、大数据在行业内的高速发展,同时推出一系列广受市场认可的产品与理念,而云计算、云存储产品也成为各主流厂商主在有关平安城市解决方案中的核心系统之一,这其中所应用的核心技术就成为了衡量所属公司行业地位的关键指标。

  文/周明伟  本文作者现任浙江大华技术股份有限公司高级系统架构师

  视频监控技术趋势一:系统集成下的产品融合

顺应业务发展需求,视频监控行业产品逐渐出现了融合的趋势。一台主机部署多种模块可以提供多样的服务,例如存储、流媒体、管理系统、计算单元等一体化部署的产品,或者一台持续多虚拟机的存储服务器等。一个产品融合多种软件功能模块,提供一体化的解决方案,具备非常好的竞争优势。但同时,多模块混合部署,对各模块资源需求都比较高,因为在有限硬件资源下既要实现资源隔离,又要充分发挥硬件性能,避免额外的开销,又需要具备足够的弹性调整能力。其中容器技术具备众多优势,特别是作为一个轻量级的虚拟化技术手段,结合合理的管理软件系统,以及应用软件系统的配额,会是一个非常好的发展方向。

视频监控技术趋势二:业态趋于多样化

云计算、大数据时代下的视频监控行业的发展塑造业务形态多样化趋势。而互联网化的趋势和应用场景要求革新着传统视频监控行业的发展模式,如更低码流、更高并发度、直播点播、更友好的终端体验等。与此同时,随着国家大力推动智慧城市和平安城市的建设,视频监控行业也逐渐融入到其他行业的布建中,与其他行业形成互补优势,因而视频监控解决方案成为了各行业解决方案中的关键部分,所以这就对视频监控系统的平台开放性、接口合理性等性能提出了非常高的要求。

安防是真正的“大数据”行业

安防是一个真正的“大数据”行业,具备有别于其它行业的专属特征,如何突破安防数据应用瓶颈,带来海量价值,就给相关的技术提出了巨大挑战。

安防行业的数据主要来源于海量的监控摄像头,以一个高清摄像头为例(码流为4Mbps),一个月产生的数据量约为1.2TB,而一个中等城市部署的摄像头数量可达数万只,因此一个月一个中等城市可产生几十PB的视频数据积累。

面对海量的视频数据,传统的存储系统并未改善视频数据价值密度低的问题,并且系统建设成本敏感和性价比低的问题普遍存在。

在此背景下,可以能满足视频流数据的持续性、高强度的读写需求的高性能系统视频云存储系统应运而生。可基于廉价存储服务器和低端高容量磁盘,以分布式存储技术为基础,采用纠删码技术实现成本和可靠性的完美兼顾,同时提供为视频流式特征进行优化,又不失通用性的对象存储能力,可以满足视频存储业务需求,又符合云计算技术发展对存储提出的开放共享要求。

云计算的兴起对视频数据的开放性、读取性能提出了不一样的要求,因此传统基于块的私有视频存储技术及相关方案会逐渐失去市场竞争优势。而逐渐加速发展的SSD(Solid State Drives)存储技术,也将应势给视频云存储的发展带来重大变革。

应用环境对云存储系统提出的诉求

视频监控获得的视频数据价值密度低是安防行业的通性。举公安领域为例:一台路面摄像头一个月产生的视频数据,也许仅仅只有数秒钟的内容是有价值的,但这数秒钟视频片段对于社会安全具有重大意义。而视频分析是一个非常耗计算资源的过程,单机形态的视频分析服务器计算能力普遍较弱。

  文/周明伟  本文作者现任浙江大华技术股份有限公司高级系统架构师

因此,对视频云计算提出了较高的通用型的视频分析诉求:借助分布式计算系统能力,充分发挥多节点的并行计算能力,实现多类型视频的高效数据计算等。但是,市面上的视频分析技术难度普遍较高,技术成熟度又参差不齐,虽然视频分析算法近些年取得了非常显著的进步,部分算法也达到了非常好的应用效果,例如视频摘要、浓缩、车牌识别、车型分析等,而更低场景要求的人脸识别、人体特征分析算法效果等,依然与市场的高预期还是具有一定差距。

这就要求在自身云存储系统方面,要既要满足大容量、高可靠、高性能、易扩展、开放共享的视频图像存储基础上,同时又要具备庞大的视频图像计算能力;面向海量视频数据,快速检测提取活动目标,实现人、车、物分类,识别运动目标的特征属性,呈现目标快照和短时视频,解决了视频分析效率低下的问题,由“看视频”变“搜目标”,一触即发、所想即所得;同时使用通用的分析型数据库,提供海量数据极速查询,嵌入特色安防数据分析能力,满足海量数据挖掘需求。

因而笔者预测,通用分布式视频计算框架,搭载成熟、丰富的智能算法,在未来几年将带给视频安防行业的产品和业务重大影响。

如何迎接视频云时代的挑战

现阶段,云存储、计算和大数据相关技术已经对安防行业,特别是视频监控行业,形成了深刻的影响,实现了重大的推进作用。但行业特征决定了技术在行业内的发展演进,借鉴互联网行业先进技术、经验,结合行业特征和业务目标,进行深度优化演进的系统,将拥有非常好的竞争优势。

而视频监控技术和安防领域的长期积累、先进的IT技术融合,互联网思维及持续创新能力的吸收,都是迎接视频云时代挑战不可或缺的关键因素。


本文转自d1net(转载)

相关实践学习
简单用户画像分析
本场景主要介绍基于海量日志数据进行简单用户画像分析为背景,如何通过使用DataWorks完成数据采集 、加工数据、配置数据质量监控和数据可视化展现等任务。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
相关文章
|
22天前
|
存储 消息中间件 监控
【Flume】Flume在大数据分析领域的应用
【4月更文挑战第4天】【Flume】Flume在大数据分析领域的应用
|
15天前
|
分布式计算 Hadoop 大数据
大数据技术与Python:结合Spark和Hadoop进行分布式计算
【4月更文挑战第12天】本文介绍了大数据技术及其4V特性,阐述了Hadoop和Spark在大数据处理中的作用。Hadoop提供分布式文件系统和MapReduce,Spark则为内存计算提供快速处理能力。通过Python结合Spark和Hadoop,可在分布式环境中进行数据处理和分析。文章详细讲解了如何配置Python环境、安装Spark和Hadoop,以及使用Python编写和提交代码到集群进行计算。掌握这些技能有助于应对大数据挑战。
|
2天前
|
存储 分布式计算 Cloud Native
云计算:技术革命与代码实践
云计算:技术革命与代码实践
16 1
|
3天前
|
机器学习/深度学习 安全 云计算
拥抱变革:我的云计算技术感悟之旅
【4月更文挑战第23天】 在信息技术不断演进的今天,云计算已成为推动企业数字化转型的重要力量。本文通过作者的个人视角,深入探讨了在学习和实践云计算过程中的技术感悟与成长。文章不仅涉及了云计算的基本概念、核心特性,还分享了作者在面对新技术挑战时的思考和应对策略,旨在为同行提供经验参考,共同促进技术进步与个人发展。
14 3
|
17天前
|
存储 安全 网络安全
未来云计算与网络安全:技术创新与挑战
随着数字化时代的来临,云计算与网络安全成为了当今科技领域的焦点。本文从技术创新和挑战两个方面探讨了未来云计算与网络安全的发展趋势。在技术创新方面,人工智能、区块链和量子计算等新兴技术将为云计算和网络安全带来前所未有的发展机遇;而在挑战方面,隐私保护、数据泄露和网络攻击等问题也将不断考验着技术研究者和行业从业者的智慧和勇气。未来,只有不断创新,同时加强安全防护,才能实现云计算与网络安全的良性发展。
16 1
|
24天前
|
NoSQL 大数据 数据挖掘
现代数据库技术与大数据应用
随着信息时代的到来,数据量呈指数级增长,对数据库技术提出了前所未有的挑战。本文将介绍现代数据库技术在处理大数据应用中的重要性,并探讨了一些流行的数据库解决方案及其在实际应用中的优势。
|
25天前
|
机器学习/深度学习 边缘计算 人工智能
拥抱变革:我的云计算技术感悟之旅
【4月更文挑战第2天】 在信息技术不断演进的今天,云计算已成为推动企业数字化转型的重要力量。本文以个人视角切入,分享了我在学习和实践云计算过程中的技术感悟。文章不仅总结了云计算的核心优势和面临的挑战,还探讨了如何通过持续学习和实践来提升云技术水平,以及对未来云计算技术趋势的展望。
8 1
|
25天前
|
机器学习/深度学习 分布式计算 负载均衡
拥抱变革:我的云计算技术感悟之旅
【4月更文挑战第2天】在信息技术迅猛发展的今天,云计算已成为推动企业数字化转型的重要力量。本文以个人视角切入,分享在学习和实践云计算过程中的技术感悟。内容涵盖从对云计算概念的初步理解到深入应用的实践经历,再到对未来趋势的思考,旨在为同行提供参考并共同探讨云计算领域的新机遇与挑战。
20 3
|
29天前
|
边缘计算 人工智能 安全
当代云计算与网络安全技术探析
随着信息化时代的到来,云计算和网络安全技术日益成为人们关注的焦点。本文从云服务、网络安全和信息安全等多个角度展开探讨,旨在深入剖析当代云计算与网络安全技术的发展现状和前景,为读者提供全面的技术视角和思考。
|
21天前
|
弹性计算 云计算 虚拟化
GPU云服务器_GPU云计算_异构计算_弹性计算-阿里云
阿里云提供多种GPU服务器,包括NVIDIA V100、T4、A10和A100计算卡,其中gn6i实例享有最高3折优惠。包年包月价格如:gn6v实例(16G V100)从4685.20元/月起,gn6i实例(16G T4)从1878.40元/月起。学生无特定GPU服务器优惠,但新用户有折扣活动。GPU服务器计费模式有包年包月和按小时计费,按需选择。详细价格及活动规则见官方链接。
9 0
GPU云服务器_GPU云计算_异构计算_弹性计算-阿里云

热门文章

最新文章