美国大数据维稳镜鉴

本文涉及的产品
云原生大数据计算服务 MaxCompute,5000CU*H 100GB 3个月
云原生大数据计算服务MaxCompute,500CU*H 100GB 3个月
简介:
大数据是信息技术的新热点,其发展与应用有助于优化公共服务模式、提升社会安全保障能力与应急能力。美国作为全球大数据领域的先行者,在运用大数据手段提升社会治理水平、维护社会和谐稳定方面已先行实践并取得显著成效。以之为标杆,分析其典型做法,有助于我国学习借鉴先进经验,进一步做好维稳工作。

六个领域的典型应用

维护社会和谐稳定,包括多个方面的内容,既要维护国家安全和社会安全,也要着力化解矛盾纠纷和打击犯罪,还要通过加强舆论引导为保障与改善民生、预防犯罪等工作营造稳定的氛围。美国及其地方政府在其中诸多方面都已结合大数据实施了典型应用。

其一,以大数据提高反恐能力。“911”事件之后,美国政府在反思中发现,多个安全部门之间协调不到位、不能及时分享情报资源,是其虽然掌握了诸多线索却没能预防恐怖事件发生的重要原因之一。通过建立“棱镜”等大数据平台,运用大数据技术和分析手段,美国的国家安全部门能够以更高效率完成对多种来源数据的分析,并揭示出不同行为间的互动关系,进而能够运用分析算法预测危险分子的行动趋势。这为安全部门预防恐怖主义等威胁国家利益的行为提供了前所未有的可能。“棱镜”计划曝光后,美国政府部门再三强调其存在的合理性,虽然相当程度上是在为自己的不当行为进行掩饰,但其所说的发现和预防多起恐怖事件的成果,也绝非空穴来风。

其二,以大数据维护社会安全。除了政府部门的反恐工作外,让公共服务机构和企业提高安全警戒与防范能力,也是保障国家和社会安全的紧要工作。美国国家安全局和交通安全局基于数据挖掘技术,开发了计算机辅助乘客筛选系统,为美国本土各个机场提供应用接口。该系统将乘客购买机票时提供的姓名、联系地址、电话号码、出生日期等信息输入到商用数据库中,商用数据库则据此将隐含特殊危险等级的数字分值传送给交通安全局:绿色分值的乘客将接受正常筛选,黄色分值的乘客将接受额外筛选,红色分值的乘客将被禁止登机,且有可能受到法律强制性的关照。

其三,以大数据预防犯罪案件发生。防止犯罪事件特别是大规模暴力犯罪事件发生,是维稳工作的重要内容。以大数据为手段,能够提高从各种情报中“大海捞针”的水平,通过提取人们行为的时空规律性和关联性,进行犯罪预测。例如,加利福尼亚州桑塔克鲁兹市使用犯罪预测系统,对可能出现犯罪的重点区域、重要时段进行预测,并安排巡警巡逻。在所预测的犯罪事件中,有三分之二真的发生。系统投入使用一年后,该市入室行窃减少了11%,偷车减少了8%,抓捕率上升了56%。

其四,以大数据提高灾害预防能力。排查各类隐患、加强灾害防控是综合维稳工作的重要组成部分,而遏制火灾事故的发生可谓其中重点。以纽约市为例,该市约有100万栋建筑物,每年有差不多3000栋会因火灾损毁。由于城市状况复杂,消防人员往往难以第一时间赶赴现场,预防火灾成了减少损失的重中之重。为此,纽约市消防部门依据数据收集划分出了60个可能会产生火险的因素,包括区域居民平均收入、建筑物年龄、是否存在电气性能问题等。通过这些因素数据和相关算法,纽约市消防部门给建筑物都标注了风险指数,并据此确定消防检查的优先级和重点,从而有针对性地加强安全排查。

其五,以大数据推进犯罪案件侦破。在这方面,波士顿连环爆炸案的成功侦破可谓其中著名案例。2013年4月15日,美国波士顿在举办马拉松比赛的过程中发生连续炸弹爆炸案,导致3人死亡、183人受伤。案件发生后警方不仅走访了事发地点附近12个街区的居民,收集可能存在的各种私人录像和照片,还大量收集网上信息,包括信息社交网站上出现的相关照片、录像等,并在这些网站上向公众提出收集相关信息的请求。通过对各方面数据的比对、查找,警方从录像中截取出了嫌疑人照片并发出通缉令,从而为最终追捕罪犯提供了确凿的证据和可靠的参考。

其六,以大数据加强对政府人员的监管。针对警车违规行驶的问题,弗吉尼亚州政府通过《信息自由法》申请,获得上百万条警车通过收费站的记录,并结合两个收费站之间的距离、行驶时间、地点、驾驶员的住址等进行详尽的数据分析,在13个月中,发现了5100宗警车超速行为。据此,弗吉尼亚州警务部门进行了大整顿,端正了警务人员的行为和警车使用规范,有效消除了社会质疑。

美国大数据维稳的主要经验

总体来看,美国之所以能够运用大数据推动好维稳工作,与其对数据资源、数据应用的重视分不开,特别是与其一直坚持的市场化维稳路径密切相关。这些也是美国大数据维稳的三点主要经验。

第一,重视数据资源采集和存储。高质量的数据资源建设是应用大数据的前提。一方面,美国的政府部门积极利用各种渠道加强相关数据资源的采集工作。例如,纽约市于2003年3月建立了市民求助热线,日接待量超过5万个,总计已接听超过1亿个电话。求助热线既能够向市民提供诸如垃圾如何分类、下雪天学校是否停课等3600多个门类的信息和解答,也能够通过记录每通电话内容并在地图上进行标记,为深入分析打下基础。另一方面,庞大的数据资源采集到后必须进行高效的存储,美国政府通过自建和租用等方式对此加以解决。自建方面,美国国安局等政府机构建设了多个大型、超大型的数据中心。多个消息情报显示,一个正在美国犹他州建造的超大规模的数据中心能存储美国国安局近几年搜集的几乎所有数据,这意味着用户的通话记录、电子邮件、上网浏览历史记录等,只要在美国国安局的监视范围下,都会在这个数据中心保留一份。同时,为降低存储成本,美国政府实施了联邦风险及授权管理项目,对第三方云服务进行政府安全认证。2013年,亚马逊的云服务即获得了此项认证。

第二,大力支持大数据应用研发。2012年3月29日,奥巴马政府宣布启动《大数据研究和发展计划》,宣布将实施2亿美元的投资计划,提高从大量数字数据中访问、组织、收集、发现信息的工具和技术水平。这其中就包括美国国防部的多尺度异常检测项目、网络内部威胁计划、想象力项目、使命导向的高适应性云项目,以及美国国土安全部的可视化数据分析项目等。通过这些项目的实施,能够提高威胁检测、情报集成与突发事件应急响应能力,对于提升维稳工作效能具有重要作用。此外,美国政府还倡议企业、科研院校和非盈利机构集中力量共同促进大数据发展与应用,这为相关工作尽快进入实用阶段增添了新动力。

第三,推动维稳工作的市场化。众所周知,美国先进武器的研发和生产多由通用电气、波音等私营机构完成。随着维稳形势愈发复杂艰巨,各国在这方面的支出也迅速增加,但由于目前很多维稳工作主要以劳动密集型运作为主,效率低下在所难免。而这样的问题,单纯依靠政府部门往往很难解决。美国利用私营机构的能力强化维稳工作,给出了解决该类问题的可行方向。一方面,以国家力量发展和应用大数据,可以加快产业链升级和高新技术的普及;另一方面,通过市场配置维稳经费和资源,可以在促进产业发展、提高就业的同时,利用市场竞争和淘汰机制催生成本、效率和效果最为显著的维稳方式,从而大大提高维稳工作的总体质量。除此之外,根据斯诺登的说法,通过要求谷歌、雅虎、微软、苹果等公司开放其服务器,美国国家安全局能轻而易举地监控全球上百万网民的邮件、即时通话及存取的数据。若能去除其中侵犯信息安全和信息隐私的因素,改为经过敏感信息屏蔽等处理后合法、合规获得数据,这种由第三方市场化机构获得有用数据的做法也值得借鉴。

  

美国大数据维稳的启示

当前,我国面临着复杂严峻的国内外发展形势,各种风险因素明显增多,运用大数据等创新技术手段提高维稳能力、提升社会治理水平更为迫切。为此,可从以下三个方面借鉴美国经验。

一是提高认识,推进大数据在维稳方面的应用。政府部门应根据维稳需求和工作重点,率先在重点领域开展应用示范,并不断拓展应用范围。值得考虑的切入领域包括:应用大数据提高安全态势感知、预测及应急处置的能力;提高情报分析、安全保障的现代化水平,提升国家安全攻防的能力;应用大数据提升舆情研判、预警及应对的能力,使舆情分析结果更加科学严谨,有效发现和化解社会矛盾;应用大数据预测社会公共服务需求,简化公共服务流程,提供更高质量、更高效率的公共服务;应用大数据帮助公众参与政府决策和制定政策,使政府决策广泛、充分地吸纳民情民意,从源头避免矛盾产生。

二是统筹协调,完善大数据应用相关机制。为使大数据的辅助决策作用得到充分发挥,还应完善相关工作机制,将大数据融入到维稳工作乃至政务工作之中。例如,可结合大数据应用健全重大决策社会稳定风险评估机制,提高决策的科学性;建立食品药品安全、医疗卫生、社会保障、保障房建设与分配等方面的跟踪预警机制,防范安全事故或群体性事件发生;构建重大工程建设职务犯罪风险评估与预警机制,预防腐败案件发生,优化社会发展环境。

三是坚持开放,创新大数据维稳工作方法。维稳工作涉及面广、涉及领域和部门多,数据资源等可用资源相对分散,加之大数据是新鲜事物,政府部门自身尚难以充分掌握其技术和应用模式。因此,应坚持开放思维,通过适度开放数据资源,积极引入社会力量,群策群力,提高大数据发展水平和在维稳方面的应用水平,更好地融入和推动维稳工作。


原文发布时间为:2014-04-23


本文来自云栖社区合作伙伴“大数据文摘”,了解相关信息可以关注“BigDataDigest”微信公众号

相关实践学习
基于MaxCompute的热门话题分析
本实验围绕社交用户发布的文章做了详尽的分析,通过分析能得到用户群体年龄分布,性别分布,地理位置分布,以及热门话题的热度。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
相关文章
|
数据可视化 大数据
大数据再成两会高频词
本文讲的是大数据再成两会高频词【IT168 大数据】随着两会的到来,“大数据”再次成为媒体报道的高频词汇。利用大数据打造智慧城市、提高扶贫精准度、关注农业发展、促进居家养老服务业发展、建立两会大数据平台……两会委员“提案夹”中关于大数据的提案层出不穷。
1582 0
|
存储 大数据 数据中心
|
大数据 数据库 数据管理
|
新零售 存储 分布式计算
下一篇
无影云桌面