澳大利亚:开放数据平台和公共服务大数据战略

简介:  “政府希望通过大数据分析系统提升公共服务质量,增加服务种类,并为公共服务提供更好的政策指导。澳大利亚政府希望,在大数据分析的运用、提高效率、与其他政策和技术协同以及为公共服务领域带来变革等方面,澳大利亚能领先全球其他国家。

0.jpg


 “政府希望通过大数据分析系统提升公共服务质量,增加服务种类,并为公共服务提供更好的政策指导。澳大利亚政府希望,在大数据分析的运用、提高效率、与其他政策和技术协同以及为公共服务领域带来变革等方面,澳大利亚能领先全球其他国家。”——澳大利亚联邦政府首席信息官Glenn Arche

 

【大数据国家档案】

姓名:澳大利亚

数据开放计划:开放地理空间数据

大数据国家战略:澳大利亚公共服务大数据战略

发布时间:2013年8月

主导机构:澳大利亚联邦政府

核心内容:通过发布公共服务大数据战略,旨在推动公共行业利用大数据分析进行服务改革,制定更好的公共政策,保护公民隐私,使澳大利亚在该领域跻身全球领先水平

涉及部门:政府ICT监管委员会、澳大利亚信息管理办公室、澳大利亚税务局、澳大利亚财政部、澳大利亚研究理事会、澳大利亚财政与解除管制部门

 

国家战略

2013年8月,澳大利亚政府信息管理办公室(AGIMO)发布了公共服务大数据战略。该战略将以“数据属于国有资产,从设计着手保护隐私,数据完整性与程序透明度,技巧、资源共享,与业界和学界合作,强化开放数据”等六条大数据原则为支撑,旨在推动公共行业利用大数据分析进行服务改革,制定更好的公共政策,保护公民隐私,使澳大利亚在该领域跻身全球领先水平。预计这六条原则将极大地提高生产力及创新收益,并协助政府解决各种难题。

为将六大原则落实到实处,该战略将还制定了一个具体的行动安排:2014年3月推出大数据实践指南,2014年7月前出台一份关于大数据分析中所遇难题的报告;然后推动ICT行业和教育行业提供大数据分析中的必要技巧,制定一份数据分析指南和两份在建项目指南;开发一个信息资产登记系统;记录大数据分析中的技术演进。

澳大利亚公共服务大数据战略最早由政府ICT监管委员会于2013年6月提出方案,澳大利亚信息管理办公室(AGIMO)8月发布的正式版本又咨询了相关机构和业内人士意见

澳大利亚联邦政府首席信息官Glenn Arche表示,“政府希望通过大数据分析系统提升公共服务质量,增加服务种类,并为公共服务提供更好的政策指导。澳大利亚政府希望,在大数据分析的运用、提高效率、与其他政策和技术协同以及为公共服务领域带来变革等方面,澳大利亚能领先全球其他国家。”

数据开放

自2009年开始,澳大利亚政府还积极应用开放数据的理念和行动践行开放政府的愿景和目标。Data.gov.au是政府信息目录的开放数据平台,用户可以在该网站上简便地搜索、浏览和利用澳政府国家、地区政府的公共数据,政府鼓励所有用户通过更新工具和应用从信息中得到实惠。该网站包括114个部门的1103个数据库和18个应用软件,分为首页、数据、目录、应用软件、资源、更好的实践、建议和关于网站八项主题。网站上的数据来自澳政府多个部门,提供数据下载,并提供其他数据目录或资源的链接。澳大利亚政府数据开放通过5个阶段将数据开放流程化,这5个阶段依次是:发现数据(Discover)——过程处理(Process)——授权许可(License)——数据发布(Publish)——数据完善(Refine)。

2013年1月7日,澳大利亚研究理事会发布新的开放获取政策,要求受其资助的研究项目产出的所有出版物都必须在出版日期后的12个月内存储到开放获取机构知识库中。该政策规定,出版物元数据(即期刊名、标题、作者列表、卷、期、页和类似的数据)必须在论文被出版物接收后尽快提交给机构知识库,不管论文本身何时(或者是否)能公开获取;专著/期刊论文应该在发表后尽可能提交到机构知识库;知识库管理者确保专著/期刊论文在遵守期刊版权转让协议的日期中可用;如果版权转让或许可协议不允许论文(或专著)在出版后的12个月内可用,就需要在这个时间之后尽快可用。如果期刊不允许论文可用,必须在提交的终期报告中说明;机构可能希望使用公开可用的“holding note”解释版权或许可协议阻止在具体时间前将特定论文纳入知识库的限制。

这种将研究成果开放获取的方法利用了澳大利亚各机构的大量机构知识库网络,同时避免了强制开放获取政策要求通过支付文章处理费在开放获取期刊上发表论文而产生的潜在的高成本。该政策得到澳大利亚开放获取支持小组的称赞。

基础设施建设

2010年,澳大利亚联邦政府通过了超级国家宽带网工程,该工程的目标是将光纤电缆通向各家各户,让每个家庭享受每秒钟1G的速度,这比当前的铜线固话网速度快40倍。    部分海外测试显示,全国宽带网络将覆盖全澳93%的用户,剩余的7%可使用速度相对较慢的无线和卫星网络。据了解,到2013年年底,澳洲人就能享受到每秒1G的互联网下载速度,而且安装宽带所需要的费用全部由政府免单,完全免费

在数据中心建设方面,2013年8月,隶属于澳大利亚财政与解除管制部门的ICT采购部发布了《数据中心结构最佳实践指南》草案,供公众审议。该《指南》旨在为澳大利亚政府机构提供优化数据中心结构相关运营活动的建议,是澳大利亚政府数据中心战略2010-2025的一部分,目的是在将来为数据中心节省10亿美元的成本。该《指南》指出,由办公楼改造而来的数据中心的运营使用寿命通常要低于专门建造的数据中心,部分原因是因为适用于办公的建筑物和适用于ICT的建筑物的要求是不一样的;另外一个导致其他建筑物改造过来的数据中心使用寿命较短的常见原因是,这些数据中心获得的资金支持通常微乎其微,这会带来更多的故障问题,以及更多的管理问题;对于政府机构而言,需要让数据中心建筑物满足澳大利亚建筑标准,包括《国家建造准则》。

据分析公司Gartner的数据显示,2012年,澳大利亚数据中心的总数达到49577家,达到巅峰阶段,随后会缓慢下降,到2015年将降至45545家。为了满足业务需求,许多大型机构或企业包括提供计算机图书馆服务的非营利性会员制研究机构OCLC、微软、甲骨文、Rackspace等都在澳大利亚投资建设了数据中心。

应用情况

据Forrester的一项研究发现,澳大利亚和新西兰的很多企业仍然只是考虑实施大数据战略。2012年第二季度的一项调查显示,31%的IT管理人员指出他们对大数据感兴趣,但是“现在并无采用计划”。此外,17%的管理人员说他们计划今年或2013年实施大数据,17%的管理人员说他们正在扩大大数据的使用。

但澳大利亚财政部长久以来一直面临着大量数据处理的困扰。财政部CIO Peter Alexander说,一直以来财政部都采取“大数据微处理”的方式解决,但是在今年年初,政府部门开始推出其定制的数据分析平台Odysseus,来回应持久的数据问题。财政部收集的数据通常是结构化数据,但数据量却在急剧增加。目前,该部门在Odysseus平台上有一批微软数据提取和分析工具来处理大数据,并需要不断地寻找更多的技术方案来解决大数据。澳大利亚财政部也在考虑通过社交媒体收集数据,以此丰富其经济预测。但是,在处理非结构化数据的方面,这将带来更大的挑战。

在科研领域,澳大利亚默多克儿童研究所(MCRI)将利用大数据解密DNA。MCRI是全球致力于研究DNA测序技术的医学研究中心之一,这种技术可以为整个人类基因组进行测序,同时也让MCRI有了分析这些大数据集的能力。新一代测序技术给MCRI的数据存储带来了压力,因此该中心打算安装一个数据存储系统以保存和管理大数据,包括下一代测序技术产生的数据。目前,MCRI已经对该中心现有的117TB存储进行了扩展,然后构建一个预置的存储基础设施平台去支持DNA技术的横向扩展。


原文发布时间为:2014-02-11


本文来自云栖社区合作伙伴“大数据文摘”,了解相关信息可以关注“BigDataDigest”微信公众号

相关实践学习
简单用户画像分析
本场景主要介绍基于海量日志数据进行简单用户画像分析为背景,如何通过使用DataWorks完成数据采集 、加工数据、配置数据质量监控和数据可视化展现等任务。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
相关文章
|
13天前
|
分布式计算 DataWorks 大数据
MaxCompute产品使用合集之大数据计算MaxCompute如何实现通过离线同步脚本模式
MaxCompute作为一款全面的大数据处理平台,广泛应用于各类大数据分析、数据挖掘、BI及机器学习场景。掌握其核心功能、熟练操作流程、遵循最佳实践,可以帮助用户高效、安全地管理和利用海量数据。以下是一个关于MaxCompute产品使用的合集,涵盖了其核心功能、应用场景、操作流程以及最佳实践等内容。
|
13天前
|
机器学习/深度学习 分布式计算 大数据
MaxCompute产品使用合集之大数据计算MaxCompute是否支持直接在多个节点之间进行批量复制
MaxCompute作为一款全面的大数据处理平台,广泛应用于各类大数据分析、数据挖掘、BI及机器学习场景。掌握其核心功能、熟练操作流程、遵循最佳实践,可以帮助用户高效、安全地管理和利用海量数据。以下是一个关于MaxCompute产品使用的合集,涵盖了其核心功能、应用场景、操作流程以及最佳实践等内容。
MaxCompute产品使用合集之大数据计算MaxCompute是否支持直接在多个节点之间进行批量复制
|
13天前
|
分布式计算 运维 DataWorks
MaxCompute产品使用合集之大数据计算MaxCompute对于某个特定表该怎么获取,特定分区的instances id
MaxCompute作为一款全面的大数据处理平台,广泛应用于各类大数据分析、数据挖掘、BI及机器学习场景。掌握其核心功能、熟练操作流程、遵循最佳实践,可以帮助用户高效、安全地管理和利用海量数据。以下是一个关于MaxCompute产品使用的合集,涵盖了其核心功能、应用场景、操作流程以及最佳实践等内容。
|
13天前
|
SQL 分布式计算 大数据
MaxCompute产品使用合集之怎样可以将大数据计算MaxCompute表的数据可以导出为本地文件
MaxCompute作为一款全面的大数据处理平台,广泛应用于各类大数据分析、数据挖掘、BI及机器学习场景。掌握其核心功能、熟练操作流程、遵循最佳实践,可以帮助用户高效、安全地管理和利用海量数据。以下是一个关于MaxCompute产品使用的合集,涵盖了其核心功能、应用场景、操作流程以及最佳实践等内容。
|
13天前
|
SQL 数据采集 分布式计算
MaxCompute产品使用合集之大数据计算MaxCompute的PyODPS API相比ODPSSQL那个数据清洗的效率高
MaxCompute作为一款全面的大数据处理平台,广泛应用于各类大数据分析、数据挖掘、BI及机器学习场景。掌握其核心功能、熟练操作流程、遵循最佳实践,可以帮助用户高效、安全地管理和利用海量数据。以下是一个关于MaxCompute产品使用的合集,涵盖了其核心功能、应用场景、操作流程以及最佳实践等内容。
|
13天前
|
SQL 分布式计算 DataWorks
MaxCompute产品使用合集之大数据计算MaxCompute即使用相同的SQL语句在DataWorks和Tunnel上执行,结果却不同,如何解决
MaxCompute作为一款全面的大数据处理平台,广泛应用于各类大数据分析、数据挖掘、BI及机器学习场景。掌握其核心功能、熟练操作流程、遵循最佳实践,可以帮助用户高效、安全地管理和利用海量数据。以下是一个关于MaxCompute产品使用的合集,涵盖了其核心功能、应用场景、操作流程以及最佳实践等内容。
|
13天前
|
机器学习/深度学习 SQL 分布式计算
MaxCompute产品使用合集之大数据计算MaxCompute如果要把A的数据迁移到B,操作步骤是什么
MaxCompute作为一款全面的大数据处理平台,广泛应用于各类大数据分析、数据挖掘、BI及机器学习场景。掌握其核心功能、熟练操作流程、遵循最佳实践,可以帮助用户高效、安全地管理和利用海量数据。以下是一个关于MaxCompute产品使用的合集,涵盖了其核心功能、应用场景、操作流程以及最佳实践等内容。
|
13天前
|
分布式计算 IDE 大数据
MaxCompute产品使用合集之有多人调用大数据计算MaxCompute,我需要给他们每个人都生成ak信息吗
MaxCompute作为一款全面的大数据处理平台,广泛应用于各类大数据分析、数据挖掘、BI及机器学习场景。掌握其核心功能、熟练操作流程、遵循最佳实践,可以帮助用户高效、安全地管理和利用海量数据。以下是一个关于MaxCompute产品使用的合集,涵盖了其核心功能、应用场景、操作流程以及最佳实践等内容。
|
6天前
|
分布式计算 大数据 Hadoop
【经验分享】用Linux脚本管理虚拟机下的大数据服务
【经验分享】用Linux脚本管理虚拟机下的大数据服务
15 1
|
13天前
|
分布式计算 大数据 调度
MaxCompute产品使用合集之大数据计算MaxCompute底层加速查询的原理是什么
MaxCompute作为一款全面的大数据处理平台,广泛应用于各类大数据分析、数据挖掘、BI及机器学习场景。掌握其核心功能、熟练操作流程、遵循最佳实践,可以帮助用户高效、安全地管理和利用海量数据。以下是一个关于MaxCompute产品使用的合集,涵盖了其核心功能、应用场景、操作流程以及最佳实践等内容。

热门文章

最新文章