游击式大数据软件使农民的数据分析速度加快了五倍

简介:

看看“田间”的游击式数据收集和分析应用程序是如何加以使用的,以及为何这种数据模式的早期结果大有希望。

收集数据后,在批处理模式数据集市下聚集和查询数据,以获取商业智能,这是实际应用大数据及分析的主要方式。它还有助于为新兴国家的人们确保有一个公平的竞争环境,为他们节省时间,并且迅速深入了解数据查询情况。

Springg就是个例子,荷兰的这家农业软件公司在与世界各地的农民合作。由于发展中国家缺乏基础设施,又认识到这些国家的农民需要与发达国家的农民那样同样可以访问农业信息,Springg想要找到一种方法,可以从田间获取宝贵数据,这些数据经评估后,可以将宝贵的信息迅速返回给较偏远地区的农民。

Talend公司专门提供Springg使用的大数据集成软件,首席营销官(CMO)阿什利·斯特拉普(Ashley Stirrup)说:“对于农民来说,采取土壤样本很重要,那样你就能更清楚地了解土地的特性,可以施什么类型的肥料,以便作物有最高产量。”

在以往,田地土壤样本在当地采取后,送到远在几百英里、乃至几千英里之外的实验室进行分析。

斯特拉普说:“Springg想要做的就是,在肯尼亚建立可以利用物联网技术的移动测试中心。”通过使用移动测试中心,Springg就能够借助传感器收集当地的土壤数据,然后在现场进行土壤分析,那样当地农民立即就能了解土壤情况以及最适合作物的肥料。土壤数据直接在田间加以收集和分析。然后发送到集中式数据库,可以在更综合、更全面的环境下进一步分析数据。

斯特拉普特别指出:“对于当地农民来说,这个过程极为高效,它将实验室分析土壤的速度加快了五倍。在欠发达地区,结果准确性和成本至关重要。这关系到一户家庭能否自给自足或者孩子能否上学。”

想把本地数据收集和分析之间的所有点联系起来,然后将数据发送到远地更庞大的数据资料库,这就需要形形色色的技术,从无线通信、移动电话,到可以处理不同国家电信环境的灵活的通讯协议,不一而足。斯特拉普说:“我们自己的数据工具应用于这种使用场合,我们想要一种解决方案可以处理任何类型的移动设备,并可以根据需要支持简单的通信协议。”

在当地的游击式田间应用程序(比如借助物联网传感器现场收集数据)中,还要确保数据准备和传输具有灵活性,那样可以捕获、分析、最终利用数据。

斯特拉普说:“有了这一种方法,你可以调入从世界各地的传感器收集而来的数据。然后,你可以在现场实时或近实时分析该数据,从数据立即获得当地结果。”

之后,数据从世界各地的多个收集点收集而来,然后发送到集中式数据资料库,数据可以改而用于众多用途。

斯特拉普说:“进一步利用这种农业数据的一种方法就是应用于金融市场。当一个系统能够分析并生成从世界各地的农业收集点收集而来的宝贵信息,许多公司就能更深入地了解当前的作物产量与历史趋势相比如何,天气状况对收成起到了怎样的影响,对大宗商品价格可能会有什么样的影响。”

使用这种“田间”的游击式数据收集和分析,立即将结果返回给当地农民,随后一路发送到大型数据资料库,然后数据进行进一步的分析,用于各大金融市场的趋势建模和决策,这种使用仍处于初期阶段,不过对于一种从宏观和微观两方面都可加以分析的数据模式而言,结果大有希望。
本文转自d1net(转载)

相关实践学习
简单用户画像分析
本场景主要介绍基于海量日志数据进行简单用户画像分析为背景,如何通过使用DataWorks完成数据采集 、加工数据、配置数据质量监控和数据可视化展现等任务。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
相关文章
|
1月前
|
算法 大数据 数据挖掘
python数据分析——大数据伦理风险分析
大数据伦理风险分析在当前数字化快速发展的背景下显得尤为重要。随着大数据技术的广泛应用,企业、政府以及个人都在不断地产生、收集和分析海量数据。然而,这些数据的利用也带来了诸多伦理风险,如隐私泄露、数据滥用、算法偏见等。因此,对大数据伦理风险进行深入分析,并采取相应的防范措施,对于保障数据安全、维护社会公平正义具有重要意义。
47 0
|
1月前
|
存储 大数据 数据挖掘
python数据分析——大数据和云计算
大数据和云计算作为当代信息技术的两大核心驱动力,正在以前所未有的速度改变着我们的生活、工作和思维方式。它们不仅为各行各业的创新提供了强大的技术支持,更是推动了整个社会的数字化转型。 从大数据的角度来看,它的核心价值在于通过对海量数据的收集、存储、分析和挖掘,发现其中的关联性和趋势,从而为决策提供更为科学、精准的依据。无论是商业领域的市场预测、消费者行为分析,还是公共服务领域的城市规划、交通管理,大数据都发挥着不可或缺的作用。同时,随着物联网、传感器等技术的普及,大数据的来源和种类也在不断扩展,这使得我们能够更全面地认识世界,把握规律。
47 0
|
1月前
|
监控 数据可视化 数据挖掘
热门的数据分析软件推荐
热门的数据分析软件推荐
|
2月前
|
算法 数据挖掘 BI
SPSS数据分析软件的安装与介绍(附网盘链接)
SPSS数据分析软件的安装与介绍(附网盘链接)
271 0
|
4月前
|
数据采集 数据可视化 数据挖掘
【大数据实训】基于当当网图书信息的数据分析与可视化(八)
【大数据实训】基于当当网图书信息的数据分析与可视化(八)
83 0
|
4月前
|
数据采集 分布式计算 数据可视化
【大数据实训】基于赶集网租房信息的数据分析与可视化(七)
【大数据实训】基于赶集网租房信息的数据分析与可视化(七)
75 0
|
4月前
|
分布式计算 Hadoop Java
【大数据实训】基于Hadoop的2019年11月至2020年2月宁波天气数据分析(五)
【大数据实训】基于Hadoop的2019年11月至2020年2月宁波天气数据分析(五)
52 1
|
2月前
|
分布式计算 DataWorks IDE
MaxCompute数据问题之忽略脏数据如何解决
MaxCompute数据包含存储在MaxCompute服务中的表、分区以及其他数据结构;本合集将提供MaxCompute数据的管理和优化指南,以及数据操作中的常见问题和解决策略。
47 0
|
2月前
|
SQL 存储 分布式计算
MaxCompute问题之下载数据如何解决
MaxCompute数据包含存储在MaxCompute服务中的表、分区以及其他数据结构;本合集将提供MaxCompute数据的管理和优化指南,以及数据操作中的常见问题和解决策略。
38 0
|
2月前
|
分布式计算 关系型数据库 MySQL
MaxCompute问题之数据归属分区如何解决
MaxCompute数据包含存储在MaxCompute服务中的表、分区以及其他数据结构;本合集将提供MaxCompute数据的管理和优化指南,以及数据操作中的常见问题和解决策略。
35 0

热门文章

最新文章