AI 助理
文档备案控制台
开发者社区 大数据 文章 正文

【Spark Summit East 2017】基于Bluemix Apache Spark服务的数据驱动的水安全

2017-02-19 1823
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介： 本讲义出自Vladimir Stemkovski在Spark Summit East 2017上的演讲，主要介绍了非营利性组织Water的使命是致力于为世界各地提供安全饮用水解决方案。IBM的 jStart 团队使用Bluemix Apache Spark服务与气象、经济以及社会数据相结合来寻找行为模式，预测水资源短缺，建议改变车站的运营方式以增加为当地社区提供的安全饮用水。

更多精彩内容参见云栖社区大数据频道https://yq.aliyun.com/big-data；此外，通过Maxcompute及其配套产品，低廉的大数据分析仅需几步，详情访问https://www.aliyun.com/product/odps。


本讲义出自Vladimir Stemkovski在Spark Summit East 2017上的演讲，主要介绍了非营利性组织Water的使命是致力于为世界各地提供安全饮用水解决方案。IBM的 jStart 团队使用Bluemix Apache Spark服务与气象、经济以及社会数据相结合来寻找行为模式，预测水资源短缺，建议改变车站的运营方式以增加为当地社区提供的安全饮用水。


86f9c36f45e886e92e888891c662cf98d6100362

3333c5b15d010ea06596487ee6dc0330586467f2

9be37bbf86060b071beb0fb74711c37bf1ae0dd6

a8826eda40e245732473ff6f8156fab2345a4ffb

afe35519169ab20829f76be61a0dc2e69ad3ffc7

888b7652731fa62ac7fb48758a621afc937b0074

55f93849cad2e133204fdcb101b216edfc91b9ff

0cdd542a4d7a9c7bf12c512099a11caf5a242ca9

ae454a2277a3c1bd29b8a3b2eae58eaaf732fdf2

7e1afbf073420709aeadac32fffeb53b0558ada6

文章标签：
Apache
安全
大数据
分布式计算
Spark
关键词：
apache spark apache spark
小猫吃鱼569
目录
相关文章
龙大吉
|
分布式计算 大数据 Apache
利用.NET进行大数据处理：Apache Spark与.NET for Apache Spark
【10月更文挑战第15天】随着大数据成为企业决策和技术创新的关键驱动力，Apache Spark作为高效的大数据处理引擎，广受青睐。然而，.NET开发者面临使用Spark的门槛。本文介绍.NET for Apache Spark，展示如何通过C#和F#等.NET语言，结合Spark的强大功能进行大数据处理，简化开发流程并提升效率。示例代码演示了读取CSV文件及统计分析的基本操作，突显了.NET for Apache Spark的易用性和强大功能。
龙大吉
579 1
doflamin
|
分布式计算 资源调度 Kubernetes
[翻译]Spark on MR3——运行 Apache Spark 的新方式
> 此文是对 Spark on MR3 资料的翻译 原文链接：https://www.datamonad.com/post/2021-08-18-spark-mr3/ 代码链接：https://github.com/mr3project/spark-mr3 MR3 是一个通用的执行引擎，原生支持 Hadoop 和 Kubernetes。虽然 Hive on MR3 是主要应用，但 MR3 也可以
doflamin
969 0
[翻译]Spark on MR3——运行 Apache Spark 的新方式
游客du62snpusmjeg
|
分布式计算 监控 安全
【墨菲安全实验室】Spark（3.1.2, 3.2.1, 3.3.0版本）shell命令注入漏洞
【墨菲安全实验室】Spark（3.1.2, 3.2.1, 3.3.0版本）shell命令注入漏洞
游客du62snpusmjeg
661 0
【墨菲安全实验室】Spark（3.1.2, 3.2.1, 3.3.0版本）shell命令注入漏洞
技术小达人
|
机器学习/深度学习 存储 人工智能
重磅解读：基于Occlum和BigDL构建端到端的安全分布式Spark大数据分析方案
重磅解读：基于Occlum和BigDL构建端到端的安全分布式Spark大数据分析方案
技术小达人
1634 0
重磅解读：基于Occlum和BigDL构建端到端的安全分布式Spark大数据分析方案
码农工程师
|
消息中间件 运维 Kubernetes
年度技术盛宴，Apache APISIX Summit 2022 精彩回顾
年度技术盛宴，Apache APISIX Summit 2022 精彩回顾
码农工程师
607 0
阿里云E-MapReduce团队
|
SQL 人工智能 分布式计算
回顾 | SPARK + AI SUMMIT 2020 中文精华版线上峰会圆满结束（附PPT下载）
超乎你想象的干货合集打包带走！
阿里云E-MapReduce团队
23239 0
回顾 | SPARK + AI SUMMIT 2020 中文精华版线上峰会圆满结束（附PPT下载）
阿里云E-MapReduce团队
|
人工智能 分布式计算 Spark
SPARK + AI SUMMIT 2020 中文精华版线上峰会材料
SPARK + AI SUMMIT 2020 中文精华版线上峰会材料
阿里云E-MapReduce团队
1137 0
SPARK + AI SUMMIT 2020 中文精华版线上峰会材料
InfoQ
|
搜索推荐 中间件 Apache
浅谈开源基础软件与商业公司全球化 | Apache APISIX Summit Asia 2022 圆桌回顾
2022 年 5 月 21 日，Apache APISIX Summit ASIA 2022 开启第二天的议程。围绕“开源基础软件和商业公司的全球化”这一主题，温铭（API7.ai 联合创始人兼 CEO，Apache APISIX PMC 主席）作为主持人，与潘娟（SphereEx 联合创始人兼 CTO，Apache ShardingSphere PMC 成员）、单致豪（腾讯开源联盟主席，TARS 基金会董事主席）、翟佳（StreamNative 联合创始人，Apache Pulsar PMC 成员）三位嘉宾展开了一场圆桌讨论，探寻“基础开源软件是否适合做全球化”、“如何做全球化”、“国内外开
InfoQ
499 0
InfoQ
|
Cloud Native Linux Apache
生态建设对开源项目的重要性 | Apache APISIX Summit Asia 2022 圆桌回顾
2022 年 5 月 21 日，Apache APISIX Summit ASIA 2022 开启第二天的议程。围绕“生态建设对开源项目的重要性”这一主题，王晔倞（API7.ai 合伙人兼技术副总裁，Apache APISIX Committer）担任主持人，与周小四（青云科技容器事业部负责人）、王宇博（亚马逊云科技开发者关系总监）、吴晟（Tetrate 创始工程师，Apache SkyWalking 创始人）三位嘉宾展开了一场圆桌讨论，讨论话题包括：“社区、用户、开发者对于开源项目的意义”、“完善的开源生态系统对于开发者和用户的意义”、“开源生态发展在国内大环境下的态势与挑战”。
InfoQ
478 0
InfoQ
|
自然语言处理 Cloud Native Java
Apache APISIX Summit ASIA 2022 拉开帷幕，首日精彩内容回顾
2022 年 5 月 20 日，Apache APISIX Summit ASIA 2022 在线上拉开帷幕，为开发者们带来了关于 APISIX 基础架构与应用实践、开源生态和开源项目的多角度分享与讨论。
InfoQ
333 0

热门文章

最新文章

  • 1
    Spark SQL玩起来
  • 2
    Spark SQL性能优化
  • 3
    阿里巴巴瑾谦/沐远：云HBaseSQL及分析——Phoenix&Spark
  • 4
    【译】使用Spark SQL 运行大规模基因组工作流
  • 5
    EMR Spark Relational Cache的执行计划重写
  • 6
    钉钉群直播【Spark Relational Cache 原理和实践】
  • 7
    简化 TensorFlow 和 Spark 互操作性的问题：LinkedIn 开源 Spark-TFRecord
  • 8
    Spark RDD分区和数据分布：优化大数据处理
  • 9
    Storm与Spark、Hadoop三种框架对比
  • 10
    AnalyticDB MySQL Spark 助力在OSS上构建低成本数据湖
  • 1
    2025 OSCAR丨与创新者同频！Apache RocketMQ 邀您共赴开源之约
    321
  • 2
    Confluent 首席架构师万字剖析 Apache Fluss（三）：湖流一体
    954
  • 3
    Confluent 首席架构师万字剖析 Apache Fluss（二）：核心架构
    1025
  • 4
    Apache ShenYu 架构学习指南
    1557
  • 5
    阿里云、Ververica、Confluent 与 LinkedIn 携手推进流式创新，共筑基于 Apache Flink Agents 的智能体 AI 未来
    1559
  • 6
    Apache Doris 与 ClickHouse：运维与开源闭源对比
    1233
  • 7
    Confluent 首席架构师万字剖析 Apache Fluss（一）：核心概念
    1169
  • 8
    Apache Doris 4.0 AI 能力揭秘（二）：为企业级应用而生的 AI 函数设计与实践
    1097
  • 9
    Apache Doris 3.1 正式发布：半结构化分析全面升级，湖仓一体能力再跃新高
    1252
  • 10
    Apache Kafka 分布式流处理平台技术详解与实践指南
    915

    • 相关课程

    更多
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第一阶段
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第二阶段
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第四阶段
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第五阶段
  • 大数据实战项目 - 反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第七阶段
  • 大数据实时计算框架Spark快速入门

    • 相关电子书

    更多
  • Hybrid Cloud and Apache Spark
  • Scalable Deep Learning on Spark
  • Comparison of Spark SQL with Hive

    • 推荐镜像

    更多
  • apache
    • 下一篇
    一条命令迁移，帮你实现 OpenClaw 与 Hermes Agent 记忆互通！