备案控制台
开发者社区 数据库 NoSQL数据库 文章 正文

阿里云分析引擎Spark On 多数据源介绍

2019-01-29 67767
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
本文涉及的产品
云原生多模数据库 Lindorm，多引擎 多规格 0-4节点
推荐场景：
海量数据下Lindorm查询实践
云数据库 Redis 版，社区版 2GB
推荐场景：
搭建游戏排行榜
云数据库 MongoDB，通用型 2核4GB
推荐场景：
五天玩转MongoDB训练营
简介： 主题：阿里云分析引擎Spark On 多数据源介绍 讲师：云覆（周广成)--阿里数据库产品专家

_2019_01_29_6_21_16

主题：阿里云分析引擎Spark On 多数据源介绍

讲师：云覆（周广成)--阿里数据库产品专家

内容概要：阿里云的分析引擎基于开源Spark构建分析HBase数据、Phoenix、MongoDB、RDS等多数据源的能力，本次分享主要介绍分析引擎Spark分析多数据库的原理、用法和场景介绍。

视频回看地址：https://yq.aliyun.com/live/854

PPT下载地址：https://yq.aliyun.com/download/3313

文章标签：
数据库
分布式计算
Spark
关键词：
apache spark分析
阿里云spark
阿里云apache spark
apache spark阿里云
apache spark引擎
hbase小能手
目录
相关文章
敏叔V587
|
26天前
|
移动开发 分布式计算 Spark
Spark的几种去重的原理分析
Spark的几种去重的原理分析
敏叔V587
23 0
扬流
|
27天前
|
SQL 分布式计算 监控
基于阿里云 EMR Serverless Spark 版快速搭建OSS日志分析应用
本文演示了使用 EMR Serverless Spark 产品搭建一个日志分析应用的全流程，包括数据开发和生产调度以及交互式查询等场景。
扬流
56424 7
基于阿里云 EMR Serverless Spark 版快速搭建OSS日志分析应用
孜倦与shine
|
12天前
|
机器学习/深度学习 数据采集 分布式计算
基于spark的大数据分析预测地震受灾情况的系统设计
基于spark的大数据分析预测地震受灾情况的系统设计
孜倦与shine
42 1
月亮给我抄代码
|
29天前
|
SQL 分布式计算 关系型数据库
Spark 分析计算连续三周登录的用户数
本文介绍了如何使用窗口函数`range between`来查询`login_time`为2022-03-10的用户最近连续三周的登录数。首先在MySQL中创建`log_data`表并插入数据，接着定义需求为找出该日期前连续三周活跃的用户数。通过Spark SQL，分步骤实现：1)确定统计周期，2)筛选符合条件的数据，3)计算用户连续登录状态。在初始实现中出现错误，因未考虑日期在周中的位置，修正后正确计算出活跃用户数。
月亮给我抄代码
41 6
扬流
|
1月前
|
存储 分布式计算 Serverless
阿里云 EMR Serverless Spark 版开启免费公测
EMR Serverless Spark 版免费公测已开启，预计于2024年06月25日结束。公测阶段面向所有用户开放，您可以免费试用。
扬流
545 5
孜倦与shine
|
12天前
|
分布式计算 定位技术 Scala
使用spark基于出租车GPS数据实现车辆数量统计以及北京每个城区的车辆位置点数分析
使用spark基于出租车GPS数据实现车辆数量统计以及北京每个城区的车辆位置点数分析
孜倦与shine
42 0
三分钟热度的鱼
|
1月前
|
分布式计算 DataWorks 大数据
MaxCompute操作报错合集之大数据计算的MaxCompute Spark引擎无法读取到表，是什么原因
MaxCompute是阿里云提供的大规模离线数据处理服务，用于大数据分析、挖掘和报表生成等场景。在使用MaxCompute进行数据处理时，可能会遇到各种操作报错。以下是一些常见的MaxCompute操作报错及其可能的原因与解决措施的合集。
三分钟热度的鱼
102 1
MaxCompute操作报错合集之大数据计算的MaxCompute Spark引擎无法读取到表，是什么原因
WIFI码密
|
1月前
|
分布式计算 Java 关系型数据库
spark用于分析数据并将数据保存到数据库中是
5月更文挑战第8天
WIFI码密
40 1
拓端数据部落
|
1月前
|
SQL 分布式计算 数据可视化
数据分享|Python、Spark SQL、MapReduce决策树、回归对车祸发生率影响因素可视化分析
数据分享|Python、Spark SQL、MapReduce决策树、回归对车祸发生率影响因素可视化分析
拓端数据部落
51 4
vohelon
|
1月前
|
机器学习/深度学习 分布式计算 数据处理
Spark是一个基于内存的通用数据处理引擎，可以进行大规模数据处理和分析
【5月更文挑战第2天】Spark是一个基于内存的通用数据处理引擎，可以进行大规模数据处理和分析
vohelon
43 3
数据库

NoSQL数据库

热门文章

最新文章

  • 1
    redis4.0、codis、阿里云redis 3种redis集群对比分析
  • 2
    NoSQL最新现状和趋势：云NoSQL数据库将成重要增长引擎
  • 3
    MongoDB Sharded cluster架构原理
  • 4
    Redis Stream——作为消息队列的典型应用场景
  • 5
    HBase的备份以及恢复方案
  • 6
    Apache Cassandra 简介
  • 7
    找对业务G点, 体验酸爽 - PostgreSQL内核扩展指南
  • 8
    分布式(hadoop)内核研发面试指南
  • 9
    MongoDB查询优化：从 10s 到 10ms
  • 10
    MongoDB 如何使用内存？为什么内存满了？
  • 1
    多模数据库Lindorm再升级：对接Dataphin，打通数据治理“最后一公里”
    66
  • 2
    阿里云数据库Tair通过信通院「分布式缓存服务稳定性」“先进级”评估
    178
  • 3
    Redis经典问题：BigKey问题
    373
  • 4
    Redis经典问题：缓存击穿
    389
  • 5
    Redis经典问题：热点key问题
    359
  • 6
    国内唯一 阿里云荣膺MongoDB“2024年度DBaaS认证合作伙伴奖”
    89058
  • 7
    Redis经典问题：数据并发竞争
    372
  • 8
    Redis热升级秘诀：保证高可用性的技术方案
    437
  • 9
    Redis经典问题：数据不一致
    385
  • 10
    mysqlTools 一分钟部署安装本mysql多个版本，解锁繁琐部署过程
    348

    • 相关课程

    更多
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第一阶段
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第二阶段
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第三阶段
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第四阶段
  • 大数据实战项目 - 反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第七阶段
  • 大数据实时计算框架Spark快速入门

    • 相关电子书

    更多
  • Hybrid Cloud and Apache Spark
  • Scalable Deep Learning on Spark
  • Comparison of Spark SQL with Hive

    • 相关实验场景

    更多
  • 通过Lindorm-cli连接并使用宽表引擎
  • 阿里云百炼xAnalyticDB PostgreSQL构建AIGC应用
  • MySQL引擎及架构优化
  • 基于阿里云E-HPC平台的WRF气象预报实验
  • 基于阿里云DeepGPU实例，让AI带你畅玩杭州
  • 基于阿里云DeepGPU实例，用AI画唯美国风少女
    • 下一篇
    2024年阿里云免费云服务器及学生云服务器申请教程参考