</div>《阿里巴巴Spark实践与探索》电子版地址
2023-01-07
87
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《
阿里云开发者社区用户服务协议》和
《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写
侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介：
阿里巴巴Spark实践与探索
目录
相关文章
|
SQL
分布式计算
Java
|
9月前
|
分布式计算
Java
Serverless
EMR Serverless Spark 实践教程 | 通过 spark-submit 命令行工具提交 Spark 任务
本文以 ECS 连接 EMR Serverless Spark 为例，介绍如何通过 EMR Serverless spark-submit 命令行工具进行 Spark 任务开发。
565
7
7
|
8月前
|
分布式计算
供应链
Java
|
8月前
|
分布式计算
Serverless
数据处理
EMR Serverless Spark 实践教程 | 通过 Apache Airflow 使用 Livy Operator 提交任务
Apache Airflow 是一个强大的工作流程自动化和调度工具，它允许开发者编排、计划和监控数据管道的执行。EMR Serverless Spark 为处理大规模数据处理任务提供了一个无服务器计算环境。本文为您介绍如何通过 Apache Airflow 的 Livy Operator 实现自动化地向 EMR Serverless Spark 提交任务，以实现任务调度和执行的自动化，帮助您更有效地管理数据处理任务。
319
0
0
|
9月前
|
分布式计算
Hadoop
Serverless
数据处理的艺术：EMR Serverless Spark实践及应用体验
阿里云EMR Serverless Spark是基于Spark的全托管大数据处理平台，融合云原生弹性与自动化，提供任务全生命周期管理，让数据工程师专注数据分析。它内置高性能Fusion Engine，性能比开源Spark提升200%，并有成本优化的Celeborn服务。支持计算存储分离、OSS-HDFS兼容、DLF元数据管理，实现一站式的开发体验和Serverless资源管理。适用于数据报表、科学项目等场景，简化开发与运维流程。用户可通过阿里云控制台快速配置和体验EMR Serverless Spark服务。
14914
2
3
|
10月前
|
分布式计算
运维
Serverless
通过Serverless Spark提交PySpark流任务的实践体验
EMR Serverless Spark服务是阿里云推出的一种全托管、一站式的数据计算平台，旨在简化大数据计算的工作流程，让用户更加专注于数据分析和价值提炼，而非基础设施的管理和运维。下面就跟我一起通过Serverless Spark提交PySpark流任务吧。
417
1
1
|
10月前
|
分布式计算
Spark
大数据
深入探究Apache Spark在大数据处理中的实践应用
【6月更文挑战第2天】Apache Spark是流行的开源大数据处理框架，以其内存计算速度和低延迟脱颖而出。本文涵盖Spark概述、核心组件（包括Spark Core、SQL、Streaming和MLlib）及其在数据预处理、批处理分析、交互式查询、实时处理和机器学习中的应用。通过理解Spark内部机制和实践应用，可提升大数据处理效率，发挥其在各行业的潜力。
523
3
3
|
11月前
|
分布式计算
Shell
开发工具
|
11月前
|
分布式计算
搜索推荐
Hadoop
阿里巴巴资深架构师熬几个通宵肛出来的Spark+Hadoop+中台实战pdf
Spark大数据分析实战
1、Spark简介
初识Spark
Sp ark生态系统BDAS
Sp ark架构与运行逻辑
弹性分布式数据集
113
0
0
|
分布式计算
Kubernetes
Serverless
热门文章
最新文章
1
从“笨重大象”到“敏捷火花”：Hadoop与Spark的大数据技术进化之路
2
Spark Operator浅析
3
Hadoop大数据平台实战(05)：深入Spark Cluster集群模式YARN vs Mesos vs Standalone vs K8s
4
开源大数据技术专场（上午）:Spark、HBase、JStorm应用与实践
5
Spark从入门到入土(二)：任务提交（上）
6
spark wordcount 第一个spark 程序
7
Spark核心原理与应用场景解析：面试经验与必备知识点解析
8
Spark源码分析之三：Stage划分
9
spark启动简单脚本
10
10【在线日志分析】之基于Spark Streaming开发OnLineLogAanlysis1
1
在hue上部署spark作业
209
2
Python与Apache Spark：实时AI的大数据引擎——Spark Streaming实战
269
3
MaxCompute操作报错合集之 Spark Local模式启动报错，是什么原因
115
4
MaxCompute操作报错合集之使用Spark查询时函数找不到的原因是什么
78
5
E-MapReduce Serverless Spark 版测评
11661
6
迟来的EMR Serverless Spark评测报告
363
7
E-MapReduce Serverless Spark 评测
108
8
E-MapReduce Serverless Spark开发者评测
131
9
DataWorks产品使用合集之怎么编写和执行Spark SQL
183
10
带你读《阿里云产品五月刊》——五、阿里云 EMR Serverless Spark 版开启免费公测
152