AI 助理
备案控制台

Spark

首页 标签 Spark
# Spark #
关注
9105内容
最新 热门 文章 问答 课程
武子康
|
11月前
|
博文
大数据-87 Spark 集群 案例学习 Spark Scala 案例 手写计算圆周率、计算共同好友
大数据-87 Spark 集群 案例学习 Spark Scala 案例 手写计算圆周率、计算共同好友
# 云原生大数据计算服务 MaxCompute # 分布式计算 # 大数据 # Java # Scala # Spark
武子康
|
11月前
|
博文
大数据-86 Spark 集群 WordCount 用 Scala & Java 调用Spark 编译并打包上传运行 梦开始的地方
大数据-86 Spark 集群 WordCount 用 Scala & Java 调用Spark 编译并打包上传运行 梦开始的地方
# 云原生大数据计算服务 MaxCompute # 分布式计算 # 大数据 # Java # Scala # Spark
武子康
|
11月前
|
博文
大数据-85 Spark 集群 RDD创建 RDD-Action Key-Value RDD详解 RDD的文件输入输出
大数据-85 Spark 集群 RDD创建 RDD-Action Key-Value RDD详解 RDD的文件输入输出
# 云原生大数据计算服务 MaxCompute # JSON # 分布式计算 # 大数据 # Spark # 数据格式
武子康
|
11月前
|
博文
大数据-84 Spark 集群 RDD创建 RDD-Transformation操作算子 详解(二)
大数据-84 Spark 集群 RDD创建 RDD-Transformation操作算子 详解(二)
# 云原生大数据计算服务 MaxCompute # 分布式计算 # 大数据 # 数据处理 # Spark
武子康
|
11月前
|
博文
大数据-84 Spark 集群 RDD创建 RDD-Transformation操作算子 详解(一)
大数据-84 Spark 集群 RDD创建 RDD-Transformation操作算子 详解(一)
# 云原生大数据计算服务 MaxCompute # SQL # 消息中间件 # 分布式计算 # 大数据 # Spark
武子康
|
11月前
|
博文
大数据-83 Spark 集群 RDD编程简介 RDD特点 Spark编程模型介绍
大数据-83 Spark 集群 RDD编程简介 RDD特点 Spark编程模型介绍
# 云原生大数据计算服务 MaxCompute # 存储 # 缓存 # 分布式计算 # 大数据 # Spark
武子康
|
11月前
|
博文
大数据-82 Spark 集群模式启动、集群架构、集群管理器 Spark的HelloWorld + Hadoop + HDFS
大数据-82 Spark 集群模式启动、集群架构、集群管理器 Spark的HelloWorld + Hadoop + HDFS
# 容器服务Kubernetes版 # 资源管理 # 云原生大数据计算服务 MaxCompute # 日志服务 # 分布式计算 # Kubernetes # Hadoop # Spark # 容器
武子康
|
11月前
|
博文
大数据-81 Spark 安装配置环境 集群环境配置 超详细 三台云服务器
大数据-81 Spark 安装配置环境 集群环境配置 超详细 三台云服务器
# 云服务器 ECS # 云原生大数据计算服务 MaxCompute # SQL # 机器学习/深度学习 # 分布式计算 # 大数据 # Spark
武子康
|
11月前
|
博文
大数据-80 Spark 简要概述 系统架构 部署模式 与Hadoop MapReduce对比
大数据-80 Spark 简要概述 系统架构 部署模式 与Hadoop MapReduce对比
# 资源管理 # 云原生大数据计算服务 MaxCompute # 分布式计算 # 资源调度 # Hadoop # 大数据 # Spark
威哥爱编程
|
11月前
|
博文
Spark任务OOM问题如何解决？
大家好，我是V哥。在实际业务中，Spark任务常因数据量过大、资源分配不合理或代码瓶颈导致OOM（Out of Memory）。本文详细分析了各种业务场景下的OOM原因，并提供了优化方案，包括调整Executor内存和CPU资源、优化内存管理策略、数据切分及减少宽依赖等。通过综合运用这些方法，可有效解决Spark任务中的OOM问题。关注威哥爱编程，让编码更顺畅！
# 存储 # 缓存 # 分布式计算 # 大数据 # Spark
免费试用