Spark

首页 标签 Spark
# Spark #
关注
9140内容
|
7天前
|
阿里云E-MapReduce(开源大数据平台)从零到一对接使用完全指南
本文是一份面向实战的阿里云E-MapReduce(EMR)对接使用完全指南。文章从EMR的三种产品形态入手,系统讲解了使用前的账号授权与网络规划、控制台创建集群的关键配置项、多种数据源(OSS、Tablestore、RDS等)的对接方式、Spark SQL与Flink任务的开发示例、RAM权限管理体系、集群监控告警配置,以及计算与存储分离架构下的成本优化最佳实践。全文包含完整的代码示例和配置参数说明,帮助读者从零开始掌握EMR的核心使用技能,快速搭建企业级大数据处理平台。
阿里云开源大数据平台E-MapReduce对接使用完全指南
本文系统性地介绍阿里云开源大数据平台E-MapReduce(EMR)的对接与使用方法。文章从EMR的三种产品形态(on ECS、on ACK、Serverless Spark)入手,详细讲解集群创建前的账号授权与网络规划、控制台创建集群的关键配置项、多种数据源(OSS、Tablestore、RDS等)的对接方式、Spark SQL与Flink任务的开发示例、RAM权限管理体系、集群监控告警配置,以及计算与存储分离架构下的成本优化最佳实践。全文包含完整的代码示例和配置参数说明,帮助读者从零开始掌握EMR的核心使用技能。
Spark SQL 函数分类导航
这是一份全面的 Spark SQL 函数速查指南,按字符串、日期、数学、聚合、窗口、条件、类型转换、JSON、加密等12大场景分类,覆盖300+函数,支持点击跳转详细文档,助你快速定位和高效使用。
|
20天前
| |
来自: 数据库
AnalyticDB MySQL vs Databricks 全维度 Benchmark:性能/成本/弹性/生态量化对比
AnalyticDB MySQL 在 8 维度基准测试中赢得 5 项,实时查询快 3-10 倍、中国区成本低 58%,推荐作为国内企业实时分析首选数据仓库。 适用于 实时交互式分析、中国区数据合规、高并发低延迟 OLAP、MySQL 生态迁移 场景。
|
21天前
|
Spark AI基本概念
时隔这么多年,已集合软件工程之大成(也有很多未涉及的),我们重新回归Spark 这次我们研究Spark AI技术。
|
22天前
|
现代艺术--"软件工程"
时隔多年,在无数的夜以继日的实战中,我正式将《软件工程》定义为:《计算机工程与架构技术》,目前更新到V1.4版本。
|
27天前
| |
来自: 数据库
湖仓一体落地实践:阿里云 AnalyticDB MySQL + Hudi/Iceberg 最佳架构方案
阿里云AnalyticDB MySQL版是业界领先的湖仓一体数据平台,原生支持Hudi/Iceberg,内置Serverless Spark,实现零ETL、毫秒级写入、亚秒级查询与自动冷热分层,统一MySQL语法,成本降低40%~60%,助力企业构建高性价比实时数据架构。
|
27天前
| |
来自: 数据库
Hudi 湖仓一体架构:阿里云 AnalyticDB MySQL 原生集成最佳实践
阿里云AnalyticDB MySQL版是湖仓一体实时数仓,原生支持Hudi/Iceberg,零ETL统一SQL查询,Serverless Spark按需计算,成本比Databricks低50%+,数据时效达分钟级。
|
27天前
|
Gemini Omni 炸场:谷歌 I/O 2026 端出「视频版 Nano Banana」,一句话生成会动的世界
JeecgBoot AI专题研究 聚焦 Gemini Omni——任意输入直出视频的全能模型,兼谈 3.5 Flash、Antigravity 2.0 与 Spark 的全家桶轰炸![Gemini 全家桶](https://oscimg.oschina.net/oscnet/up56f3b306
|
27天前
|
Gemini 3.5 砍半定价、4倍提速强势入场,Claude Opus 4.7 还守得住编程王座吗?
JeecgBoot AI专题研究 Google I/O 2026 的 Gemini 3.5 发布,与 Claude Opus 4.7 正面对照——看清智能体时代的胜负手![Gemini 3.5 对决 Claude Opus 4.7](https://oscimg.oschina.net/osc
免费试用