阿里云E-MapReduce(开源大数据平台)从零到一对接使用完全指南
本文是一份面向实战的阿里云E-MapReduce(EMR)对接使用完全指南。文章从EMR的三种产品形态入手,系统讲解了使用前的账号授权与网络规划、控制台创建集群的关键配置项、多种数据源(OSS、Tablestore、RDS等)的对接方式、Spark SQL与Flink任务的开发示例、RAM权限管理体系、集群监控告警配置,以及计算与存储分离架构下的成本优化最佳实践。全文包含完整的代码示例和配置参数说明,帮助读者从零开始掌握EMR的核心使用技能,快速搭建企业级大数据处理平台。
阿里云开源大数据平台E-MapReduce对接使用完全指南
本文系统性地介绍阿里云开源大数据平台E-MapReduce(EMR)的对接与使用方法。文章从EMR的三种产品形态(on ECS、on ACK、Serverless Spark)入手,详细讲解集群创建前的账号授权与网络规划、控制台创建集群的关键配置项、多种数据源(OSS、Tablestore、RDS等)的对接方式、Spark SQL与Flink任务的开发示例、RAM权限管理体系、集群监控告警配置,以及计算与存储分离架构下的成本优化最佳实践。全文包含完整的代码示例和配置参数说明,帮助读者从零开始掌握EMR的核心使用技能。
Spark SQL 函数分类导航
这是一份全面的 Spark SQL 函数速查指南,按字符串、日期、数学、聚合、窗口、条件、类型转换、JSON、加密等12大场景分类,覆盖300+函数,支持点击跳转详细文档,助你快速定位和高效使用。
Spark AI基本概念
时隔这么多年,已集合软件工程之大成(也有很多未涉及的),我们重新回归Spark 这次我们研究Spark AI技术。
现代艺术--"软件工程"
时隔多年,在无数的夜以继日的实战中,我正式将《软件工程》定义为:《计算机工程与架构技术》,目前更新到V1.4版本。