Spark安装教程
该教程详细介绍了在Linux环境下安装Spark 3.1.2的步骤。首先，检查JDK版本需为1.8。接着，下载Spark资源并设置环境变量`SPARK_HOME`。配置`spark-env.sh`和`yarn-site.xml`文件，禁用内存检查。然后，重启Hadoop集群，启动Spark集群，并通过`jps -ml`检查Spark Master和Worker。可以通过Web UI访问Spark状态，并使用`spark-shell`测试Scala交互环境及Spark on Yarn。最后，学习如何关闭Spark集群。
Scala01 —— Scala基础
Scala 是一种基于 JVM 的多范式编程语言，它融合了面向对象和函数式编程的特点。本文档介绍了Scala的基础知识，包括如何搭建开发环境、语言特性、变量和数据类型、程序逻辑、运算符、控制流、集合以及方法和函数的使用。特别强调了Scala集合的重要性，它们作为数据结构支持多种操作，并且有许多内置的算子和库来解决问题。文档还涵盖了如何在IDEA中配置Scala SDK，以及如何使用元组、映射、数组和模式匹配等核心概念。此外，文档还讨论了Scala与Java变量的区别，以及如何通过隐式类和字符串插值等扩展语言功能。