【Spark】环境搭建(CentOS7)
              
 
1. 首先要安装java8,参考
【Linux】Linux服务器(centos7)环境搭建java/python3/nginx
2. 然后安装scala
首先下载scala, 解压,然后
vim /etc/profile
在文件末尾添加, 把路径换成自己的解压路径
export PATH=$PATH:/usr/local/scala-2.
              
             
            
            
            
              
              Spark机器学习3·推荐引擎(spark-shell)
              
[Spark机器学习](http://book.douban.com/subject/26593179/)
### 准备环境
- jblas
https://gcc.
              
             
            
            
            
            
            
              
              Spark Shuffle模块——Suffle Read过程分析
              
        
在阅读本文之前,请先阅读Spark Sort Based Shuffle内存分析
Spark Shuffle Read调用栈如下: 
1. org.apache.spark.rdd.ShuffledRDD#compute() 
2. org.apache.spark.shuffle.ShuffleManager#getReader() 
3. org.apache.spar