spark培训视频

简介: http://www.chinahadoop.cn/
目录
相关文章
|
机器学习/深度学习 人工智能 分布式计算
Spark AI Summits大会介绍及如何下载相关视频资料【附2018年6月AI ppt下载】
Spark AI Summits大会介绍及如何下载相关视频资料【附2018年6月AI ppt下载】
480 0
Spark AI Summits大会介绍及如何下载相关视频资料【附2018年6月AI ppt下载】
|
机器学习/深度学习 分布式计算 算法
Spark快速入门(72集视频+源码+笔记)
Spark快速入门(72集视频+源码+笔记)1、什么是Spark?Apache Spark是专为大规模数据处理而设计的快速通用的计算引擎。Spark是UC Berkeley AMP lab (加州大学伯克利分校的AMP实验室)所开源的类Hadoop MapReduce的通用并行框架,Spark,拥有Hadoop MapReduce所具有的优点;但不同于MapReduce的是——Job中间输出结果可以保存在内存中,从而不再需要读写HDFS,因此Spark能更好地适用于数据挖掘与机器学习等需要迭代的MapReduce的算法。
2005 0
|
SQL 分布式计算 算法
Spark入门到精通视频学习资料--第五章:Shark介绍与使用(2讲)
熟悉Hadoop的应该就知道HBase和Hive,如果了解这两个组件,那么对于Shark就不会那么陌生了,也就比较容易上手了。 Shark基本上就是在Spark的框架基础上提供和Hive一样的HiveQL命令接口,为了最大程度的保持和Hive的兼容性,Shark使用了 Hive的API来实现query Parsing和 Logic Plan generation,最后的PhysicalPlan execution阶段用Spark代替Hadoop MapReduce。
1578 0
|
分布式计算 算法 Apache
Spark入门到精通视频学习资料--第六章:Machine Learning on Spark(1讲)
MLlib is Apache Spark's scalable machine learning library.(如下图所示)            很明显:MLlib 是一个广泛的机器学习的libray。
1640 0
|
分布式计算 自然语言处理 Java
Spark入门到精通视频学习资料--第七章:Spark多语言编程(1讲)
Spark目前支持scala、python、JAVA编程。 作为Spark的原生语言,scala是开发Spark应用程序的首选,其优雅简洁的代码,令开发过mapreduce代码的码农感觉象是上了天堂。
1335 0
|
存储 分布式计算 关系型数据库
Spark入门到精通视频学习资料--第八章:项目实战(2讲)
项目实战主要以数据处理为整体方向,总体的处理流程如下所示: 数据源-->存储(HDFS)-->计算(MR/SPARK/MPI)-->计算结果(Mysql/HBase/Redis)-->查询接口(WEB/报表) 按照这样的思路来讲解项目实战,具体请看视频: 《项目架构与案例(上).
1622 0
|
Web App开发 分布式计算 算法
Spark入门到精通视频学习资料--第二章:Spark生态系统介绍,Spark整体概述与Spark编程模型(2讲)
概述 什么是Spark ◆ Spark是UC Berkeley AMP lab所开源的类Hadoop MapReduce的通用的并行计算框架,Spark基于map reduce算法实现的分布式计算,拥有Hadoop MapReduce所具有的优点;但不同于MapReduce的是Job中间输出和结果可以保存在内存中,从而不再需要读写HDFS,因此Spark能更好地适用于数据挖掘与机器学习等需要迭代的map reduce的算法。
1789 0
|
分布式计算 大数据 Spark
Spark入门到精通视频学习资料--第三章:Spark进阶(2讲)
掌握Spark内核是精通Spark的关键,也是驾驭Spark的精髓所在。 基于Spark内核,Spark构建起了一体化多元化的大数据处理流水线,在一个技术堆栈中即可以同时完成批处理、实时流处理、交互式查询、机器学习、图计算以及这些子框架之间数据和RDD算子的无缝共享与互操作。
1506 0
|
分布式计算 资源调度 算法
Spark入门到精通视频学习资料--第四章:基于Spark的流处理框架Spark Streaming(2讲)
随着大数据的发展,人们对大数据的处理要求也越来越高,原有的批处理框架MapReduce适合离线计算,却无法满足实时性要求较高的业务,如实时推荐、用户行为分析等。
1943 0