问我大数据怎么入门,我总结了亲身体验的学习路线推荐给她【推荐收藏】

本文涉及的产品
实时计算 Flink 版,5000CU*H 3个月
简介: 问我大数据怎么入门,我总结了亲身体验的学习路线推荐给她【推荐收藏】

前言

大家好,我是程序员Manor,我希望自己能成为国家复兴道路的铺路人,大数据领域的耕耘者,平凡但不甘于平庸的人。

前两天有学妹私信我说,她已经上完大一,大数据专业的,只学过大数据导论,问我大数据该如何入门?我不禁感慨普通高校擅长培养算法人才,但在工程人才的培养上存在很多的问题。

恰好期末考完,在等待回家这段有时间,manor为大家整理了一份我学大数据学习路线,在B站均能找到视频:

学习路线思维导图:

第一部分大数据技术(离线)

0.快速体验大数据:8天零基础入门大数据

这段课程我是疫情在家学习的,当时黑马线上基础班免费,当时就报名(白嫖 ),能从0开始学习大数据课程,了解linux、kettle、BI、mysql、从基础到实践,快速体验完整的大数据预处理+ETL+BI展示全链路过程

缺点是B站上没有给到配套资料,这里安利一下我的公众号:大数据智能ai

基础班的配套资料虚拟机已经更新到公众号了,关注后自行获取即可。

1.掌握一门语言,首选Java

大数据开发有三种语言可选,Java,Python和Scala,Scala后期是必学的,Java在开发中好比是屠龙刀,而Python是随身匕首,适合写写脚本,所以强烈推荐先学Java,这里推荐黑马的Java基础课程视频,

黑马最新JavaSE零基础入门到入土(idea版)

如果学习周期太长的话,只要能完成控制台上的增删改查就可以了

B站上还有其他视频

例如:

动力节点的JavaSE课程:缺点是用Eclipse讲的

狂神的SE入门课程:优点:学习编程的一些前置知识,相当贴近实战。

2.hadoop零基础学习(HDFS、MapReduce、Yarn、Hive)

Hadoop学习,黑马和尚硅谷两家机构都不错,我这里由于自学的时候主要学了黑马的,便贴出黑马的链接

Hadoop从零到精通完整版

尚硅谷(更多人的选择):

【尚硅谷】Hadoop2.x框架入门教程丨案例实战,好评如潮

前置知识还要学习Linux,manor为大家准备好了Linux最全学习笔记:

大数据开发工程师基本功修炼之史上最全Linux学习笔记

另外学有余力,还想进一步提升可学:

新出的hadoop3*0

Hadoop3.0-MapReduce从入门到精通

尚硅谷讲的最新Hive版本

3.Hive离线数仓项目

这里推荐的是黑马的离线项目:

黑马大数据项目——电商流量分析项目实战

缺点是不给配套资料

尚硅谷的离线数仓

尚硅谷的配套资料全,学的人也多

我个人学的是另一个项目,在线教育数仓项目

由于特殊原因视频无法分享,各位可看我写的笔记,自行研究一番

补充:其他的小组件如zookeeper、Flume、Impala和sqoop等建议花2~3个小时自学

这些组件都是工作中不经常用的,建议只花少量的时间学习,快速入门即可

这里贴出部分视频

sqoop

Flume

Azkaban

到此为止,大数据离线阶段就学完了,完结撒花🎉·🎉·

我们进入到第二部分大数据离线+实时技术阶段~

第二部分大数据技术(离线+实时)

0.海量数据存储HBase从入门到精通

Hbase公司用的很多,Kudu与其相似

1.消息队列Kafka从入门到精通

大数据必须掌握的缓存中间件

2.大数据-语言-scala

同样是搞大数据开发必学的语言,原因是Spark是基础scala开发的

3.大数据-框架-Spark

4.Spark离线实时项目

学完Spark后,可做一个项目实战检验一下学习成果。

5.大数据-框架-Flink

进阶:

FlinkSQL

Flink源码解析课程

6.Flink实时项目

这也是我将要学的Flink项目,暑假必拿下~

进阶:

推荐系统项目

机器学习的书籍:稍后为各位整理出来,在我的公众号领取

可适当阅读一些数仓书籍,有益于理论深化

如:

《阿里巴巴的大数据之路》

《数据仓库工具箱—维度建模的完全指南》

❤️往期精彩回顾❤️:

「机器学习」推荐系统简介——一起来看看你是怎么被大数据杀熟的(四)

❤️大数据开发必备:推荐7款大数据开发神器工作效率提升1000%【推荐收藏】

学了1年大数据,来测测你大数据技术掌握程度?大数据综合复习之面试题15问(思维导图+问答库)

滴滴出行大数据数仓实战

手把手教你完成第一个JS项目:用简单到极致的贪吃蛇游戏熟悉JS语法

总结

到这里恭喜你把大数据的主流技术学完了,如果你还有什么不懂,可随时问我,私信我,如果C站没有回复你,可在公众号后台加我好友,备注:C站来的。

希望以上能够帮到刚入门大数据的你!


相关实践学习
简单用户画像分析
本场景主要介绍基于海量日志数据进行简单用户画像分析为背景,如何通过使用DataWorks完成数据采集 、加工数据、配置数据质量监控和数据可视化展现等任务。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
目录
相关文章
|
6月前
|
SQL 分布式计算 大数据
黑马程序员-大数据入门到实战-分布式SQL计算 Hive 入门
黑马程序员-大数据入门到实战-分布式SQL计算 Hive 入门
73 0
|
6月前
|
分布式计算 资源调度 大数据
黑马程序员-大数据入门到实战-MapReduce & YARN入门
黑马程序员-大数据入门到实战-MapReduce & YARN入门
77 0
|
6月前
|
大数据 Java Linux
黑马程序员-大数据入门到实战-前置章节
黑马程序员-大数据入门到实战-前置章节
48 0
|
6月前
|
SQL 存储 大数据
黑马程序员-大数据入门到实战-分布式SQL计算 Hive 语法与概念
黑马程序员-大数据入门到实战-分布式SQL计算 Hive 语法与概念
78 0
|
6月前
|
存储 SQL 大数据
大数据技术之Clickhouse---入门篇---数据类型、表引擎
大数据技术之Clickhouse---入门篇---数据类型、表引擎
|
4天前
|
分布式计算 大数据 数据处理
[AIGC大数据基础] Spark 入门
[AIGC大数据基础] Spark 入门
|
6月前
|
SQL 缓存 大数据
大数据技术之Clickhouse---入门篇---SQL操作、副本
大数据技术之Clickhouse---入门篇---SQL操作、副本
|
4月前
|
分布式计算 资源调度 大数据
一图胜千言:大数据入门必备的16张数据流转图(建议收藏)
一图胜千言:大数据入门必备的16张数据流转图(建议收藏)
172 0
|
6月前
|
存储 分布式计算 Hadoop
黑马程序员-大数据入门到实战-HDFS分布式存储
黑马程序员-大数据入门到实战-HDFS分布式存储
91 0
|
2月前
|
分布式计算 DataWorks IDE
MaxCompute数据问题之忽略脏数据如何解决
MaxCompute数据包含存储在MaxCompute服务中的表、分区以及其他数据结构;本合集将提供MaxCompute数据的管理和优化指南,以及数据操作中的常见问题和解决策略。
47 0