电商项目之项目总结之企业招聘要求总结(上)｜学习笔记

开发者学堂课程【新电商大数据平台2020最新课程：电商项目之项目总结之企业招聘要求总结(上)】学习笔记，与课程紧密联系，让用户快速学习知识。

课程地址：https://developer.aliyun.com/learning/course/640/detail/10572

电商项目之项目总结之企业招聘要求总结(上)

内容介绍：

一、项目架构图

二、企业招聘要求总结

DataX 只是一个工具，只要记录相应的命令，导入即可。

一、项目架构图：

分层：

1. ODS 层（原始数据层）

ODS 内的数据和采集过来的数据一一对应， 很少会发生大的变化

2. DWD 层（明细层）

ETL 操作

3. DWS 层

轻度聚合，进行粒度汇总，针对一个维度进行分析

4. ADS 层

统计报表、指标分析

在这里后期会使用 Spark 技术来替代 HQL 语句，用 SparkSQL 的 DEL 风格进行代码编写开发。

二、企业招聘要求总结

1.有很强的业务感

2.有较好的项目管理能力，能推动项目发展

3.超大数据下的代码优化能力，并对其原理理解透彻

4.数据产品规划能力

5.数据治理能力

6.数据分析与挖据能力

7.建模理论基础扎实，且能熟练运用在工作中

8.熟悉大数据技术栈中的常规组件,并能熟练使用各类型语言进行离线和实时开发

9.熟悉业内常规的开源组件,并能根据不同场景制定不同的数据仓库实施方案