学习中心> 数据采集系统 Flume 快速入门> 正文

数据采集系统 Flume 快速入门

20课时 |
408人已学 |
免费
课程介绍

课程大纲:

第1章 概述

第2章 快速入门

第3章 企业开发案例

第4章 Flume监控之Ganglia

第5章 Flume高级之自定义MySQ

第6章 知识扩展

第7章 企业真实面试题(重点)

课程介绍

 

简介:

第1章概述

第2章快速入门

第3章企业开发案例

第4章Flume监控之Ganglia

第5章Flume高级之自定义MySQ

第6章知识扩展

第7章企业真实面试题(重点)

 

第1章概述:

1.1 Flume定义

1.2 Flume组成架构:

1.2.1 Agent

1.2.2 Source

1.2.3 Channel

1.2.4 Sink

1.2.5 Event

1.3 Flume拓扑结构

1.4 Flume Agent内部原理

 

第2章快速入门:

2.1 Flume安装地址

2.2安装部署

 

第3章企业开发案例:

3.1监控端口数据官方案例

3.2实时读取本地文件到HDFS...

3.3实时读取目录文件到HDFS...

3.4单数据源多出口案例(一)

3.5单数据源多出口案例(Sink...

3.6多数据源汇总案例

 

第4章Flume监控之Ganglia:

4.1 Ganglia的安装与部署

4.2操作Flume测试监控

 

第5章Flume高级之自定义MySQ:

5.1自定义Source说明

5.2自定义MySQLSource步骤

5.3自定义MySQLSource组成

5.4代码实现

5.4.1导入Pom依赖

5.4.2添加配置信息

5.4.3 SQLSourceHelper

5.4.4 MySQLSource

5.5测试

5.5.1 Jar包准备

5.5.2配置文件准备

5.5.3 MySql表准备

5.5.4测试并查看结果

 

第6章知识扩展:

6.1常见正则表达式语法

6.2练习

 

第7章企业真实面试题(重点):

7.1你是如何实现Flume数据...

7.2 Flume的Source , Sink , ...

7.3 Flume的Channel Selectors

7.4 Flume参数调优

7.5 Flume的事务机制

7.6 Flume采集数据会丢失吗?

我的学习进度
请登录后查看您的学习进度!
立即登录
本课程相关云产品