5 Kudu安装
CDH从5.10开始,打包集成Kudu1.2,并且Cloudera正式提供支持。这个版本开始Kudu的安装较之前要简单很多,省去了Impala_Kudu,安装完Kudu,Impala即可直接操作Kudu。
以下安装步骤基于用户使用Cloudera Manager来安装和部署Kudu1.2
5.1 安装csd文件
5.2 安装Kudu服务
3.检查http显示Kudu正常:
4.通过CM界面配置Kudu的Parcel地址,并下载,分发,激活Kudu。
5.通过CM安装Kudu1.2
添加Kudu服务
选择Master和Tablet Server
配置相应的目录,注:无论是Master还是Tablet根据实际情况数据目录(fs_data_dir)应该都可能有多个,以提高并发读写,从而提高Kudu性能
启动Kudu服务
安装完毕
5.3 配置Impala
在CDH5.10中,安装完Kudu1.2后,默认Impala即可直接操作Kudu进行SQL操作,但为了省去每次建表都需要在TBLPROPERTIES中添加kudu_master_addresses属性,建议在Impala的高级配置KuduMaster的地址:--kudu_master_hosts=ip-172-31-2-159:7051
6 快速组件服务验证
6.1 HDFS验证(mkdir+put+cat+get)
6.2 Hive验证
6.3 MapReduce验证
6.4 Impala验证
6.5 Spark验证
6.6 Kudu验证
“醉酒鞭名马,少年多浮夸! 岭南浣溪沙,呕吐酒肆下!挚友不肯放,数据玩的花!”