Hadoop平台集群配置、环境变量设置?-问答-阿里云开发者社区-阿里云

开发者社区> 问答> 正文
阿里云
为了无法计算的价值
打开APP
阿里云APP内打开

Hadoop平台集群配置、环境变量设置?

2019-10-29 14:35:28 1029 1

Hadoop平台集群配置、环境变量设置?

取消 提交回答
全部回答(1)
  • 珍宝珠
    2019-10-30 15:41:02

    zookeeper:修改zoo.cfg文件,配置dataDir,和各个zk节点的server地址端口,tickTime心跳时间默认是2000ms,其他超时的时间都是以这个为基础的整数倍,之后再dataDir对应目录下写入myid文件和zoo.cfg中的server相对应。 hadoop:修改
    hadoop-env.sh配置java环境变量
    core-site.xml配置zk地址,临时目录等
    hdfs-site.xml配置nn信息,rpc和http通信地址,nn自动切换、zk连接超时时间等
    yarn-site.xml配置resourcemanager地址
    mapred-site.xml配置使用yarn
    slaves配置节点信息
    格式化nn和zk。
    hbase:修改
    hbase-env.sh配置java环境变量和是否使用自带的zk
    hbase-site.xml配置hdfs上数据存放路径,zk地址和通讯超时时间、master节点
    regionservers配置各个region节点
    zoo.cfg拷贝到conf目录下
    spark:
    安装Scala
    修改spark-env.sh配置环境变量和master和worker节点配置信息
    环境变量的设置:直接在/etc/profile中配置安装的路径即可,或者在当前用户的宿主目录下,配置在.bashrc文件中,该文件不用source重新打开shell窗口即可,配置在.bash_profile的话只对当前用户有效。

    0 0
相关问答

1

回答

Hadoop集群环境包括那些内容?

2021-12-12 22:21:42 627浏览量 回答数 1

1

回答

Hadoop环境配置中怎么离线安装呢?

2021-12-03 22:20:39 110浏览量 回答数 1

1

回答

Hadoop环境配置中怎么创建用户并设置密码呢?

2021-12-03 19:16:33 108浏览量 回答数 1

1

回答

Hadoop环境配置中怎么切换用户呢?

2021-12-03 21:56:57 212浏览量 回答数 1

1

回答

Hadoop配置虚拟机环境如何永久关闭防火墙?

2021-12-03 21:19:12 94浏览量 回答数 1

1

回答

Hadoop环境配置中怎么给hadoop用户配置权限并打开配置文件呢?

2021-12-03 19:18:07 107浏览量 回答数 1

1

回答

Hadoop中配置虚拟机环境需要进行什么操作?

2021-12-03 21:16:35 86浏览量 回答数 1

1

回答

如何搭建Hadoop集群环境?政企Hadoop大数据平台怎么选择?

2019-04-15 16:43:17 1444浏览量 回答数 1

1

回答

Hadoop环境搭建问题

2018-11-06 14:20:16 1445浏览量 回答数 1

2

回答

hadoop伪分布式环境搭建

2016-02-19 17:31:44 2594浏览量 回答数 2
+关注
203
文章
1654
问答
问答排行榜
最热
最新
相关电子书
更多
低代码开发师(初级)实战教程
立即下载
阿里巴巴DevOps 最佳实践手册
立即下载
冬季实战营第三期:MySQL数据库进阶实战
立即下载