备案控制台
开发者社区 开发与运维 文章 正文

HDFS的一些配置文件修改

2018-03-20 1372
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介： sbin/start-dfs.sh 和 sbin/stop-dfs.sh 在第二行增加如下内容 HDFS_DATANODE_USER=root HDFS_DATANODE_SECURE_USER=hdfs HDFS_NAMENODE_USER=root HDFS_SECONDARYNAMENODE_USER=root sbin/start-yarn.

sbin/start-dfs.sh 和 sbin/stop-dfs.sh 在第二行增加如下内容

HDFS_DATANODE_USER=root  
HDFS_DATANODE_SECURE_USER=hdfs  
HDFS_NAMENODE_USER=root  
HDFS_SECONDARYNAMENODE_USER=root

sbin/start-yarn.sh 和 sbin/stop-yarn.sh 在第二行增加如下内容

YARN_NODEMANAGER_USER=root 
YARN_RESOURCEMANAGER_USER=root

etc/hadoop-env.sh 和 etc/yarn-env.sh 增加jdk的所在目录

export JAVA_HOME=/usr/local/jdk/

 

文章标签：
Java
关键词：
文件存储HDFS版配置文件
缤纷世界wb
目录
相关文章
ftw2fzqaoykua
|
机器学习/深度学习 移动开发 分布式计算
配置 HDFS-配置 core-site-hdfs-size 以及 env.sh 等配置文件|学习笔记
快速学习配置 HDFS-配置 core-site-hdfs-size 以及 env.sh 等配置文件
ftw2fzqaoykua
346 0
ftw2fzqaoykua
|
分布式计算 安全 Hadoop
配置 HDFS-配置 https 证书以及 ssl 配置文件|学习笔记
快速学习配置 HDFS-配置 https 证书以及 ssl 配置文件
ftw2fzqaoykua
856 0
配置 HDFS-配置 https 证书以及 ssl 配置文件|学习笔记
听风de歌
|
17小时前
|
存储 分布式计算 运维
Hadoop的HDFS问题
【5月更文挑战第5天】Hadoop的HDFS问题
听风de歌
8 3
yuanzhengme
|
26天前
|
分布式计算 Hadoop 测试技术
Hadoop【基础知识 05】【HDFS的JavaAPI】（集成及测试）
【4月更文挑战第5天】Hadoop【基础知识 05】【HDFS的JavaAPI】（集成及测试）
yuanzhengme
45 8
yuanzhengme
|
26天前
|
分布式计算 资源调度 Hadoop
Hadoop【基础知识 03+04】【Hadoop集群资源管理器yarn】（图片来源于网络）（hadoop fs + hadoop dfs + hdfs dfs 使用举例）
【4月更文挑战第5天】Hadoop【基础知识 03】【Hadoop集群资源管理器yarn】（图片来源于网络）Hadoop【基础知识 04】【HDFS常用shell命令】（hadoop fs + hadoop dfs + hdfs dfs 使用举例）
yuanzhengme
54 9
yuanzhengme
|
27天前
|
分布式计算 Hadoop Shell
Hadoop【基础知识 04】【HDFS常用shell命令】（hadoop fs + hadoop dfs + hdfs dfs 使用举例）
【4月更文挑战第4天】Hadoop【基础知识 04】【HDFS常用shell命令】（hadoop fs + hadoop dfs + hdfs dfs 使用举例）
yuanzhengme
33 5
yuanzhengme
|
28天前
|
存储 分布式计算 监控
Hadoop【基础知识 01+02】【分布式文件系统HDFS设计原理+特点+存储原理】（部分图片来源于网络）【分布式计算框架MapReduce核心概念+编程模型+combiner&partitioner+词频统计案例解析与进阶+作业的生命周期】（图片来源于网络）
【4月更文挑战第3天】【分布式文件系统HDFS设计原理+特点+存储原理】（部分图片来源于网络）【分布式计算框架MapReduce核心概念+编程模型+combiner&partitioner+词频统计案例解析与进阶+作业的生命周期】（图片来源于网络）
yuanzhengme
74 2
yuanzhengme
|
28天前
|
存储 分布式计算 Hadoop
Hadoop【基础知识 01】【分布式文件系统HDFS设计原理+特点+存储原理】（部分图片来源于网络）
【4月更文挑战第3天】Hadoop【基础知识 01】【分布式文件系统HDFS设计原理+特点+存储原理】（部分图片来源于网络）
yuanzhengme
42 3
yuanzhengme
|
29天前
|
分布式计算 Hadoop
Hadoop【问题记录 01】【hadoop-3.1.3 单机版】【Attempting to operate on hdfs namenode as root】
【4月更文挑战第2天】Hadoop【问题记录 01】【hadoop-3.1.3 单机版】【Attempting to operate on hdfs namenode as root】
yuanzhengme
14 0
爱吃糖的范同学
|
1月前
|
存储 分布式计算 Hadoop
【Hadoop】HDFS中的块是什么？
【4月更文挑战第9天】【Hadoop】HDFS中的块是什么？
爱吃糖的范同学
27 2

热门文章

最新文章

  • 1
    Hadoop【基础知识 03+04】【Hadoop集群资源管理器yarn】（图片来源于网络）（hadoop fs + hadoop dfs + hdfs dfs 使用举例）
  • 2
    Hadoop【基础知识 05】【HDFS的JavaAPI】（集成及测试）
  • 3
    【Hadoop】HDFS 读写流程
  • 4
    Hadoop【基础知识 04】【HDFS常用shell命令】（hadoop fs + hadoop dfs + hdfs dfs 使用举例）
  • 5
    sqoop2:从mysql导出数据到hdfs
  • 6
    java管理hdfs文件的常用类小结
  • 7
    客户端向hdfs读写数据流程
  • 8
    世界杯项目案例:HDFS分布式文件系统
  • 9
    hadoop: hdfs API示例
  • 10
    HDFS源码分析数据块之CorruptReplicasMap
  • 1
    Sqoop【付诸实践 01】Sqoop1最新版 MySQL与HDFS\Hive\HBase 核心导入导出案例分享+多个WRAN及Exception问题处理（一篇即可学会在日常工作中使用Sqoop）
    102
  • 2
    Flink报错问题之flink-sql写hdfs报错如何解决
    67
  • 3
    HDFS体系结构的局限性
    49
  • 4
    NameNode和DataNode在HDFS中的作用是什么？
    141
  • 5
    Hadoop的Secondary NameNode在HDFS中的作用是什么？
    41
  • 6
    HDFS中的数据一致性是如何保证的？请解释数据一致性的概念和实现方式。
    97
  • 7
    HDFS的数据读取流程是怎样的？请描述数据读取的过程。
    31
  • 8
    HDFS如何处理故障和节点失效？请解释故障恢复机制。
    56
  • 9
    HDFS的数据写入流程是怎样的？请描述数据写入的过程。
    21
  • 10
    HDFS如何处理大文件和小文件的存储和访问？
    51

    • 相关课程

    更多
  • Hadoop 分布式文件系统 HDFS

    • 相关电子书

    更多
  • 海量数据分布式存储——Apache HDFS之最新进展
  • What’s new in Hadoop Common and HDFS
  • HBase源码解析
    • 下一篇
    部署LAMP环境（Alibaba Cloud Linux 3）