NN 多目录配置_案例| 学习笔记

简介: 快速学习 NN 多目录配置_案例

开发者学堂课程【Hadoop 分布式文件系统 HDFSNN多目录配置_案例】学习笔记,与课程紧密联系,让用户快速学习知识。

课程地址https://developer.aliyun.com/learning/course/93/detail/1462


NN多目录配置_案例

 

内容介绍:

一、简介

二、具体配置

 

一、简介

NameNode 的本地目录可以配置成多个,且每个目录存放内容相同,增加了可靠性.


二、具体配置

(1)hdfs-ste.xml 文件中增加如下内容。

<property>.

<name>dfs . namenode . name. dir</name>u

<value>file:///$ {hadoop. tmp.dir}/dfs/name1, file:// /$ {hadoop. tmp.dir} /dfs/name2</value>.

</property>.

(2)停止集群,删除 data logs 中所有数据。

[atguigu@hadoop102 hadoop-2. 7.2]$ rm -rf data/ logs/

[atguigu@hadoop103 hadoop-2. 7.2]$ rm -rf data/ logs/s

[atguigu@hadoop104 hadoop-2.7.2]$ rm -rf data/ logs/u

(3)格式化集群并启动。。

[atguigu@hadoop102 hadoop-2. 7.2]$ bin/hdfs namenode- format

[atquiqu@hadoop102 hadoop-2. 7.2]$ sbin/start-dfs. sh.

相关文章
|
9月前
|
并行计算 Docker 容器
Mamba 环境安装:causal-conv1d和mamba-ssm报错解决办法
Mamba 环境安装:causal-conv1d和mamba-ssm报错解决办法
2974 0
|
9月前
|
机器学习/深度学习 PyTorch 算法框架/工具
PyTorch基础之网络模块torch.nn中函数和模板类的使用详解(附源码)
PyTorch基础之网络模块torch.nn中函数和模板类的使用详解(附源码)
802 0
|
3月前
|
缓存 Shell iOS开发
修改 torch和huggingface 缓存路径
简介:本文介绍了如何修改 PyTorch 和 Huggingface Transformers 的缓存路径。通过设置环境变量 `TORCH_HOME` 和 `HF_HOME` 或 `TRANSFORMERS_CACHE`,可以在 Windows、Linux 和 MacOS 上指定自定义缓存目录。具体步骤包括设置环境变量、编辑 shell 配置文件、移动现有缓存文件以及创建符号链接(可选)。
901 2
|
4月前
|
PyTorch 算法框架/工具
Pytorch学习笔记(一):torch.cat()模块的详解
这篇博客文章详细介绍了Pytorch中的torch.cat()函数,包括其定义、使用方法和实际代码示例,用于将两个或多个张量沿着指定维度进行拼接。
219 0
Pytorch学习笔记(一):torch.cat()模块的详解
|
机器学习/深度学习 计算机视觉 异构计算
Darknet53详细原理(含torch版源码)
Darknet53详细原理(含torch版源码)—— cifar10
556 0
Darknet53详细原理(含torch版源码)
|
分布式计算 Hadoop Java
Hadoop配置手册1:hadoop环境搭建与测试
Hadoop配置手册1:hadoop环境搭建与测试
372 0
|
人工智能 算法 IDE
编译原理(七) 之 CFG的分析树
编译原理(七) 之 CFG的分析树
216 0
|
编解码 并行计算
再论WRF模式报错:traj_opt is zero, but num_traj is not zero ,如何解决问题,成功运行
再论WRF模式报错:traj_opt is zero, but num_traj is not zero ,如何解决问题,成功运行
再论WRF模式报错:traj_opt is zero, but num_traj is not zero ,如何解决问题,成功运行
|
Linux API 开发工具
|
Web App开发 JavaScript 前端开发
一文详解Nodejs中fs文件模块与path路径模块
本文详解了 Nodejs 中常用的 fs 文件模块与 path 路径模块,图文结合的方式,深入浅出的解释了各个参数的用法并配以实例。
568 0
一文详解Nodejs中fs文件模块与path路径模块

热门文章

最新文章