NameNode与DataNode的多目录配置

逃离我推掉我的手 2022-04-10 09:30 189阅读 0赞

### NameNode与DataNode的多目录配置 ###

*  1.为什么要配置NameNode的多目录？
 *  2.配置
 *  3.为什么配置DataNode？

# 1.为什么要配置NameNode的多目录？ #

NameNode的本地目录可以配置成多个，且每个目录存放内容相同，增加了可靠性

# 2.配置 #

1.在hdfs-site.xml文件中增加如下内容

<property>
        <name>dfs.namenode.name.dir</name>
    <value>file:///${hadoop.tmp.dir}/dfs/name1,file:///${hadoop.tmp.dir}/dfs/name2</value>
    </property>

2.停止集群，删除data和logs中所有数据(分别执行一下命令)

[lsl@hadoop102 hadoop-2.7.2]$ rm -rf data/ logs/
    [lsl@hadoop103 hadoop-2.7.2]$ rm -rf data/ logs/
    [lsl@hadoop104 hadoop-2.7.2]$ rm -rf data/ logs/

3.格式化集群并启动(分别执行一下命令)

[lsl@hadoop102 hadoop-2.7.2]$ bin/hdfs namenode –format
    [lsl@hadoop102 hadoop-2.7.2]$ sbin/start-dfs.sh

4.查看结果(执行一下命令)

[lsl@hadoop102 dfs]$ ll

# 3.为什么配置DataNode？ #

可以看看这篇博客，写的很清晰（所以就不做过多的讲述）：[https://blog.csdn.net/milyhj123/article/details/77992528][https_blog.csdn.net_milyhj123_article_details_77992528]

***版权声明：本博客为记录本人自学感悟，转载需注明出处！***  
[https://me.csdn.net/qq\_39657909][https_me.csdn.net_qq_39657909]

[https_blog.csdn.net_milyhj123_article_details_77992528]: https://blog.csdn.net/milyhj123/article/details/77992528
[https_me.csdn.net_qq_39657909]: https://me.csdn.net/qq_39657909

发表评论取消回复

表情：

评论列表（有 0 条评论，189人围观）

还没有评论，来说两句吧...

相关阅读

相关 Hadoop；DataNode多目录配置（增加硬盘）

DataNode多目录配置 1）DataNode可以配置成多个目录，每个目录存储的数据不一样（数据不是副本） ![在这里插入图片描述][be1f783cf781446

刺骨的言语ヽ痛彻心扉/ 2024年03月17日 20:47/ 0 赞/ 72 阅读

相关 namenode和datanode无法启动解决方案

安装Hadoop（伪分布式环境）namenode和datanode无法启动解决方案先附上我参考的安装教程链接 > 10.1.88.4/index\_1.php?url

╰半橙微兮°/ 2023年05月29日 03:20/ 0 赞/ 66 阅读

相关 NameNode和SecondaryNameNode、DataNode工作机制

本文目录题外话 1.NameNode和SecondaryNameNode工作机制 1.NameNode中的元数据是存储在哪里的？

秒速五厘米/ 2022年10月30日 00:33/ 0 赞/ 183 阅读

相关强制DataNode向NameNode上报blocks

正常情况下，什么时候上报blocks，是由NameNode通过回复心跳响应的方式触发的。一次机房搬迁中，原机房hadoop版本为2.7.2，新机房版本为2.8.0，采用先

痛定思痛。/ 2022年06月15日 01:08/ 0 赞/ 247 阅读

相关 Hadoop的NameNode与SecondaryNameNode,DataNode

NameNode：主要任务是接收客户端的读写服务，主要功能： 1,文件ownship和permission 2,文件包含哪些块 3,Block保存在哪个

秒速五厘米/ 2022年06月07日 08:35/ 0 赞/ 188 阅读

相关 Secondary Namenode的Check point机制以及Namenode、Datanode工作机制说明

目录前言： 1、NameNode的工作机制 2、DataNode的工作机制 3、Secondary N

深碍√TFBOYSˉ_/ 2022年06月02日 01:20/ 0 赞/ 164 阅读

相关 NameNode与DataNode的多目录配置

NameNode与DataNode的多目录配置 1.为什么要配置NameNode的多目录？ 2.配置 3.为什么配置DataNode？ 1.为什么要

逃离我推掉我的手/ 2022年04月10日 09:30/ 0 赞/ 190 阅读

相关 Hadoop中DataNode与NameNode之间的心跳机制

DataNode: 用于存储HDFS的数据， public class DataNode extends Configured implements Inter

短命女/ 2022年03月20日 01:58/ 0 赞/ 441 阅读

相关 HDFS NameNode DataNode 多目录配置

现在目录结构 ![format_png][] NameNode NameNode 的本地目录可以配置成多个，且每个目录存放内容相同，增加了可靠性。配置 hdf

浅浅的花香味﹌/ 2022年02月24日 06:57/ 0 赞/ 223 阅读

相关 Hadoop名词详解：HDFS、NameNode和DataNode

概览 -------------------- 首先我们来认识一下HDFS， HDFS（Hadoop Distributed File System ）Hadoop分布

深藏阁楼爱情的钟/ 2022年02月04日 03:15/ 0 赞/ 307 阅读