Hadoop HDFS NameNode 和 SecondaryNameNode

以你之姓@ 2022-02-24 03:23 250阅读 0赞

## 目录文件 ##

### NameNode ###

首次格式化后  
![2019-04-02-15542107773244.jpg][]

运行一段时间  
![2019-04-02-15542090354388.jpg][]

### SecondaryNameNode ###

![2019-04-02-15542091458368.jpg][]

## 工作原理 ##

![5ca35775e4b00f8893f2ca1d.png_1554215354706][]

### NameNode ###

1.  第一次启动 NameNode 格式化后，创建 fsimage 和 edits 文件。如果不是第一次启动，直接加载编辑日志和镜像文件到内存。
2.  客户端对元数据进行增删改的请求。
3.  NameNode 记录操作日志，更新滚动日志。
4.  NameNode 在内存中对数据进行增删改查。

### SecondaryNameNode ###

1.  Secondary NameNode询问NameNode是否需要checkpoint。直接带回NameNode是否检查结果。
2.  Secondary NameNode 请求执行 checkpoint。
3.  NameNode 滚动正在写的 edits 日志。
4.  将滚动前的编辑日志和镜像文件拷贝到 Secondary NameNode。
5.  Secondary NameNode 加载编辑日志和镜像文件到内存，并合并。
6.  生成新的镜像文件 fsimage.chkpoint。
7.  拷贝 fsimage.chkpoint 到 NameNode。
8.  NameNode 将 fsimage.chkpoint 重新命名成 fsimage。

[2019-04-02-15542107773244.jpg]: /images/20220224/14d4c69e70a74db48ce48168b4b323eb.png
[2019-04-02-15542090354388.jpg]: /images/20220224/fd8039911d8b4042a89b9ed7444fe454.png
[2019-04-02-15542091458368.jpg]: /images/20220224/27c59b29e0094f688dd9ab4d2672c668.png
[5ca35775e4b00f8893f2ca1d.png_1554215354706]: /images/20220224/5477d499f3be4488be7981f4777d0a4b.png

发表评论取消回复

表情：

评论列表（有 0 条评论，250人围观）

还没有评论，来说两句吧...

相关阅读

相关浅谈HDFS（二）之NameNode与SecondaryNameNode

NN与2NN工作机制 > 思考：NameNode中的元数据是存储在哪里的？假设存储在NameNode节点的硬盘中，因为经常需要随机访问和响应客户请求，必然效率太

秒速五厘米/ 2022年12月29日 01:47/ 0 赞/ 132 阅读

相关 Hadoop-HDFS的NameNode和SecondaryNameNode介绍及原理

NameNode和SecondaryNameNode NN和2NN的工作机制 NameNode 中的元数据是存储：首先,我们做个假设,如果存储在 NameNod

野性酷女/ 2022年10月11日 13:42/ 0 赞/ 165 阅读

相关 NameNode 和和 SecondaryNameNode工作机制

1、引入问题：NameNode 中的元数据是存储在哪里的？首先，我们做个假设，如果存储在 NameNode 节点的磁盘中，因为经常需要进行随机访问，还有响应客户请求，必

Bertha 。/ 2022年08月31日 07:22/ 0 赞/ 183 阅读

相关 Hadoop的NameNode与SecondaryNameNode,DataNode

NameNode：主要任务是接收客户端的读写服务，主要功能： 1,文件ownship和permission 2,文件包含哪些块 3,Block保存在哪个

秒速五厘米/ 2022年06月07日 08:35/ 0 赞/ 162 阅读

相关 Hadoop根据SecondaryNameNode恢复NameNode

1.制造NameNode宕机的情况 1.1)：kill 掉NameNode的进程 \[plain\] [view plain][] [copy][view plain

阳光穿透心脏的1/2处/ 2022年06月07日 03:09/ 0 赞/ 204 阅读

相关 NameNode和SecondaryNameNode工作机制

NameNode和SecondaryNameNode工作机制 1.简单介绍？ 2.图解 2.1原理介绍 2.2流程介绍

朴灿烈づ我的快乐病毒、/ 2022年04月03日 09:09/ 0 赞/ 181 阅读

相关 hadoop集群管理之 SecondaryNameNode和NameNode

　　光从字面上来理解，很容易让一些初学者先入为主的认为：SecondaryNameNode（snn）就是NameNode（nn）的热备进程。其实不是。snn是HDFS架构中的

喜欢ヅ旅行/ 2022年03月29日 14:15/ 0 赞/ 186 阅读

相关 Hadoop HDFS NameNode 和 SecondaryNameNode

目录文件 NameNode 首次格式化后 ![2019-04-02-15542107773244.jpg][] 运行一段时间 ![2019-04-02-1

以你之姓@/ 2022年02月24日 03:23/ 0 赞/ 251 阅读

相关 Hadoop之NameNode和SecondaryNameNode工作机制详解

Hadoop之NameNode和SecondaryNameNode工作机制详解 -------------------- 1. NN和2NN工作机制 2. NN和2

港控/mmm°/ 2022年01月21日 07:09/ 0 赞/ 244 阅读

相关六、HDFS中的NameNode和SecondaryNameNode

上篇博客介绍了Hadoop的核心组件HDFS，本篇主要介绍HDFS中的NameNode和SecondaryNameNode，关注专栏[《破茧成蝶——大数据篇》][

╰半夏微凉°/ 2021年08月31日 09:40/ 0 赞/ 315 阅读