hadoop--快照管理介绍

矫情吗；* 2022-03-21 14:07 501阅读 0赞

一、什么是快照

>       HDFS快照是文件系统的**只读时间点**副本。可以在文件系统的子树或整个文件系统上拍摄快照。快照的一些常见用例是数据备份，防止用户错误和灾难恢复。

二、使用快照的优势

> 官网解释：
> 
>  *  快照创建是即时的：成本是*O（1），*不包括inode查找时间。
>  *  仅当相对于快照进行修改时才使用附加内存：内存使用量为*O（M）*，其中*M*是已修改文件/目录的数量。
>  *  不复制datanode中的块：快照文件记录块列表和文件大小。没有数据复制。
>  *  快照不会对常规HDFS操作产生负面影响：以反向时间顺序记录修改，以便可以直接访问当前数据。通过从当前数据中减去修改来计算快照数据。

三、快照目录

>       我们可以在任何被设置为snapshottable的目录上执行快照，对一个目录最多可以创建65536个快照。管理员可以把任何目录设置为snapshottable，没有限制。如果一个目录下已经存在快照，那么只有当先删除所有快照后才能对这个目录进行删除和重命名等操作。
> 
> 不允许嵌套的snapshottable目录。也就是说，如果一个目录被设置为snapshottable，那么它的父目录和子目录都不允许被设置为snapshottable。

四、快照的启动和禁用

> 快照可以实现对文件或者目录的快速备份，不会产生新的文件，使用差值存储，默认情况是禁用的。所以如果我们想使用快照功能，首先需要启用该功能。我们可以使用“hdfs dfsadmin”对快照进行启用和禁用操作。
> 
> 1）启动快照
> 
>     \[czz@hadoop102 czz\]$ hdfs dfsadmin **-allowSnapShot** /czz  
>      Allowing snaphot on /czz succeeded
> 
> 2）禁用快照
> 
>    \[czz@hadoop102 czz\]$ hdfs dfsadmin **-disallowSnapShot** /czz  
>    Disallowing snaphot on /czz succeeded

五、快照创建

> \[czz@hadoop102 datas\]$ hdfs dfsadmin -allowSnapShot /data  
> Allowing snaphot on /data succeeded
> 
> 创建你快照并起名为"Snapshot\_czz",下面一行显示了快照的实际存放位置在一个隐藏目录下
> 
> \[czz@hadoop102 datas\]$ hdfs dfs **-createSnapshot** /data Snapshot\_czz  
> Created snapshot /data/.snapshot/Snapshot\_czz

六、查看快照的存放位置

> \[czz@hadoop102 datas\]$ hdfs dfs -ls -R /data/.snapshot/Snapshot\_czz  
> \-rw-r--r--   3 atguigu supergroup          7 2019-02-02 13:59 /data/.snapshot/Snapshot\_czz/czz.txt  
> \-rw-r--r--   3 atguigu supergroup        144 2019-02-02 14:10 /data/.snapshot/Snapshot\_czz/test.txt  
>

七、创建快照后修改数据与创建快照前数据对比

> \[czz@hadoop102 datas\]$ hdfs dfs -cat /data/czz.txt  
> niling  
> \[czz@hadoop102 datas\]$ echo czz >  niling.txt  
> \[czz@hadoop102 datas\]$ hdfs dfs -put niling.txt /data  
> \[czz@hadoop102 datas\]$ hdfs dfs **-appendToFile** niling.txt /data/czz.txt  
> \[czz@hadoop102 datas\]$ hdfs dfs -cat /data/czz.txt  
> niling  
> czz  
> \[czz@hadoop102 datas\]$ hdfs dfs -cat /data/.snapshot/Snapshot\_czz/czz.txt  
> niling

八、快照重命名操作

> \[czz@hadoop102 datas\]$ hdfs dfs -ls /data/.snapshot  
> Found 1 items  
> drwxr-xr-x   - atguigu supergroup          0 2019-02-02 14:22 /data/.snapshot/Snapshot\_czz  
> \[czz@hadoop102 datas\]$ hdfs dfs **-renameSnapshot** /data Snapshot\_czz Snapshot\_nl  
> \[czz@hadoop102 datas\]$ hdfs dfs -ls /data/.snapshot  
> Found 1 items  
> drwxr-xr-x   - atguigu supergroup          0 2019-02-02 14:22 /data/.snapshot/Snapshot\_nl

九、快照删除操作

> \[czz@hadoop102 datas\]$ hdfs dfs -ls /data/.snapshot  
> Found 1 items  
> drwxr-xr-x   - atguigu supergroup          0 2019-02-02 14:22 /data/.snapshot/Snapshot\_nl  
> \[czz@hadoop102 datas\]$ hdfs dfs **-deleteSnapshot** /data Snapshot\_nl  
> \[czz@hadoop102 datas\]$ hdfs dfs -ls /data/.snapshot

\-------------------------------------------------------------------------------------------------------------------------------------------------------

用人品去感动别人，用改变去影响别人，用状态去燃烧别人，用行动去带动别人，用阳光去照耀别人，用坚持去赢得别人，要求自己每天都去做与目标有关的事情，哪怕每天只进步一点点，坚持下来你就是最优秀卓越的！欢迎大家加入大数据交流群：725967421     一起交流，一起进步！！

\-------------------------------------------------------------------------------------------------------------------------------------------------------