HDFS操作

妖狐艹你老母 2022-05-14 05:47 230阅读 0赞

**1、使用oiv命令查看hadoop 的镜像文件**

[hadoop@s201 ~/hadoop/dfs/name/current]$hdfs oiv 
    Usage: bin/hdfs oiv [OPTIONS] -i INPUTFILE -o OUTPUTFILE

在我的hdfs名称节点存放目录下有这个文件：

\-rw-rw-r-- 1 hadoop hadoop   34929 Aug 31 17:29 fsimage\_0000000000000011658

利用oiv ，将其转换为xml文件进行查看

[hadoop@s201 ~/hadoop/dfs/name/current]$hdfs  oiv  -i fsimage_0000000000000011658 -o a.xml -p XML

内容大概是如下这个样子:

<?xml version="1.0"?>
    <fsimage>
      <NameSection>
        <genstampV1>1000</genstampV1>
        <genstampV2>1640</genstampV2>
        <genstampV1Limit>0</genstampV1Limit>
        <lastAllocatedBlockId>1073742464</lastAllocatedBlockId>
        <txid>11658</txid>
      </NameSection>
      <INodeSection>
        <lastInodeId>17673</lastInodeId>
        <inode>
          <id>16385</id>
          <type>DIRECTORY</type>
          <name/>
          <mtime>1535630618801</mtime>
          <permission>hadoop:supergroup:rwxr-xr-x</permission>
          <nsquota>9223372036854775807</nsquota>
          <dsquota>-1</dsquota>
        </inode>

**2、同样的使用oev 来查看编辑日志文件**

hdfs oev -i edits\_0000000000000011733-0000000000000011750 -o b.xml -p XML

文件部分内容如下：

<?xml version="1.0" encoding="UTF-8"?>
    <EDITS>
      <EDITS_VERSION>-63</EDITS_VERSION>
      <RECORD>
        <OPCODE>OP_START_LOG_SEGMENT</OPCODE>
        <DATA>
          <TXID>11733</TXID>
        </DATA>
      </RECORD>
      <RECORD>
        <OPCODE>OP_CLOSE</OPCODE>
        <DATA>
          <TXID>11734</TXID>
          <LENGTH>0</LENGTH>
          <INODEID>0</INODEID>

发表评论取消回复

表情：

评论列表（有 0 条评论，230人围观）

还没有评论，来说两句吧...

相关阅读

相关 HDFS命令操作

![format_png][] 今天小编调整了下精神，听到这首歌，感觉挺好听，就直接分享给大家了，而对这篇文章只罗列后续学习需要操作的命令，如果有需要更多命令

雨点打透心脏的1/2处/ 2023年06月27日 12:40/ 0 赞/ 38 阅读

相关 Java操作HDFS

我们使用maven作为依赖管理，首先添加依赖 <dependency> <groupId>org.apache.hadoop</groupId>

川长思鸟来/ 2023年01月23日 08:52/ 0 赞/ 166 阅读

相关 HDFS基本操作

基本操作增在/目录下创建一个test1文件夹 hadoop fs -mkdir /test1 在Hadoop中的test1文件夹中创建一

た入场券/ 2022年10月01日 06:49/ 0 赞/ 191 阅读

相关 hdfs文件操作

常用操作命令查看目录 hadoop fs -ls / 创建文件夹 hadoop fs -mkdir /文件夹名往里塞文件 hadoop fs -put 本地文件地

逃离我推掉我的手/ 2022年06月07日 06:28/ 0 赞/ 219 阅读

相关 Hadoop HDFS操作

启动HDFS 首先，您必须格式化配置的HDFS文件系统，打开namenode（HDFS服务器），然后执行以下命令。 $ hadoop namenode -for

墨蓝/ 2022年06月02日 04:48/ 0 赞/ 228 阅读

相关 Java操作HDFS

Java操作HDFS maven仓库【阿里仓库--支持chd的下载】配置文件 <mirror>

￡神魔★判官ぃ/ 2022年05月16日 06:06/ 0 赞/ 214 阅读

相关 hadoop-hdfs,java操作hdfs

1.创建一个maven项目引入 1.相关的pom依赖: <dependency> <gro

迷南。/ 2022年05月14日 07:20/ 0 赞/ 286 阅读

相关 HDFS操作

1、使用oiv命令查看hadoop 的镜像文件 [hadoop@s201 ~/hadoop/dfs/name/current]$hdfs oiv Usage

妖狐艹你老母/ 2022年05月14日 05:47/ 0 赞/ 231 阅读

相关 hdfs操作

1. 文件操作 (1) 列出HDFS下的文件 /usr/local/hadoop$bin/ hadoop dfs -ls (2) 列出HDFS文件下名为in的文档中

朴灿烈づ我的快乐病毒、/ 2021年11月17日 04:31/ 0 赞/ 362 阅读

相关 java操作hdfs

在eclipse中创建一个java工程，然后导入hadoop中的7个jar包(如图)；如果为了方便调试hadoop源码，可以关联到hadoop的源码。 ![Center][]

亦凉/ 2021年05月12日 11:51/ 0 赞/ 464 阅读