Ubuntu安装hadoop并做单机测试

痛定思痛。 2022-01-12 05:19 282阅读 0赞

## 1.配置jdk ##

> 见前文

## 2. 下载解压hadoop ##

> 这里以[2.7.7][]版本为例，将文件剪切到/usr/local里面并更改名字为hadoop方便后续配置

## 3. 为hadoop配置jdk版本呢 ##

> 设置`hadoop`目录下的`env`文件，`hadoop/etc/hadoop-env.sh`文件，注意这里的`etc`是在`hadoop`目录下的`etc`，大家注意命令执行的路径，在里面定义`jdk`目录，建议将`hadoop_home`和`path`也定义一下

## 4. 为hadoop设置环境变量 ##

> 这里直接设置`~/.bashrc`,设置相关配置即可，`HADOOP_HOME`是我的`hadoop`文件路径，大家根据个人情况更改即可，最后的`PATH`因为我在bashrc里面同时配置了`jdk`、`hadoop`和`hbase`，所以如果有和我情况相同的小伙伴建议将PATH下在一起，像注释那样

## 5. 设置ip映射 ##

> 配置`hosts`文件，为主机增加IP映射

## 6. 增加用户并授权 ##

> 一般我们测试的时候都会使用`hadoop`或者hduser一类的用户，当测试的时候切换到对应用户并进行操作，也可以使用其他用户(主机用户)，但是记得对用户进行授权，否则当后面操作的时候会因为不能访问文件而导致错误。

## 7. 单机测试 ##

> 进入`hadoop`目录，建立`input`文件夹，复制几个文件当作输入数据源(这里采用的是`hadoop/etc/*.xml`),然后执行`haddop`自带的关键字提取方法进行检验，将结果输出到`output`文件当中，\_\_注意：\_\_二次实验时需要事先删除`output`文件

## 8. 结果 ##

执行完毕后目录下会出现`output`文件夹，查看里面的文件的内容即可

转载于:https://juejin.im/post/5d00a6046fb9a07ee9586893

[2.7.7]: https://link.juejin.im?target=http%3A%2F%2Fmirror.bit.edu.cn%2Fapache%2Fhadoop%2Fcommon%2Fhadoop-2.7.7%2F

发表评论取消回复

表情：

评论列表（有 0 条评论，282人围观）

还没有评论，来说两句吧...

相关阅读

相关 hadoop单机版安装

文章目录 1. 将安装包hadoop-3.1.3.tar.gz上次至linux中 2. 进行解压操作 3. 修改目录名称

ゝ一世哀愁。/ 2023年09月25日 23:52/ 0 赞/ 99 阅读

相关 Hadoop: 安装(单机)

hadoop 下载 https://hadoop.apache.org/releases.html https://mirrors.tuna.tsin

快来打我*/ 2023年06月25日 01:59/ 0 赞/ 25 阅读

相关 Hadoop单机安装

[参考文章链接][Link 1] core-site.xml： <configuration> <property>

骑猪看日落/ 2023年02月22日 12:22/ 0 赞/ 40 阅读

相关 HBase单机安装（加Hadoop单机安装教程）

准备 hadoop下载地址 http://archive.apache.org/dist/hadoop/common/ hbase下载地址 http://ar

客官°小女子只卖身不卖艺/ 2022年12月12日 15:07/ 0 赞/ 284 阅读

相关 Hadoop 单机安装

\\前提:\\确保JDK环境已经配置好步骤： 1、下载并配置环境，本文默认安装目录 /opt/apps 配置安装目录并下载hadoop 创建a

清疚/ 2022年09月09日 13:45/ 0 赞/ 264 阅读

相关 ubuntu1404_64单机安装Hadoop2.7.3

JDK、Hadoop、Hive官网下载，Hive默认（嵌入式derby 模式） [http://hadoop.apache.org/releases.html][http_

你的名字/ 2022年07月14日 04:53/ 0 赞/ 317 阅读

相关 Hadoop安装（单机版本）

Hadoop安装（单机版本） Hadoop（2.7版本以上）安装过程记录：（单机版）注： Linux中含有两个重要的文件 /etc

た入场券/ 2022年06月04日 07:59/ 0 赞/ 298 阅读

相关 hadoop单机部署,用来测试

转载自[ee900222的博客][ee900222] 2. Hadoop安装 2.1 安装java Hadoop是使用JAVA写的，所以需要

叁歲伎倆/ 2022年05月17日 12:18/ 0 赞/ 214 阅读

相关 Ubuntu16.04 安装配置Hadoop详细步骤（单机版）

前提条件（1）Ubuntu16.04 机子一台，尽量可以联网。（2）已安装jdk,具体安装教程请看我以前的文章。下载Hadoop Hadoop[下载地址]

太过爱你忘了你带给我的痛/ 2022年04月03日 15:08/ 0 赞/ 497 阅读

相关 Ubuntu安装hadoop并做单机测试

1.配置jdk > 见前文 2. 下载解压hadoop > 这里以[2.7.7][]版本为例，将文件剪切到/usr/local里面并更改名字为hadoop方便后续

痛定思痛。/ 2022年01月12日 05:19/ 0 赞/ 283 阅读