Hadoop之配置yarn

Bertha 。 2022-06-01 11:07 376阅读 0赞

#### 1、 配置mapred-site.xml ####

默认没有mapred-site.xml文件，但是有个mapred-site.xml.template配置模板文件。复制模板生成mapred-site.xml。

cp etc/hadoop/mapred-site.xml.template etc/hadoop/mapred-site.xml

<property>
        <name>mapreduce.framework.name</name>
        <value>yarn</value>
    </property>

指定mapreduce运行在yarn框架上。

#### 2、 配置yarn-site.xml ####

<property>
      <name>yarn.nodemanager.aux-services</name>
      <value>mapreduce_shuffle</value>
    </property>

yarn.nodemanager.aux-services配置了yarn的默认混洗方式，选择为mapreduce的默认混洗算法。

#### 3、 启动Resourcemanager ####

${HADOOP_HOME}/sbin/yarn-daemon.sh start resourcemanager

#### 4、 启动nodemanager ####

${HADOOP_HOME}/sbin/yarn-daemon.sh start nodemanager

#### 5、 查看是否启动成功 ####

[root@izuf61z1rt2fvuhr3u07s0z hadoop]# jps
    6397 NodeManager
    6758 Jps
    6137 SecondaryNameNode
    5969 DataNode
    5836 NameNode
    6293 ResourceManager

#### 6、 YARN的Web页面 ####

YARN的Web客户端端口号是8088，通过http://你的ip:8088/可以查看。  
![这里写图片描述][SouthEast]

[SouthEast]: /images/20220601/d73b1795e425482699700e1482bee2ff.png

发表评论取消回复

表情：

评论列表（有 0 条评论，376人围观）

还没有评论，来说两句吧...

相关阅读

相关 hadoop yarn配置任务优先级

`vim yarn-site.xml` ![在这里插入图片描述][269675abdb944223b746065e73f2298e.png] [269675abdb94

╰+攻爆jí腚メ/ 2023年10月03日 14:16/ 0 赞/ 14 阅读

相关 hadoop yarn

The fundamental idea of YARN is to split up the functionalities of resource management

电玩女神/ 2022年07月13日 07:12/ 0 赞/ 259 阅读

相关 Hadoop Yarn内存使用优化配置

第一部分Hadoop Yarn内存使用优化配置在Hadoop2.0中, YARN负责管理MapReduce中的资源(内存, CPU等)并且将其打包成Containe

落日映苍穹つ/ 2022年06月06日 04:13/ 0 赞/ 472 阅读

相关 Hadoop之配置yarn

1、配置mapred-site.xml 默认没有mapred-site.xml文件，但是有个mapred-site.xml.template配置模板文件。复制模板生成m

Bertha 。/ 2022年06月01日 11:07/ 0 赞/ 377 阅读

相关 Hadoop YARN

基本思想教程： [https://mp.weixin.qq.com/s/JEw7qCze2vlt9ys\_Fe7cFA][https_mp.weixin.qq.co

电玩女神/ 2022年05月14日 07:21/ 0 赞/ 304 阅读

相关 Hadoop之Yarn的基本原理

Yarn的基本架构与运行概述 Yarn（Yet Another Resource Negotiator）资源协调者，它是Hadoop生态圈中的三大组件之一，主要负

淡淡的烟草味﹌/ 2022年04月15日 00:49/ 0 赞/ 317 阅读

相关 Hadoop之Yarn面试知识复习

Hadoop之Yarn面试知识复习目录 1. 简述hadoop1与hadoop2 的架构异同 2. 为什么会产生 yarn,它解决了什么问题，有什么优势？ 3

野性酷女/ 2022年01月15日 19:11/ 0 赞/ 374 阅读

相关 Hadoop Yarn

一、Yarn架构 ![yarn-architecture][] Yarn就是将JobTracker的职责进行拆分，将资源管理和任务调度监控拆分成独立的进程：一个全局的资

爱被打了一巴掌/ 2021年10月15日 22:33/ 0 赞/ 521 阅读

相关 Hadoop之yarn-site.xml配置文件

下面介绍一下yarn-site.xml配置文件的配置过程：增加yarn功能 <configuration> <property> <name

红太狼/ 2021年09月28日 13:30/ 0 赞/ 1279 阅读

相关 Hadoop核心模块之Yarn

一、Yarn的基本架构 YARN总体上仍然是Master/Slave结构，在整个资源管理框架中，ResourceManager为Master，NodeManag

悠悠/ 2021年09月14日 04:18/ 0 赞/ 487 阅读