Bigdata hadoop-install

阳光穿透心脏的1/2处 2021-10-15 23:21 345阅读 0赞

hadoop 安装:

环境:

  1. centos 6.5
  2. jdk 1.8
  3. hadoop 2.6.5

基础设施:

  1. 设置网络:
    设置IP
    * 看自己的vm的编辑->虚拟网络编辑器->观察 NAT模式的地址
    * (配置完后启动网络服务 service network restart
    * 如果是克隆出来的虚拟机需要删除 /etc/udev/rules.d/70-persistent-net.rules 这个文件 后reboot重启)
    修改文件: vi /etc/sysconfig/network-scripts/ifcfg-eth0

    DEVICE=eth0

    1. #HWADDR=00:0C:29:42:15:C2
    2. TYPE=Ethernet
    3. ONBOOT=yes
    4. NM_CONTROLLED=yes
    5. BOOTPROTO=static 设置静态ip
    6. IPADDR=192.168.150.11
    7. NETMASK=255.255.255.0
    8. GATEWAY=192.168.150.2
    9. DNS1=223.5.5.5
    10. DNS2=114.114.114.114
  2. 设置主机名
    vi /etc/sysconfig/network NETWORKING=yes HOSTNAME=node01

  3. 设置本机的ip到主机名的映射关系

    vi /etc/hosts

    1. 192.168.150.11 node01
    2. 192.168.150.12 node02
  4. 关闭防火墙
    service iptables stop chkconfig iptables off

  5. 关闭 selinux

    vi /etc/selinux/config

    1. SELINUX=disabled
  6. 做时间同步
    . yum install ntp -y vi /etc/ntp.conf server ntp1.aliyun.com service ntpd start chkconfig ntpd on

安装JDK

  1. rpm -i jdk-8u181-linux-x64.rpm

1.配置环境变量:

  1. vi /etc/profile
  2. export JAVA_HOME=/usr/java/default
  3. export PATH=$PATH:$JAVA_HOME/bin

加载配置文件

  1. source /etc/profile

ssh免密

看官网:[http://hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-common/SingleCluster.html\]

Hadoop的配置

  1. 规划路径:

    mkdir /opt/bigdata

    1. tar xf hadoop-2.6.5.tar.gz
    2. mv hadoop-2.6.5 /opt/bigdata/

hadoop的部署目录:
/opt/bigdata/hadoop-2.6.5
2.配置hadoop的配置文件

  1. vi /etc/profile 修改配置文件(环境变量文件的位置)
  2. export JAVA_HOME=/usr/java/default
  3. export HADOOP_HOME=/opt/bigdata/hadoop-2.6.5
  4. export PATH=$PATH:$JAVA_HOME/bin:$HADOOP_HOME/bin:$HADOOP_HOME/sbin
  5. source /etc/profile **(修改完配置文件一定要重新加载)**

Hadoop的角色配置

看官网:http://hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-common/SingleCluster.html

发表评论

表情:
评论列表 (有 0 条评论,345人围观)

还没有评论,来说两句吧...

相关阅读