Hadoop安装与配置

Hadoop安装可以是单节点、伪分布式和完全分布式。

Docker安装Hadoop

• 获取Docker镜像

  docker pull sequenceiq/hadoop-docker:2.7.0
  

• 运行Hadoop

  docker run -i -t -p 50070:50070 -p 9000:9000 -p 8088:8088 -p 8040:8040 -p 8042:8042  -p 49707:49707  -p 50010:50010  -p 50075:50075  -p 50090:50090 sequenceiq/hadoop-docker:2.6.0 /etc/bootstrap.sh -bash
  

  -p 9000:9000 -p 50070:50070

docker run -d –name myhadoop0 -p 50070:50070 -p 9000:9000 -p 8088:8088 -p 8040:8040 -p 8042:8042 -p 49707:49707 -p 50010:50010 -p 50075:50075 -p 50090:50090 sequenceiq/hadoop-docker:2.7.0 /etc/bootstrap.sh -bash docker run -it sequenceiq/hadoop-docker:2.7.0 /etc/bootstrap.sh -bash –privileged=true

Windows环境下搭建安装Hadoop详解

下载Hadoop发布的稳定包：https://archive.apache.org/dist/hadoop/common/

Hadoop在Windows下完整运行需要Windows组件支持，从 https://github.com/steveloughran/winutils 这里下载一个，下载完成后，解压得到若干版本的winutils

然后把上面的bin文件一股脑全部复制到第1步中解压后的hadoop-2.8.3\bin文件夹下面，覆盖原先的bin目录文件下所有文件。