使用docker搭建大数据环境

使用docker进行构建单机伪分布式hadoop环境。

---

[TOC]

Instruction

---

搭建的docker-images使用的软件版本如下：

• hadoop版本：2.7.7
• spark版本：3.1.1
• jdk版本：1.8
• hive版本：待添加
• Hbase版本：1.4.13

ps：

1. 请先确保你的 git 、docker 和 make 是可用的。

2. 镜像内的用户密码为：qwe

---

使用方法

1. clone本仓库到你的本地

git clone git@github.com:Liuyang0001/docker-hadoop.git

1. 使用make进行docker镜像下载

进到仓库目录下：

cd docker-hadoop

使用make语句进行拉取docker镜像：

make pull

1. 启动镜像

make up

1. 进入镜像

make bash

启动hadoop伪分布式：

cd ~/onekey
sh run.sh

打开网址查看：

http://localhost:50070/

关闭hadoop集群

sh ~/onekey/stop.sh #关闭hadoop
exit # 退出bash

1. 退出并解除容器

make down

---

Enjoy it.