hadoop|hadoop (三)分布式环境搭建

hadoop (三)分布式环境搭建 环境准备 我的环境:

三个虚拟机: node3(192.168.56.104) 为主节点 node1(192.168.56.102) node2(192.168.56.103) 为子节点

配置hadoop 在第一章配置基础上,我们需要增加两项配置:

hadoop|hadoop (三)分布式环境搭建
文章图片
image 【hadoop|hadoop (三)分布式环境搭建】配置主节点
hadoop|hadoop (三)分布式环境搭建
文章图片
image 配置子节点
hadoop|hadoop (三)分布式环境搭建
文章图片
image 修改hadoop核心配置文件:
hadoop|hadoop (三)分布式环境搭建
文章图片
image hadoop|hadoop (三)分布式环境搭建
文章图片
image 至此,hadoop分布式的主节点配置就ok了。
将主节点的hadoop部署目录分别拷贝到子节点node1和node2中。
scp -r hadoop-0.20.2/ node1:~/home/liuzd/ scp -r hadoop-0.20.2/ node2:~/home/liuzd/

分别在主节点和子节点启动:进入hadoop-0.20.2目录,运行bin/start-all.sh
主节点Hadoop进程:
hadoop|hadoop (三)分布式环境搭建
文章图片
image 子节点hadoop进程:
hadoop|hadoop (三)分布式环境搭建
文章图片
image 此时访问http://192.168.56.104:50070
hadoop|hadoop (三)分布式环境搭建
文章图片
image 此时可以看到2个livenode节点,点进去查看。
hadoop|hadoop (三)分布式环境搭建
文章图片
image 如上述不平衡可执行下述命令,重新分配。
$bin/hadoop balancer -threshold 1

    推荐阅读