如何在VmWare创建3节点Hadoop虚拟环境

  

一、 VM虚拟环境搭建

说明:在windos10上使用VmWare Workstation创建3节点Hadoop虚拟环境
创建虚拟机
如何在VmWare创建3节点Hadoop虚拟环境
下一步
如何在VmWare创建3节点Hadoop虚拟环境
如何在VmWare创建3节点Hadoop虚拟环境
如何在VmWare创建3节点Hadoop虚拟环境
设置虚拟机主机名和介质存放路径
如何在VmWare创建3节点Hadoop虚拟环境
设置20G磁盘大小
如何在VmWare创建3节点Hadoop虚拟环境
选择“自定义硬件”
如何在VmWare创建3节点Hadoop虚拟环境
如何在VmWare创建3节点Hadoop虚拟环境
配置网络模式为NAT模式
如何在VmWare创建3节点Hadoop虚拟环境
配置虚拟机启动镜像
如何在VmWare创建3节点Hadoop虚拟环境
如何在VmWare创建3节点Hadoop虚拟环境
到这里,使用虚拟机克隆技术配置另外两台slave
如何在VmWare创建3节点Hadoop虚拟环境
如何在VmWare创建3节点Hadoop虚拟环境
如何在VmWare创建3节点Hadoop虚拟环境
如何在VmWare创建3节点Hadoop虚拟环境
如何在VmWare创建3节点Hadoop虚拟环境
如何在VmWare创建3节点Hadoop虚拟环境

同理克隆slave2,  步骤省略
如何在VmWare创建3节点Hadoop虚拟环境

此时windos网络连接里面会出现两张虚拟网卡
如何在VmWare创建3节点Hadoop虚拟环境

接下来就是给虚拟机配置IP网络
如何在VmWare创建3节点Hadoop虚拟环境
如何在VmWare创建3节点Hadoop虚拟环境

虚拟机网卡IP要和NAT模式的IP是在同一个段,虚拟机才能通过windos笔记的VMnet8网卡与互联网通信
如何在VmWare创建3节点Hadoop虚拟环境
接下来启动虚拟机配置操作系统IP网络(具体配置过程省略)

Hadoop是一个能够对大量数据进行分布式处理的软件框架。 Hadoop 以一种可靠、高效、可伸缩的方式进行数据处理 。Hadoop 是可靠的,因为它假设计算元素和存储会失败,因此它维护多个工作数据副本,确保能够针对失败的节点重新分布处理。Hadoop 是高效的,因为它以并行的方式工作,通过并行处理加快处理速度  。Hadoop 还是可伸缩的,能够处理 PB 级数据 。此外,Hadoop 依赖于社区服务,因此它的成本比较低,任何人都可以使用

二、Hadoop2.6.5+centos7.5三节点集群搭建步骤

1、环境规划

Hadoop2.6.5+centos7.5

如何在VmWare创建3节点Hadoop虚拟环境

2、配置集群中主机域名访问解析

[root@master ~]# cat/etc/hosts
  127.0.0.1,localhost localhost。localdomain localhost4 localhost4.localdomain4
  ::1,,,,localhost localhost。localdomain localhost6 localhost6.localdomain6
  
  192.168.11.10主
  192.168.11.11 slave1
  192.168.11.12 slave2 

如何在VmWare创建3节点Hadoop虚拟环境