linuxsir首页 LinuxSir.Org | Linux、BSD、Solaris、Unix | 开源传万世,因有我参与欢迎您!
网站首页 | 设为首页 | 加入收藏
您所在的位置:主页 > Limux发行版SuSE >

Hadoop2.6完全分布式多节点集群安装配置

时间:2016-11-19  来源:未知  作者:admin

最终目的:实现Win7下,创建Ubuntu虚拟机搭建Hadoop多节点集群

1.当前pc环境

WindowS版本:Win7 专业版 处理器:Intel(R) Core(TM) i5-4590 CPU @ 3.30GHz  安装内存(RAM):4.00GB 系统类型:64bitOS ip:192.168.1.110

2.软件准备

宿主机:Win7专业版 桌面虚拟机软件:产品VMware® Workstation 12 Pro;版本12.1.0 build-3272444; VMwareworkstation_full_12.1.0.2487.1453173744.exe 桌面linuxOS:版本ubuntu 14.04LTS ;         ubuntu-14.04.3-desktop-amd64.exe(64bit) JDK :版本 1.8; jdk-8u73-linux-x64.tar.gz(64bit)    jdk装到虚拟机里面,所以是linux的jdk Hadoop:版本2.6; hadoop-2.6.4.tar.gz Eclipse: 集群配置:Ubuntu14(虚拟机名称)Master.Hadoop(hostname) 192.168.1.111(ip)  Ubuntu14slave1(虚拟机名称)  Slaver1.Hadoop(hostname)192.168.1.112(ip)

3.安装配置起航

3.1  安装VMware Workstation

 安装流程可以参考 Windows 7下用VMware Workstation 10虚拟机安装 Ubuntu 14.04   http://www.linuxidc.com/Linux/2014-04/100473.htm 虚拟机软件安装的位置d:\Program Files(x86)\VMare\VMare Workstation\    注意事项:安装出现是否更新和参与用户体验,去掉勾,不选;许可证秘钥自行百度;安装完毕打开在帮助里面可以查看版本之类的信息。   3.2  安装虚拟机并配置Ubuntu环境 安装流程可以参考 http://www.linuxidc.com/Linux/2016-09/135192.htm 本人虚拟机名称:Ubuntu14         虚拟机位置:d:\Ubuntu64      Ubuntu14slave1     虚拟机位置:d:\Ubuntu14slave1      两个用户名都相同,用户名 ysu  密码 123456 注意事项:客户机是linux,版本是ubuntu;网络类型很重要:我选的是桥接,Win7宿主机和两个虚拟机在一个网段里面。 网络类型三种区分参考:

虚拟机网络连接方搜索式是如何设置的。如VMWare虚拟机提供了三种工作模式,它们是bridged(桥接模式)、NAT(网络地址转换模式)和host-only(主机模式)。要想在网络管理和维护中合理应用它们,你就应该先了解一下这三种工作模式,然后就知道答案了。

bridged(桥接模式)

  在这种模式下,VMWare虚拟出来的操作系统就像是局域网中的一台独立的主机,它可以访问网内任何一台机器。在桥接模式下,你需要手工为虚拟系统配置IP地址、子网掩码,而且还要和宿主机器处于同一网段,这样虚拟系统才能和宿主机器进行通信。同时,由于这个虚拟系统是局域网中的一个独立的主机系统,那么就可以手工配置它的TCP/IP配置信息,以实现通过局域网的网关或路由器访问互联网。

host-only(主机模式)

  在某些特殊的网络调试环境中,要求将真实环境和虚拟环境隔离开,这时你就可采用host-only模式。在host-only模式中,所有的虚拟系统是可以相互通信的,但虚拟系统和真实的网络是被隔离开的。

3.NAT(网络地址转换模式)

  使用NAT模式,就是让虚拟系统借助NAT(网络地址转换)功能,通过宿主机器所在的网络来访问公网。也就是说,使用NAT模式可以实现在虚拟系统里访问互联网。NAT模式下的虚拟系统的TCP/IP配置信息是由VMnet8(NAT)虚拟网络的DHCP服务器提供的,无法进行手工修改,因此虚 拟系统也就无法和本局域网中的其他真实主机进行通讯。采用NAT模式最大的优势是虚拟系统接入互联网非常简单,你不需要进行任何其他的配置,只需要宿主机器能访问互联网即可。

友情链接