hadoop集群虚拟机安装详解
《hadoop集群虚拟机安装详解》由会员分享,可在线阅读,更多相关《hadoop集群虚拟机安装详解(46页珍藏版)》请在装配图网上搜索。
1、在VMWe Workstatin.0上安装和配备Haoop群集环境VMWe Workstato:MwareWorksatin8.0.0 bui-4178JDK:1.6_2Hdop:hadoop-.21.0Lnux:entOSeleas 5.5iux客户端:SSHSecuhellClient-.2:3250启动后直接按回车键,即可进入图形安装界面;直接选择下一步,并且选择英文字符,避免后来浮现字符错乱问题,因此目前我们所有字符都已英文为主;这里我们选择默认分区,不在自定义,为了节省更多的时间!!这里我们也不再做IP的配备,直接进行下一步;等安装好系统后来单独配备,采用“桥接”方式进行;然后就是选
2、择时区,和设立root密码的截图,这里省略,不做截图,我选择上海的时区,密码:rdat;这里可以选择serve,和sevr-gu,也可以省略,所有不选择,来节省更多时间来按照其她节点。然后直接下一步重启下系统,最后进行完毕工作;finis工作。以此类推,按照类似环节安装完毕,3个节点的虚拟机环境,Redhat0,02,03这3个节点、配备虚拟机的I地址用root账号登陆虚拟系统,输入如下命令:配备如下模式,请知晓修改主机名称:笔者测试环境的虚拟机的IP地址和主机名的相应状况如下:RedHt01 192.16.21 red0 Re Hat2 19.168.232 redh0Red Hat3 19
3、2.68.0.233 rdhat3并保持她们之间的网络有关可以IG通。保证网络没有问题即可安装安装JK之前,先下载用于登录Linux的客户端SSH Secue Shell ent。下载地址:(如果地址无效,可在网上搜索SHSece)。安装完毕之后,将会有两个客户端,一种远程登录客户端,另一种FTP客户端远程登录客户端FTP客户端在官方网站上下载k1.6._25版本打开中安装的FTP客户端H Scue ile TasrClint,然后将下载的DK上传到虚拟机的 /usr目录下。(注:每台虚拟机都要JDK的安装)使用中安装的远程登录工具,分别登录每台虚拟机,进行JDK的安装。 执行下面的指令,编辑
4、/etcrfil文献,进行环境变量的设立 在相应的位置添加下图中蓝色框的下面红色框所圈出的内容 重新启动远程登录客户端,重新登录【必须重新登录远程登录客户端,环境变量才会起作用】 输入jva指令验证J安装与否成功如浮现上述内容则阐明JD安装成功,并且环境变量配备成功建立虚拟机之间SSH无密码登录 按照如下顺序,在192.168.0.3虚拟机中执行框出的指令测试92.18.023无需密码登陆直接直接登陆rdat0,3机器;安装hadoop 在官方网站上下载hadoop0.21.0版本 打开中安装的FTP客户端SSH ecue ile ranfer Clent,然后将下载的hadoop上传到虚拟机
5、的 /sr目录下。(注:每台虚拟机都要hop的安装) 配备HDOP环境变量【和配备JDK环境变量类似】 配备doop配备文献 更改adoop安装途径confao-envsh(三个虚拟机都配) 更改hadoop安装途径/conf/maser和slavs两个文献。只配备192.168.31虚拟机配备hao安装途径/conf/coesitxml、hfssit.ml和prd-site.ml三个文献。 三个虚拟机都需要配备,并且配备的内容相似至此,Hadop框架在VMWre Worsation虚拟机中安装任务所有结束。进行验证安装与否成功 一方面在92.68231机器上执行如下指令,格式化文献系统hdf
6、s meod ormat 执行成果如下: 然后在12.0.231机器上执行如下指令,启动HDFS文献系统statfssh (停止HDFS文献系统:stopds.h)执行成果如下: 执行如下指令,列出DFS文献系统中存在的目录状况aoop fs ls执行成果如下: 有关hao s指令的具体参数阐明,请参照有关文档。 执行如下指令,启动MPREC框架startmards (停止MAREUC框架:op-maped.sh)执行成果如下: Wb浏览器监视HDS文献系统状态和AREDUCE执行任务的状况。HDFS文献系统浏览器中输入::50070/ 浏览器中输入::030 运营框架自带的wordcount示例 在92.8.23虚拟机中建立两个输入文献nput和in2 HFS中建立一种目录input 拷贝inpt1和input2两个文献到FS的inpu目录中 运营wordont程序 查看运营成果如果至此所有成功,那么恭喜整个Haop框架成功搭建与MWareWorkstatio软件中,下面的任务就是编写自己的程序,然后运营于该框架。尽情享有Hdoop的乐趣吧。在安装过程中遇到了某些问题,就是在安装三个节点的时候,JK人们在按照设立jvhoe的时候一定要注意前面的那个,要去掉,呵呵,否则届时无法启动HFS,尚有就是50这个端口无法访问!估计我的ap-rdou没有做好,下来自己再看看!
- 温馨提示:
1: 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
2: 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
3.本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
5. 装配图网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。