北京快三开奖

  • <tr id="U9YkSO"><strong id="U9YkSO"></strong><small id="U9YkSO"></small><button id="U9YkSO"></button><li id="U9YkSO"><noscript id="U9YkSO"><big id="U9YkSO"></big><dt id="U9YkSO"></dt></noscript></li></tr><ol id="U9YkSO"><option id="U9YkSO"><table id="U9YkSO"><blockquote id="U9YkSO"><tbody id="U9YkSO"></tbody></blockquote></table></option></ol><u id="U9YkSO"></u><kbd id="U9YkSO"><kbd id="U9YkSO"></kbd></kbd>

    <code id="U9YkSO"><strong id="U9YkSO"></strong></code>

    <fieldset id="U9YkSO"></fieldset>
          <span id="U9YkSO"></span>

              <ins id="U9YkSO"></ins>
              <acronym id="U9YkSO"><em id="U9YkSO"></em><td id="U9YkSO"><div id="U9YkSO"></div></td></acronym><address id="U9YkSO"><big id="U9YkSO"><big id="U9YkSO"></big><legend id="U9YkSO"></legend></big></address>

              <i id="U9YkSO"><div id="U9YkSO"><ins id="U9YkSO"></ins></div></i>
              <i id="U9YkSO"></i>
            1. <dl id="U9YkSO"></dl>
              1. <blockquote id="U9YkSO"><q id="U9YkSO"><noscript id="U9YkSO"></noscript><dt id="U9YkSO"></dt></q></blockquote><noframes id="U9YkSO"><i id="U9YkSO"></i>
                企业空间 推销商城 存储论坛
                北京快三开奖全闪存阵列 IBM云盘算 Acronis 安克诺斯 安腾普 腾保数据
                首页 > Hadoop > 注释

                集群装置设置装备摆设Hadoop细致图解

                2014-05-07 00:00泉源:中国存储网
                导读:集群装置设置装备摆设Hadoop集群节点:node4、node5、node6、node7、node8。详细架构:操纵零碎为:CentOS release 5.5 (Final)装置步调一、创立Hadoop用户组。二、装置JDK。下载装置jdk。装置

                集群装置设置装备摆设Hadoop

                集群节点:node4、node5、node6、node7、node8。详细架构:

                集群装置设置装备摆设Hadoop细致图解

                操纵零碎为:CentOS release 5.5 (Final)

                装置步调

                一、创立Hadoop用户组。

                二、装置JDK。下载装置jdk。装置目次如下:

                集群装置设置装备摆设Hadoop细致图解

                三、修正呆板名,修正文件/etc/hosts。如下:

                集群装置设置装备摆设Hadoop细致图解

                四、装置ssh效劳。下令:yum install openssh-server。

                五、树立ssh无暗码登岸。

                (一)切换到hadoop用户。su – hadoop

                (二)创立ssh-key,应用ssh-keygen下令,接纳rsa方法天生密钥。下令:ssh-keygen -t rsa -f ~/.ssh/id_rsa,发生公钥:~/.ssh/id_rsa.pub。

                (三)将公钥添加至authorized_keys中。下令:

                cat ~/.ssh/id_rsa.pub>>~/.ssh/authorized_keys

                (四)修正authorized_keys文件权限:

                集群装置设置装备摆设Hadoop细致图解

                (五) 编辑sshd设置装备摆设文件/etc/ssh/sshd_confi把#AuthorizedKeysFile .ssh/authorized_keys后面的正文取消失。

                集群装置设置装备摆设Hadoop细致图解

                (六)重新启动sshd效劳。

                集群装置设置装备摆设Hadoop细致图解

                (七)将authorized_keys文件复制到其他节点上(node5——8)。如下:

                集群装置设置装备摆设Hadoop细致图解

                (八)测试SSH衔接。衔接时会提示能否衔接,按回车后会将此公钥参加至knows_hosts中,下令:

                ssh localhost;

                衔接乐成后,记得exit,加入近程呆板。

                六、将Hadoop相干顺序下载上传到node4上。

                集群装置设置装备摆设Hadoop细致图解

                下载运用的Hadoop版本为1.2.1。

                七、装置设置装备摆设hadoop

                (一)登岸node4,切换hadoop用户。创立装置目次,解压hadoop,下令:

                mkdir hadoop_program //创立hadoop装置目次。

                cp HADOOP/hadoop-1.2.1.tar.gz hadoop_program/ //将hadoop顺序cp到hadoop装置目次下。

                cd hadoop_program/ //cd到该目次。

                tar -xvf hadoop-1.2.1.tar.gz //解压hadoop顺序。

                mv hadoop-1.2.1 hadoop //将hadoop目次更名字

                (二)创立情况Hadoop相干情况变量。

                修正conf/hadoop-env.sh。找到#export JAVA_HOME=...,去失正文#,然后加上本机的jdk途径(在第二步装置的途径),如下:

                集群装置设置装备摆设Hadoop细致图解

                添加HADOOP_HOME情况变量,下令:vim ~/.bashrc。添加如下:

                集群装置设置装备摆设Hadoop细致图解

                (三)修正Hadoop设置装备摆设文件

                修正conf/core-site.xml文件。

                集群装置设置装备摆设Hadoop细致图解

                修正mapred-site.xml文件

                集群装置设置装备摆设Hadoop细致图解

                修正hdfs-site.xml

                集群装置设置装备摆设Hadoop细致图解

                修正masters文件

                集群装置设置装备摆设Hadoop细致图解

                修正slaves文件

                集群装置设置装备摆设Hadoop细致图解

                八 将设置装备摆设好的Hadoop和jdk复制到其他节点上:

                集群装置设置装备摆设Hadoop细致图解

                九。启动hadoop测试能否装置乐成。

                下令:hadoop namenode -format(起首款式化namenode)。

                下令:start-all.sh (启动hadoop)。

                下令:cd到jdk的bin目次下。运转jps下令。观察:

                node4:

                集群装置设置装备摆设Hadoop细致图解

                运转正常。

                Node5-8:

                集群装置设置装备摆设Hadoop细致图解

                运转正常。

                十。遇到题目。

                1、装置的进程发明node5-8无法启动datanode和tasktracker,厥后发明缘由为node5-8呆板中曾经运转了java顺序。用ps -ef|grep java观察,封闭相干历程后,再启动hadoop后正常。

                2、运用进程中,呈现错误:Bad connect ack with firstBadLink,处理方法:

                1) '/etc/init.d/iptables stop' -->stopped firewall

                2) SELINUX=disabled in '/etc/selinux/config' file.-->disabled selinux

                泉源:http://blog.csdn.net/xia_yu_mao_fa/article/details/25144843

                持续阅读
                要害词 :
                Hadoop教程
                中国存储网声明:此文观念不代表本站态度,若有版权疑问请联络我们。
                相干阅读
                产物引荐
                头条阅读
                栏目热门

                Copyright @ 2006-2019 ChinaStor.COM 版权一切 京ICP备14047533号

                中国存储网

                存储第一站,存储流派,存储在线交换平台