北京快三开奖

  • <tr id="U9YkSO"><strong id="U9YkSO"></strong><small id="U9YkSO"></small><button id="U9YkSO"></button><li id="U9YkSO"><noscript id="U9YkSO"><big id="U9YkSO"></big><dt id="U9YkSO"></dt></noscript></li></tr><ol id="U9YkSO"><option id="U9YkSO"><table id="U9YkSO"><blockquote id="U9YkSO"><tbody id="U9YkSO"></tbody></blockquote></table></option></ol><u id="U9YkSO"></u><kbd id="U9YkSO"><kbd id="U9YkSO"></kbd></kbd>

    <code id="U9YkSO"><strong id="U9YkSO"></strong></code>

    <fieldset id="U9YkSO"></fieldset>
          <span id="U9YkSO"></span>

              <ins id="U9YkSO"></ins>
              <acronym id="U9YkSO"><em id="U9YkSO"></em><td id="U9YkSO"><div id="U9YkSO"></div></td></acronym><address id="U9YkSO"><big id="U9YkSO"><big id="U9YkSO"></big><legend id="U9YkSO"></legend></big></address>

              <i id="U9YkSO"><div id="U9YkSO"><ins id="U9YkSO"></ins></div></i>
              <i id="U9YkSO"></i>
            1. <dl id="U9YkSO"></dl>
              1. <blockquote id="U9YkSO"><q id="U9YkSO"><noscript id="U9YkSO"></noscript><dt id="U9YkSO"></dt></q></blockquote><noframes id="U9YkSO"><i id="U9YkSO"></i>
                企业空间 推销商城 存储论坛
                北京快三开奖全闪存阵列 IBM云盘算 Acronis 安克诺斯 安腾普 腾保数据
                首页 > Hadoop > 注释

                Ubuntu 12.04单机版情况中搭建hadoop细致教程

                2016-01-26 12:37泉源:杜斌
                导读:Ubuntu 12.04单机版情况中搭建hadoop细致教程,在Ubuntu下创立hadoop用户组和用,创立hadoop用户。

                Ubuntu 12.04单机版情况中搭建hadoop细致教程

                一. 你要装置Ubuntu这一步省略;

                二. 在Ubuntu下创立hadoop用户组和用户;

                1. 创立hadoop用户组:

                 sudo addgroup hadoop

                如图:

                Ubuntu 12.04单机版情况中搭建hadoop细致教程

                2. 创立hadoop用户:

                 sudo adduser -ingroup hadoop hadoop

                如图:

                Ubuntu 12.04单机版情况中搭建hadoop细致教程

                3. 给hadoop用户添加权限,翻开/etc/sudoers文件:

                 sudo gedit /etc/sudoers

                按回车键后就会翻开/etc/sudoers文件了,给hadoop用户付与root用户异样的权限。

                在root   ALL=(ALL:ALL)   ALL下添加hadoop   ALL=(ALL:ALL)  ALL,

                 hadoop  ALL=(ALL:ALL) ALL

                如图:

                Ubuntu 12.04单机版情况中搭建hadoop细致教程

                三. 在Ubuntu下装置JDK

                运用如下下令实行即可:

                 sudo apt-get install openjdk-6-jre

                如图:

                Ubuntu 12.04单机版情况中搭建hadoop细致教程

                四. 修正呆板名

                每当ubuntu装置乐成时,我们的呆板名都默许为:ubuntu ,但为了当前集群中可以容易辨别各台效劳器,需求给每台呆板取个差别的名字。呆板名由 /etc/hostname文件决议。

                1. 翻开/etc/hostname文件:

                 sudo gedit /etc/hostname

                2. 将/etc/hostname文件中的ubuntu改为你想取的呆板名。这里我取"dubin-ubuntu"。 重启零碎后才会失效。

                五. 装置ssh效劳

                这里的ssh和三大框架:spring,struts,hibernate没有什么干系,ssh可以完成近程登录和办理,详细可以参考其他相干材料。

                装置openssh-server,

                 sudo apt-get install ssh openssh-server

                这时假定您曾经装置好了ssh,您就可以停止第六步了哦~

                六、 树立ssh无暗码登录本机

                起首要转换成hadoop用户,实行以下下令:

                 su - hadoop

                如图:

                Ubuntu 12.04单机版情况中搭建hadoop细致教程

                ssh天生密钥有rsa和dsa两种天生方法,默许状况下接纳rsa方法。

                1. 创立ssh-key,,这里我们接纳rsa方法:

                 ssh-keygen -t rsa -P ""

                如图:

                Ubuntu 12.04单机版情况中搭建hadoop细致教程

                (注:回车后会在~/.ssh/下天生两个文件:id_rsa和id_rsa.pub这两个文件是成对呈现的)

                2. 进入~/.ssh/目次下,将id_rsa.pub追加到authorized_keys受权文件中,开端是没有authorized_keys文件的:

                 cd ~/.ssh
                cat id_rsa.pub >> authorized_keys

                如图:

                Ubuntu 12.04单机版情况中搭建hadoop细致教程

                (完成后就可以无暗码登录本机了。)

                3. 登录localhost:

                 ssh localhost

                如图:

                ( 注:当ssh近程登录到别的呆板后,如今你控制的是近程的呆板,需求实行加入下令才干重新控制当地主机。)

                4. 实行加入下令:

                 exit

                七. 装置hadoop

                我们接纳的hadoop版本是:hadoop-0.20.203(http://www.apache.org/dyn/closer.cgi/hadoop/common/  ),由于该版本比拟波动。

                1. 假定hadoop-0.20.203.tar.gz在桌面,将它复制到装置目次 /usr/local/下:

                 sudo cp hadoop-0.20.203.0rc1.tar.gz /usr/local/

                2. 解压hadoop-0.20.203.tar.gz:

                 cd /usr/local
                sudo tar -zxf hadoop-0.20.203.0rc1.tar.gz

                3. 将解压出的文件夹更名为hadoop:

                 sudo mv hadoop-0.20.203.0 hadoop

                4. 将该hadoop文件夹的属主用户设为hadoop:

                 sudo chown -R hadoop:hadoop hadoop

                5. 翻开hadoop/conf/hadoop-env.sh文件:

                 sudo gedit hadoop/conf/hadoop-env.sh

                6. 设置装备摆设conf/hadoop-env.sh(找到#export JAVA_HOME=...,去失#,然后加上本机jdk的途径):

                 export JAVA_HOME=/usr/lib/jvm/java-6-openjdk

                7. 翻开conf/core-site.xml文件:

                 sudo gedit hadoop/conf/core-site.xml

                编辑如下:

                1. <?xml version="1.0"?> 
                2. <?xml-stylesheet type="text/xsl" href="configuration.xsl"?>                                                                                                         
                3. <!-- Put site-specific property overrides in this file. --> 
                4.                                                            
                5. <configuration> 
                6. <property>    
                7.   <name>fs.default.name</name>    
                8.   <value>hdfs://localhost:9000</value>     
                9.  </property>    
                10. </configuration> 

                8. 翻开conf/mapred-site.xml文件:

                 sudo gedit hadoop/conf/mapred-site.xml

                编辑如下:

                1. <?xml version="1.0"?> 
                2. <?xml-stylesheet type="text/xsl" href="configuration.xsl"?>                                                                                                           
                3. <!-- Put site-specific property overrides in this file. -->                                                  
                4.     <configuration>    
                5.      <property>     
                6.       <name>mapred.job.tracker</name>    
                7.       <value>localhost:9001</value>     
                8.      </property>    
                9.     </configuration> 

                9. 翻开conf/hdfs-site.xml文件:

                 sudo gedit hadoop/conf/hdfs-site.xml

                编辑如下:

                1. <configuration> 
                2. <property> 
                3. <name>dfs.name.dir</name> 
                4. <value>/usr/local/hadoop/datalog1,/usr/local/hadoop/datalog2</value> 
                5. </property> 
                6. <property> 
                7. <name>dfs.data.dir</name> 
                8. <value>/usr/local/hadoop/data1,/usr/local/hadoop/data2</value> 
                9. </property> 
                10. <property> 
                11. <name>dfs.replication</name> 
                12. <value>2</value> 
                13. </property> 
                14. </configuration> 

                10. 翻开conf/masters文件,添加作为secondarynamenode的主机名,作为单机版情况,这里只需填写 localhost 就Ok了。

                 sudo gedit hadoop/conf/masters

                11. 翻开conf/slaves文件,添加作为slave的主机名,一行一个。作为单机版,这里也只需填写 localhost就Ok了。

                 sudo gedit hadoop/conf/slaves

                八. 在单机上运转hadoop

                1. 进入hadoop目次下,款式化hdfs文件零碎,首次运转hadoop时肯定要有该操纵,

                 cd /usr/local/hadoop/
                bin/hadoop namenode -format

                2. 当你看到下图时,就阐明你的hdfs文件零碎款式化乐成了。

                Ubuntu 12.04单机版情况中搭建hadoop细致教程

                3. 启动bin/start-all.sh:

                 bin/start-all.sh

                4. 检测hadoop能否启动乐成:

                 jps

                假如有Namenode,SecondaryNameNode,TaskTracker,DataNode,JobTracker五个历程,就阐明你的hadoop单机版情况设置装备摆设好了!

                如下图:

                Ubuntu 12.04单机版情况中搭建hadoop细致教程

                至此,一个hadoop的单机版情况就搭建好了,假如有什么题目,请给我提出来,我们可以互相交换。

                作者杜斌:http://www.db89.org/post/2012-06-03/hadoopdanjihuanjing

                持续阅读
                要害词 :
                Ubuntu hadoop装置
                中国存储网声明:此文观念不代表本站态度,若有版权疑问请联络我们。
                相干阅读
                产物引荐
                头条阅读
                栏目热门

                Copyright @ 2006-2019 ChinaStor.COM 版权一切 京ICP备14047533号

                中国存储网

                存储第一站,存储流派,存储在线交换平台