北京快三开奖

  • <tr id="U9YkSO"><strong id="U9YkSO"></strong><small id="U9YkSO"></small><button id="U9YkSO"></button><li id="U9YkSO"><noscript id="U9YkSO"><big id="U9YkSO"></big><dt id="U9YkSO"></dt></noscript></li></tr><ol id="U9YkSO"><option id="U9YkSO"><table id="U9YkSO"><blockquote id="U9YkSO"><tbody id="U9YkSO"></tbody></blockquote></table></option></ol><u id="U9YkSO"></u><kbd id="U9YkSO"><kbd id="U9YkSO"></kbd></kbd>

    <code id="U9YkSO"><strong id="U9YkSO"></strong></code>

    <fieldset id="U9YkSO"></fieldset>
          <span id="U9YkSO"></span>

              <ins id="U9YkSO"></ins>
              <acronym id="U9YkSO"><em id="U9YkSO"></em><td id="U9YkSO"><div id="U9YkSO"></div></td></acronym><address id="U9YkSO"><big id="U9YkSO"><big id="U9YkSO"></big><legend id="U9YkSO"></legend></big></address>

              <i id="U9YkSO"><div id="U9YkSO"><ins id="U9YkSO"></ins></div></i>
              <i id="U9YkSO"></i>
            1. <dl id="U9YkSO"></dl>
              1. <blockquote id="U9YkSO"><q id="U9YkSO"><noscript id="U9YkSO"></noscript><dt id="U9YkSO"></dt></q></blockquote><noframes id="U9YkSO"><i id="U9YkSO"></i>
                企业空间 推销商城 存储论坛
                北京快三开奖全闪存阵列 IBM云盘算 Acronis 安克诺斯 安腾普 腾保数据
                首页 > Hadoop > 注释

                hadoop伪散布式装置办法

                2014-04-30 00:00泉源:中国存储网
                导读:打仗Hadoop也快两年了,也不断没本人总结过装置教程,近来又要用hadoop,需求本人搭建一个集群来停止实验,以是就应用这个时机来写个教程以备当前本人运用,也用来和各人一同讨论。要装置Hadoop先装置其辅佐情况 javaUbuntu下java的装置与设置装备摆设将

                打仗Hadoop也快两年了,也不断没本人总结过装置教程,近来又要用hadoop,需求本人搭建一个集群来停止实验,以是就应用这个时机来写个教程以备当前本人运用,也用来和各人一同讨论。

                要装置Hadoop先装置其辅佐情况 java

                Ubuntu下java的装置与设置装备摆设

                将java装置在指定途径方便当前查找运用。

                Java装置

                1)在/home/xx(也便是以后用户)目次下,新建java1.xx文件夹:mkdir /home/xx/java1.xx(文件名上标明版本号,方便日后理解java版本)

                2)进入/home/xx/java1.xx目次下,运转装置指令:sudo /home/xx /jdk-6u26-linux-i586.bin,则天生文件夹jdk1.6.0_26,假如觉得名字太长,可以对其重定名:mv jdk1.6.0_26 jdk

                也可以运用sudoapt-get install 软件包来装置java。假如想卸载java运用下令sudo rm -rf /home/xx/java1.6/jdk1.6(装置目次)

                设置装备摆设情况变量

                进入profile文件添加情况设置装备摆设,下令为sudo gedit /etc/profile 在文件的末端添加

                1 2 3 4 5 6 7 JAVA_HOME=/home/xx/java1.xx/jdk JRE_HOME=/home/xx /java1.xx/jdk/jre PATH=$JAVA_HOME/bin:$JRE_HOME/bin: $PATH export JAVA_HOME export JRE_HOME export CLASSPATH export PATH

                 

                完成以上设置装备摆设后重启电脑然后查验java能否装置乐成在终端输出java –version 后表现

                hadoop伪散布式装置办法

                阐明java装置乐成。

                Java装置乐成后接着进入正题停止Hadoop的装置,本文先辈行Hadoop的伪散布装置随后会持续更新完全散布的装置进程。

                本文运用的Hadoop版本是hadoop-0.20.2,将hadoop-0.20.2.tar.gz移至以后用户目次下停止解压tar –zxvf hadoop-0.20.2.tar.gz

                然后设置装备摆设hadoop的情况变量,其设置装备摆设办法和java的设置装备摆设办法一样,在profile中写入HADOOP_HOME=/home/xx/hadoop

                Java和hadoop的配好的情况变量如图

                hadoop伪散布式装置办法

                配好情况后可以用hadoop version 检查版本(需求重启电脑)。

                接着对hadoop的设置装备摆设文件停止设置装备摆设。进入hadoop/conf途径下,修正hadoop-env.sh文件 sudo gedit hadoop-env.sh对其添加javahomehadoop伪散布式装置办法

                完成以上设置装备摆设之后就可以在单机形式停止测试了

                hadoop伪散布式装置办法

                输入后果为:

                hadoop伪散布式装置办法

                 

                呈现下面的后果阐明之前的步调你都摆设准确。接上去停止伪散布的设置装备摆设,进入hadoop/conf目次下对core-site.xml停止编辑,添加如下内容

                1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 <property> <name>hadoop.tmp.dir</name> <value>/home/xx/hadoop/tmp</value> </property> <property> <name>fs.default.name</name> <value>hdfs://xx:9000</value>//也可以是主机的ip </property> 对hdfs-site.xml停止编辑,添加如下内容 <property> <name>dfs.replication</name> <value>3</value> </property> 对mapred-site.xml停止编辑,添加如下内容 <property> <name>mapred.job.tracker</name> <value>xx:9001</value> </property>

                 

                完成以上任务后,终于可以运转hadoop了,运转时要先对hdfs停止款式化(貌似跟新买一块硬盘时首次运用也得款式化的原理一样),下令为bin/hadoop namenode –format呈现如下画面为乐成

                hadoop伪散布式装置办法

                接着便是启动hadoop了,冲动民气的时辰到了哦,bin/start-all.sh 后果呈现了如下画面

                hadoop伪散布式装置办法

                貌似子节点没有启动,表现衔接被回绝,然后用jps检查下启动了几个义务

                hadoop伪散布式装置办法

                 

                子节点真的没有起来,看来伪散布也得设置装备摆设ssh,接上去的义务便是持续设置装备摆设ssh了

                1.先下令

                1 sudo apt-get installssh

                 

                2.然后设置装备摆设可以无暗码登岸本机:

                由于本文是伪散布的,只在本人呆板上装置就可以了,进入用户目次创立.ssh 文件 mkdir .ssh 。之落伍入.ssh ,在此途径下实行天生密钥的下令ssh-keygen –t rsa(rsa是加密方法),一起回车下去就行了,乐成之后在.ssh文件中检查文件 ls –a 可以瞥见天生两个文件

                hadoop伪散布式装置办法

                表现密钥天生乐成。接上去便是发生公钥,下令

                1 cp id_rsa.pub authorized_keys

                 

                3.验证ssh已装置乐成及无暗码登岸本机

                Ssh能否装置乐成可以像查验java hadoop那样查了版本号ssh –version

                无暗码登岸主机下令sshlocalhost ,第一次登录时会讯问你能否持续链接,输出yes即可以进入。

                完成以上操纵hadoop的伪散布形式也装置乐成了,运转bin/start-all.sh 启动,然后用jps检查启动了那些效劳,乐成启动的效劳如下图

                hadoop伪散布式装置办法

                猜您喜好:

                1.Hadoop读写文件时外部任务机制是怎样的

                2.基于Hadoop平台的云存储使用理论

                3.Hadoop中的一些根本操纵

                持续阅读
                要害词 :
                Hadoop
                中国存储网声明:此文观念不代表本站态度,若有版权疑问请联络我们。
                相干阅读
                产物引荐
                头条阅读
                栏目热门

                Copyright @ 2006-2019 ChinaStor.COM 版权一切 京ICP备14047533号

                中国存储网

                存储第一站,存储流派,存储在线交换平台