• <noscript id="ecgc0"><kbd id="ecgc0"></kbd></noscript>
    <menu id="ecgc0"></menu>
  • <tt id="ecgc0"></tt>

    怎么在ubantu里面安裝偽分布式Hadoop?

    Hadoop的安裝方式分為三種模式:單機模式,偽分布式模式,分布式模式。<br/> 1.單機模式:Hadoop 默認模式為非分布式模式(本地模式),無需進行其他配置即可運行。非分布式即單 Java 進程,方便進行調試。<br/> 2.偽分布式模式:Hadoop 可以在單節點上以偽分布式的方式運行,Hadoop 進程以分離的 Java 進程來運行,節點既作為 NameNode 也作為 DataNode,同時,讀取的是 HDFS 中的文件。<br/> 3.分布式模式:使用多個節點構成集群環境來

    東西/材料

    64位Ubuntu LTS 14.04

    VMware 最新版本

    操作方式

    • 01

      第一步建立Hadoop用戶。

    • 02

      第二步,刊出并利用 Hadoop 用戶登錄,接下來更新 apt 而且安裝 vim。

    • 03

      安裝上ssh,設置裝備擺設為無暗碼登錄

    • 04

      安裝java的情況。
      sudo apt-get install openjdk-7-jre openjdk-7-jdk
      vim ~/.bashrc # 設置JAVA_HOME
      在配資文件中添加。
      export JAVA_HOME=/usr/lib/jvm/java-7-openjdk-amd64
      JAVA_HOME 變量生效:
      source ~/.bashrc

    • 05

      安裝 Hadoop :

      cd ~/下載
      sudo tar -zxvf ./hadoop-2.6.0.tar.gz -C /usr/local # 解壓到/usr/local中
      cd /usr/local/
      sudo mv ./hadoop-2.6.0/ ./hadoop # 將文件夾名改為hadoop
      sudo chown -R hadoop ./hadoop

      點竄設置裝備擺設文件 core-site.xml :

      vim /usr/local/hadoop/etc/hadoop/core-site.xml

      <configuration>
      <property>
      <name>hadoop.tmp.dir</name>
      <value>file:/usr/local/hadoop/tmp</value>
      <description>Abase for other temporary directories.</description>
      </property>
      <property>
      <name>fs.defaultFS</name>
      <value>hdfs://localhost:9000</value>
      </property>
      </configuration>

      點竄設置裝備擺設文件 hdfs-site.xm

      <configuration>
      <property>
      <name>dfs.replication</name>
      <value>1</value>
      </property>
      <property>
      <name>dfs.namenode.name.dir</name>
      <value>file:/usr/local/hadoop/tmp/dfs/name</value>
      </property>
      <property>
      <name>dfs.datanode.data.dir</name>
      <value>file:/usr/local/hadoop/tmp/dfs/data</value>
      </property>
      </configuration>

    • 06

      啟動好Hadoop。

      cd /usr/local/hadoop
      bin/hdfs namenode -format # namenode 格局化
      sbin/start-dfs.sh # 開啟守護歷程
      jps
      若當作功啟動則會列出如下歷程: NameNode、DataNode和SecondaryNameNode。

    • 07

      運行 WordCount 實例。測試一下。

      bin/hdfs dfs -mkdir -p /user/hadoop # 建立HDFS目次
      bin/hdfs dfs -mkdir input
      bin/hdfs dfs -put etc/hadoop/*.xml input # 將設置裝備擺設文件作為輸入
      bin/hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-*.jar grep input output 'dfs[a-z.]+'
      bin/hdfs dfs -cat output/* # 查看輸出

    • End

    出格提醒

    此處安裝之前,必然是先安裝好安裝好java情況,不然hadoop將會測試不當作功。感覺行的同志打賞下哦,感謝。

    • 發表于 2018-04-26 00:00
    • 閱讀 ( 780 )
    • 分類:電腦網絡

    你可能感興趣的文章

    相關問題

    0 條評論

    請先 登錄 后評論
    聯系我們:uytrv@hotmail.com 問答工具
  • <noscript id="ecgc0"><kbd id="ecgc0"></kbd></noscript>
    <menu id="ecgc0"></menu>
  • <tt id="ecgc0"></tt>
    久久久久精品国产麻豆