麻豆小视频在线观看_中文黄色一级片_久久久成人精品_成片免费观看视频大全_午夜精品久久久久久久99热浪潮_成人一区二区三区四区

首頁 > 網管 > 服務器 > 正文

安裝Hadoop1.0.4偽分布式的方法

2020-05-27 13:34:56
字體:
來源:轉載
供稿:網友

 一、使用環境

操作系統:Ubuntu12.04

Hadoop版本:1.0.4

二、Hadoop官網安裝手冊 單機安裝分為“standalone”和“pseudo-distributed”兩種模式,我使用的是偽分布式模式。

手冊的安裝步驟很詳細,沒有必要當翻譯工了。但是手冊為了通用性,犧牲了一些關鍵問題的討論。第三節中提及一下。

三、手冊缺陷 手冊主要有兩個問題沒有說清楚:

1.Hadoop安裝在哪個目錄下好?

選擇一般有兩種:/usr/local和家目錄下。我選擇安裝在家目錄下,因為開始玩hadoop的時候,這樣避免了權限的麻煩;如果要部署應用的話,應該安裝在/usr/local。

2.配置文件的問題

這是安裝hadoop最重要的步驟。所有配置文件均在${HADOOP_HOME}/conf目錄下。

如果完全按照手冊配置,你的hadoop可能經常遇到NameNode或DataNode啟動不起來的情況。配置文件的不同主要在core-site.xml.

手冊配置如下:

<configuration><property><name>fs.default.name</name><value>hdfs://localhost:9000</value></property></configuration>我的配置如下:

<configuration><property><name>fs.default.name</name><value>hdfs://localhost:8020</value></property> <property>  <name>hadoop.tmp.dir</name>  <value>/home/zhengeek/hadoop-tmp</value> <description>A base for other temporary directories.</description> </property>  </configuration>

有兩處不同:

1.9000和8020這兩個端口都可以,只要沒有被占用。

2.最容易出問題的地方就在這里。比如這個哥們遇到的問題。

hadoop運行起來,hdfs和mapreduce有許多數據需要保存。這可以通過dfs.name.dir 和 dfs.data.dir設置。如果沒有設置,那么數據就會默認存放在/tmp目錄下,如果機器重啟,tmp目錄下的數據就會丟失,namenode自然啟動不起來了。

如果設置了hadoop.tmp.dir,那么這些數據就會默認存放在改目錄下。

有關hadoop.tmp.dir設置的討論。

四、啟動hadoop

1.格式化hdfs

$bin/hadoop namenode -format

2.啟動hdfs

$bin/start-all.sh

3.檢查是否成功

$jps

若成功,會看到namenode,secondarynamenode,datanode,jobtracker和tasktracker五個進程。

發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
主站蜘蛛池模板: 狠狠干狠狠操 | 看毛片电影 | 欧美一级性 | 毛片福利 | 国产精品a一 | 茄子福利视频 | 一级毛片电影网 | 九一免费版在线观看 | 久久在线精品视频 | 一区二区国产在线 | 欧美黄色片一级 | 久久精片 | 国产三级国产精品国产普男人 | 黄视频免费在线 | 一边吃奶一边插下面 | 成人午夜视频网站 | 国产精品视频六区 | 欧美国产精品一区二区 | 2023av在线视频| 毛片大全| 亚洲国产视频网 | 污视频在线看 | 在线播放免费人成毛片乱码 | 日韩视频一区二区在线观看 | 国产精品一区二区三区在线播放 | 欧美日韩爱爱视频 | 二区三区四区视频 | 免费午夜视频在线观看 | 黄色国产在线观看 | 久久精品com | 亚洲福利在线免费观看 | 8x成人在线电影 | qyl在线视频精品免费观看 | sm高h视频 | 欧美日韩在线播放 | 久久成人动漫 | 亚洲国产精品久久久久婷婷老年 | av在线免费网 | 国产精品一 | 一级毛片在线免费观看视频 | 欧美xxxxx视频 |