操作系統:win7
hadoop版本:CDH3u6
1、下載安裝JDK,以及Eclipse
具體看此鏈接:http://blog.csdn.net/weixuehao/article/details/17715793
2、新建JAVA Project
3、去cloudera網站下載hadoop的CDH3u6版本。將起解壓到win7的某個目錄
4、選中OperateHDFS,右擊,選擇“property”,彈出右側的窗口;
選擇“Java Build Path” —— “Libraries” —— Add External Jars
5、到上面的畫面后,下面就是選擇開發hadoop程序時,用到的一些jar包
將lib文件夾下的所有的jar包,添加進去;將紅框內的jar包,安裝進去。
6、創建配置文件夾
7、將core-site.xml,hdfs-site.xml,mapred-site.xml放入到此文件夾中。
8、右鍵->屬性 進行如下操作,添加剛剛創建conf文件夾
配置搞定!
寫代碼的過程中要寫入的namenode和jobtracker地址(修改為你自己的)
在你的代碼中,加入如下代碼就可以了
復制代碼代碼如下:
Configuration conf = new Configuration();
conf.set("fs.default.name","192.1.1.2:9000");
conf.set("mapred.job.tracker","192.1.1.2:9001");
新聞熱點
疑難解答