【Hadoop】Win7上搭建Hadoop开发环境,只做大数据服务器架设

日期: 1月前 人气: - 评论: 0

在Win7上,编写hadoop程序

 

操作系统:win7

hadoop版本:CDH3u6

 

1、下载安装JDK,以及Eclipse

2、新建JAVA Project

3、去cloudera网站下载hadoop的CDH3u6版本。将起解压到win7的某个目录

4、选中OperateHDFS,右击,选择“property”,弹出右侧的窗口;

    选择“Java Build Path” —— “Libraries” —— Add External Jars

 

5、到上面的画面后,下面就是选择开发hadoop程序时,用到的一些jar包

    将lib文件夹下的所有的jar包,添加进去;将红框内的jar包,安装进去。

6、创建配置文件夹

7、将core-site.xml,hdfs-site.xml,mapred-site.xml放入到此文件夹中。

 

 

8、右键->属性 进行如下操作,添加刚刚创建conf文件夹

 

 

配置搞定!

写代码的过程中要写入的namenodejobtracker地址(修改为你自己的)

在你的代码中,加入如下代码就可以了

Configuration conf = new Configuration();
conf.set("fs.default.name","192.1.1.2:9000");
conf.set("mapred.job.tracker","192.1.1.2:9001");

 

去博客园浏览:http://www.cnblogs.com/laov/p/3497889.html