欢迎来到电脑知识学习网,专业的电脑知识大全学习平台!

手机版

在win7上hadoop环境搭建的方法(图)

软件应用 发布时间:2018-11-24 03:08:40

操作系统:win7

hadoop版本:CDH3u6

1、下载安装JDK,以及Eclipse

   具体看此链接:http://blog.csdn.net/weixuehao/article/details/17715793

2、新建JAVA Project

hadoop环境搭建

3、去cloudera网站下载hadoop的CDH3u6版本。将起解压到win7的某个目录

4、选中OperateHDFS,右击,选择“property”,弹出右侧的窗口;

    选择“Java Build Path” —— “Libraries” —— Add External Jars

 hadoop环境搭建

5、到上面的画面后,下面就是选择开发hadoop程序时,用到的一些jar包

    将lib文件夹下的所有的jar包,添加进去;将红框内的jar包,安装进去。

6、创建配置文件夹

hadoop环境搭建

7、将core-site.xml,hdfs-site.xml,mapred-site.xml放入到此文件夹中。

 hadoop环境搭建

 

hadoop环境搭建

8、右键->属性 进行如下操作,添加刚刚创建conf文件夹

 hadoop环境搭建

 

配置搞定!

写代码的过程中要写入的namenode和jobtracker地址(修改为你自己的)

在你的代码中,加入如下代码就可以了

 

复制代码
代码如下:

Configuration conf = new Configuration();
conf.set("fs.default.name","192.1.1.2:9000");
conf.set("mapred.job.tracker","192.1.1.2:9001");

 


责任编辑:电脑知识学习网

软件应用