日期:2014-05-16  浏览次数:20467 次

Hadoop0.20.203初试手记

OS: Debian 6.03

Hadoop: 0.20.203

?

一,安装Hadoop


启动运行Hadoop时不能用root。用其它用户账号运行时,需要对hadoop文件夹下有rwx权限。

所以建议:安装Hadoop时,最好用当前用户安装,而不用root。

?

1. 解压好hadoop,放入/usr/local/下,即/usr/local/hadoop-0.20。

?

2. 设置环境变量:

? ? 1)vi /etc/profile:加入

? ? ? ? export HADOOP_HOME=/usr/local/hadoop-0.20

不知道这个环境变量是否必要,参考了别人的文章,先设置。

?

? ? 2)vi /usr/local/hadoop-0.20/conf/hadoop-env.sh:设置JAVA_HOME变量。

export JAVA_HOME=/usr/local/jdk1.6.0_30

注意这个变量需要在hadoop中另外设置。而/etc/profile下的JAVA_HOME,hadoop是不认的。

?

?

二,运行测试:

1. Standalong:

参考:http://hadoop.apache.org/common/docs/r0.20.203.0/single_node_setup.html#Local

?

2. Pseudo-Distribute:

参考:http://hadoop.apache.org/common/docs/r0.20.203.0/single_node_setup.html#PseudoDistributed

?

如果用非root用户启动,并且对/usr/local/hadoop-0.20下有读写和执行权限,在我这环境下是没有问题的。

用浏览器访问