集群hadoop装机步骤（1）

集群hadoop装机步骤小结（1）

准备 ：

安装集群的机子不要一样版本的ubuntu，但必须要有相同版本的hadoop和jdk

所以这里首先要统一hadoop和jdk

我们团队用到的hadoop是：hadoop-0.20.203.0rcl.tar   jdk是：jdk-6u30-linux-i586.bin

 声明：(netjava是我们小组统一的用户名)

步骤 ：

 

第一：配置jdk环境   

（1）

  首先复制jdk-6u30-linux-i586.bin到netjava文件夹下，并在命令行中更改当前的目录到/home/netjava

（2）

  第一行是赋权限的操作 第二行是解压jdk-6u30-linux-i586.bin文件

   得到下图的结果则说明解压成功

（3）

    为了管理方便要统一解压后的jdk文件路径

    第一行：在/usr/local下建立java文件夹

    第二行：移动jdk1.6.0_30的文件夹到java文件夹下

（4）

    更改环境变量，更改/etc/profile这个文件内容  

  添加下面一段到文件末尾

（注意我们这里的路径是/usr/local/java应该改成你自己的解压后的jdk的位置否则你的ubuntu关机后因配置环境错误无法进入）

（5）

    查看是否配置是否成功

 

 

 

 

 

 

如果你的电脑上述方法遇到麻烦，可以重启后再在命令行输入java-version查看

 

 

 

 

第二：安装hadoop  

（1）

   准备工作

   首先复制hadoop-0.20.203.0rcl.tar到netjava文件夹下，查看当前路径下的文件

（2）

   解压文件

   第一行解压hadoop第二行移动解压后的hadoop-0.20.203.0文件到/usr/local下并改名为hadoop

  

第三：新增haoop组和hadoop用户

 

 

（1）

   A图添加用户组 B图添加用户名

   （A）图

 

   （B）图 

（2）

   添加权限（使hadoop普通用户用户就能够执行root权限的所有命令sudoer是sudo工具的配置文件 )

   打开此文件后添加如下内容

 

最后将hadoop文件夹的权限赋给hadoop用户：$:sudo chown hadoop /usr/local/hadoop()

（3）更新hadoop的环境变量

 

打开文件后将JAVA_HOME前的#去掉并将=后面的内容改成你的jdk路径（如下图所示）

 

 

 

 第四：安装ssh（更新ssh时需要联网

 

 

（1）

 

   更新ssh软件包（我的已经安装过了，如没有安装的后面显示的内容是建议安装）

 

 

 

 

 

 

（2）

   先切换到hadoop用户可以直接在命令行输入su hadoop 也可以在关机菜单项中选择切换用户

 

（3）

   创建公钥/私钥  并填写保存路径（/home/hadoop/.ssh/id_rsa）

 

(4）

 

   第一行是添加你的密钥添加到受信列表  第二行 启用这个密钥

 

 

 

（5）

 

   验证配置是否成功

 

 

 

 

 配置成功后 请继续查看

http://644156440-qq-com.iteye.com/admin/blogs/1393571

 

评论

2 楼 daragon 2012-02-09  

daragon 写道

哇塞，妹子写的文章果真有声有色

不过最底下给的链接却有问题

1 楼 daragon 2012-02-09  

哇塞，妹子写的文章果真有声有色