ubuntu下hadoop的安装.docx

ubuntu下hadoop的安装.docx

《ubuntu下hadoop的安装.docx》由会员分享，可在线阅读，更多相关《ubuntu下hadoop的安装.docx（9页珍藏版）》请在冰豆网上搜索。

ubuntu下hadoop的安装

1、下载虚拟机和ubuntu镜像文件，并且安装完毕，过程简单不再赘述。

2、创建hadoop用户组

3、创建hadoop用户

4、为hadoop用户赋权限

5、用hadoop用户登录系统

6、安装ssh

如果Ubuntu安装ssh时出现软件包openssh-server还没有可供安装的候选者错误

解决方案：

分析原因是我们的apt-get没有更新，当然如果你的是最新的系统不用更新也行，但是我相信很多人都是需要更新的吧，操作命令如下：

sudoapt-getupdate

更新完毕后执行：

sudoapt-getinstallopenssh-server

安装完成后，开启ssh服务

7、开启ssh服务并查看

8、设置免密码登录，生成公钥和私钥

此时会在／home／hadoop/.ssh下生成两个文件：

id_rsa和id_rsa.pub，前者为私钥，后者为公钥。

下面我们将公钥追加到authorized_keys中，它用户保存所有允许以当前用户身份登录到ssh客户端用户的公钥内容。

9、登录ssh

10、安装java环境

sudoapt-getinstallopenjdk-7-jdk

查看一下是否成功安装jdk

11、安装hadoop2.7.2

拷贝下载hadoop包到系统盘下

解压

sudotarxzfhadoop-2.7.2.tar.gz  

12、赋予用户对该文件夹的读写权限

sudochmod774home/hadoop-2.7.2

13、配置~/.bashrc

配置该文件前需要知道Java的安装路径，用来设置JAVA_HOME环境变量，可以使用下面命令行查看安装路径

完整的路径为

    /usr/lib/jvm/java-7-openjdk-i386/jre/bin/java

我们只取前面的部分/usr/lib/jvm/java-7-openjdk-i386

配置.bashrc文件

    sudogedit~/.bashrc

14、在文件后面添加环境变量

执行下面命，使添加的环境变量生效：

        source~/.bashrc

15、修改hadoop-env.sh

找到JAVA_HOME变量，修改此变量如下

        exportJAVA_HOME=/usr/lib/jvm/java-7-openjdk-i386

16、完成wordcount实验

创建需要读入的文件input和输出文件output

把系统自带的README.TXT放在input下，进行统计

结果