第一次云计算实验报告Word文档格式.docx
《第一次云计算实验报告Word文档格式.docx》由会员分享，可在线阅读，更多相关《第一次云计算实验报告Word文档格式.docx（12页珍藏版）》请在冰豆网上搜索。
1、首先将hadoop0.21.0.tar.gz复制到usr下的local文件夹内，（sudocphadoop路径/usr/local）进入到local目录下，解压hadoop0.21.0.tar.gz,如图1
2、为方便管理和hadoop版本升级，将解压后的文件夹改名为hadoop,如图2
二、方便起见，新增hadoop的组和其同名用户：
1、创建一个名字为hadoop的用户组，创建一个用户名为hadoop的用户，归到hadoop组下，如图5（一些信息可以不填写，直接按enter键即可）如图3
2、
（1）添加用户权限：
打开etc下的sudoers文件，在rootALL=（ALL）ALL下面添加如下文字：
hadoopALL=（ALL）ALL
如图4
执行命令：
$:
sudochownhadoop/usr/local/hadoop（将hadoop文件夹的权限赋给hadoop用户）
三、安装ssh
1、安装openssh_server:
如图5
2、创建ssh-key,为rsa，如图6
3、填写key的保存路径，如图7填写
4、添加ssh-key到受信列表，并启用此ssh-key，如图8
4、验证ssh的配置，如图9
四、Jdk的安装和配置
1、假设你的jdk-6u23-i586.bin
已经在桌面上，在
/usr/local
下建立
Java
文件夹，将桌面上上的
jdk
软件包拷贝到刚才建立的
java
文件夹下，如图10：
2、
查看java
文件夹下是否确实存在
软件包，如图11：
3、
给jdk
文件赋权限，使其可以被当前用户操作
如图12：
4、
解压jdk
压缩包进行安装，如图13：
5、出现如下内容，则说明解压完成14：
6、查看
安装路径，如图15：
7、配置环境变量：
将如下内容输入到profile
文件中，如图16：
8、重启计算机，输入
-version
，出现如图内容，则安装
成功！
（如果不想通过重新启动但又要将自己的更改写入proflie中，可以使用命令：
source/etc/profile）如图17：
五、配置hadoop
1、浏览hadoop文件下都有些什么东西，如图18
2、打开conf/hadoop-env.sh,如图19
3、配置conf/hadoop-env.sh（找到#exportJAVA_HOME=...,去掉#，然后加上本机jdk的路径）如图:
20：
44、打开conf/core-site.xml，如图21：
Java代码
1.<
configuration>
2.
<
property>
3.
name>
fs.default.name<
/name>
4.
value>
hdfs:
//localhost:
9000<
/value>
5.
/property>
6.
7.
dfs.replication<
8.
1<
9.
10.
11.
hadoop.tmp.dir<
12.
/home/hadoop/tmp<
13.
14.<
/configuration>
5、打开conf目录下的mapred-site.xml
配置如下内容如图22：
mapred.job.tracker<
localhost:
9001<
6.<
六、运行测试
：
1、改变用户，格式化namenode，如图23：
2、启动hadoop，如图24
3、验证hadoop是否成功启动，如图25
七、运行自带wordcount例子
1、准备需要进行wordcount的文件，如图23（在test.txt中随便输入字符串，保存并退出）如图26
2、将上一步中的测试文件上传到dfs文件系统中的firstTest目录下，如图24（如果dfs下不包含firstTest目录的话自动创建一个同名目录，使用命令：
bin/hadoopdfs-ls查看dfs文件系统中已有的目录）如图27：
3、执行wordcount,如图28（对firstest下的所有文件执行wordcount，将统计结果输出到result文件夹中，若result文件夹不存在则自动创建）
4、查看结果，如图29
升级会员 