第三章习题答案

答案1. 选择题(1) A解释：在3.1.1节中有述，hdfs dfsadmin -report -live输出文件系统中在线节点的基本信息及相关数据统计。hdfs dfsadmin -report -dead输出文件系统中失效节点的基本信息及相关数据统计。hdfs dfsadmin -report -decommissioning输出文件系统中停用节点的基本信息及相关数据统计。(2) C解释：ls查看文件信息，B中report运用错误，A和D中的命令不存在(3) A解释：A项-get可以将HDFS上的文件下载到linux本地，C项-put将linux本地文件上传到HDFS，B和D选项命令不存在。(4) B解释：Hadoop 2.6版本存储时默认每个数据块为128M，500M的文件会被分成4块进行存储。(5) C解释：wordcount是单词计数模块，wordmean是计算平均数的模块，wordmedian是计算中位数的模块，wordstandarddeviation是计算标准差的模块。(6) C解释：hadoop jar是提交Mapreduce jar包运行程序的命令。(7) C解释：在程序中没有设置删除已存在的目录的情况下，一般程序的输出目录如果存在，则会停止任务并报文件已存在异常。(8) C解释：状态是“ACCEPTED”，表示它已被资源管理器YARN接受，目前在等待被分配计算资源，只有当计算资源满足后，才会开始执行。2. 操作题(1) 上传文件操作 按照要求创建文件helloworld.txtvim helloworld.txt按i进入编辑模式后输入以下内容：I am a student.I like Apple.I like banana.按Esc退出编辑模式后按:wq保存内容 创建HDFS上的文件夹hdfs dfs -mkdir /user/root/filetest 上传文件helloworld.txt到/user/root/filetest下hdfs dfs -put helloworld.txt /user/root/filetest/如下图 1所示。图 1文件目录 通过命令显示文件内容图 2文件内容2. hadoop jar运行hadoop-mapreduce-examples-2.6.4.jar计算PI值的测试模块(1) 根据3.4.1节设置PI模块参数如下代码 1。代码 1运行jar计算PI值hadoop jar /usr/local/hadoop-2.6.4/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.6.4.jar pi 30 1000hadoop jar /usr/local/hadoop-2.6.4/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.6.4.jar pi 50 1000 hadoop jar /usr/local/hadoop-2.6.4/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.6.4.jar pi 30 500hadoop jar /usr/local/hadoop-2.6.4/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.6.4.jar pi 20 500(2) 依次运行命令后打开http:/master:8088/cluster/nodes查看计算资源情况和任务执行情况图 3任务运行情况图 4计算资源使用情况(3) 点击第一个任务的Application进入应用界面