hadoop例题(最新整理)

1、选择题1、关于 mapreduce 的描述错误的是（）a、mapreduce 框架会先排序 map 任务的输出b、通常，作业的输入输出都会被存储在文件系统中c、通常计算节点和存储节点是同一节点d、一个 task 通常会把输入集切分成若干独立的数据块2、关于基于 hadoop 的 mapreduce 编程的环境配置，下面哪一步是不必要的（）a、安装 linux 或者在 windows 下安装 cgywin b、安装 javac、安装 mapreduce d、配置 hadoop 参数3、关于基于 hadoop 的 mapreduce 编程的环境配置，下面哪一步是不必要的（）a、配置 java 环境

2、变量b、配置 hadoop 环境变量c、配置 eclipsed、配置 ssh4、下列说法错误的是（）a、mapreduce 中 maperconbiner reducer 缺一不可b、在 jobconf 中 inputformat 参数可以不设c、在 jobconf 中 mapperclass 参数可以不设d、在 jobconf 中 outputkeycomparator 参数可以不设5、下列关于 mapreduce 的 key/value 对的说法正确的是（） a、输入键值对不需要和输出键值对类型一致b、输入的 key 类型必须和输出的 key 类型一致c、输入的 value 类型必须和输出

3、的 value 类型一致d、输入键值对只能映射成一个输出键值对6、在 mapreduce 任务中，下列哪一项会由 hadoop 系统自动排序（）a、keys of mappers outputb、values of mappers output c、keys of reducers outputd、values of reducers output7、关于 mapreduce 框架中一个作业的 reduce 任务的数目，下列说法正确的是（）a、由自定义的 partitioner 来确定b、是分块的总数目一半c、可以由用户来自定义，通过 jobconf.setnumreducettask(int

4、)来设定一个作业中 reduce 的任务数目d、由 mapreduce 随机确定其数目8、mapreduce 框架中，在 map 和 reduce 之间的 combiner 的作用是（）a、对 map 的输出结果排序b、对中间过程的输出进行本地的聚集c、对中间结果进行混洗d、对中间格式进行压缩9、mapreduce 框架分为 map 和 reduce，下列对 reduce 阶段叙述正确的是（）a、主要分为 shuffle 和 sort 这 2 个阶段b、这个阶段过程中，key 的分组规则是不可更改的c、其中的 shuffle 和 sort 是同时进行的d、reduce 数目的增加不会增加系统的

5、开销10、hadoop 中，reducer 的三个阶段是（） a、shufflesortreduceb、shufflereducesort c、reduceshufflesort d、sortshufflereduce11、请问在 hadoop 体系结构中，按照由下到上顺序，排列正确的是（）pig hive crunch 都是运行在 mapreduce , spark ,或者 tez 之上的处理框架avro 是一个克服了 writable 部分不足的序列化系统a、common hive hdfsb、common mapreduce pig c、hdfs mapreducehbased、hdfs

6、 avro hbase12、关于 hadoop 下列说法错误的是（） a、hdfs 采用了 master/slave 的架构模型b、namenode 负责维护文件系统的命名空间c、datanode 执行比如打开、关闭、重命名文件操作d、hdfs 暴露了文件系统的命名空间，允许用户以文件的形式在上面存储数据13、下面哪个选项不是我们需要 hadoop 的主要原因（） a、我们需要处理 pb 级别的数据b、为每个应用建立一个可靠的系统是很昂贵的c、几乎每天都有结点坏掉d、把一个任务分割成多个子任务的方式是不好的14、hadoop 中下面哪项操作是不需要记录进日志的（） a、打开文件b、重命名c、编

7、译文件d、删除操作15、hadoop 中，下面关于向文件系统中添加一个文件的过程，错误的是（）a、需要创建路径的父目录b、需要创建一个新的 inode 文件c、将新的 inode 文件加入到 name space 中去d、将所有操作记录到 editlog 中去16、在安装配置好 hadoop 集群后，查看 namenode 节点的端口是以下哪个（）a、50030 b、50070 c、60010 d、6003017、下面哪个不是 hadoop 的输出数据格式（） a、文本输出b、二进制输出c、单一输出d、多输出18、要在 hdfs 的根目录中建立一个叫 hadoo 的目录，下面哪一条命令是正确的

8、（）a、mkdirhadoob、mkdir /hadooc、hadoopmkdirhadood、hadoop fs mkdir /hadoo19、下面有关 namenode 安全模式(safe mode)说法错误的是（） a、name space 处于安全模式时只能被读取b、namenode 启动时自动进入安全模式c、调用 setsafemode()函数能够打开或关闭安全模式d、安全模式下不能够复制或删除文件中的数据块20、以下情况除哪项发生时 balancer 便会自动退出（） a、集群平衡或者没有数据块可以移动b、在连续三次迭代中没有块移动c、与 namenode 传输时发生异常d、另一个

9、 balancer 在运行21、下列说法错误的是（）a、partitioner 负责控制 map 输出结果 key 的分割b、reporter 用于 mapreduce 应用程序报告进度c、outputcollector 收集 mapper 或 reducer 输出数据d、reduce 的数目不可以是 022、下列说法错误的是（）a、jobserver 是用户作业和 jobtracker 交互的主要接口b、jobclient 为用户提供提交作业功能c、jobclient 提供访问子任务报告和日志功能d、jobclient 提供获取 mapreduce 集群状态信息功能23、hadoop 的哪个

10、包的功能是表示层，将各种数据编码/解码，方便在网络上传输（）a、fs b、ipc c、io d、net24、hadoop 的哪个包的功能是根据 ddl（数据描述语言）自动生成他们的编解码函数（）a、record b、metrics c、utild、tool25、hadoop 中什么类提供了连接到 hdfs 系统并执行文件操作的基本功能（）a、fsdirectory b、dfsclientc、clientprotocol d、fsinputstream26、mapreduce 程序最基本的组成部分不包括（） a、mapper 类b、reducer 类c、创建 jobconf 的执行程序d、con

11、biner 类27、下列关于 hadoop 中 shell 类说法错误的是（） a、shell 类是一个继承类b、shell 类定义了如何在当前文件系统环境中，通过命令进行交互c、shell 类定义了静态的字符串命令d、shell 类定义了与实现命令的执行相关的属性28、如果想在 hadoop 文件系统中通过键盘输入来创建一个文件，你应该使用下列哪种方法（）a、copy()b、copyfromstdin() c、printtostdout() d、copyfromlocal()29、关于 fsshell 的说法，下面哪一项是正确的（） a、fsshell 和 unix 系统中的 shell 一

12、样功能强大b、fsshell 实际上是一个 java 应用程序c、可以在 fsshell 中执行 hdfs 文件系统中的可执行文件d、fsshell 实际上是调用 unix 的 shell 命令来实现复制操作30、当时，hdfs 启动 balancer（）a、threshold =ratio(datanode)-ratio(rack) b、threshold=ratio(datanode)-ratio(rack) c、threshold=|ratio(datanode)-ratio(rack)31、执行数据块复制的任务时，是什么和什么在进行通信（） a、client and namenodeb

13、、client and datanodec、namenode and datanode d、datanode and datanode32、关于 namenode 和 secondary namenode 的说法错误的是（）a、namenode 上实现的 namenodeprotocol 用于二者命令通信b、数据的通信使用的是 ftp 协议 （http 协议）c、数据通信使用的是 http 协议d、协议的容器是 jetty33、关于 secondary namenode 的说法错误的是（）a、main 方法是 secondary namenode 的入口，它启动线程执行 run b、启动前的构

14、造过程主要是创建和 namenode 通信的接口和启动http 服务器c、run 方法每隔一段时间执行 docheckpoint()d、main 方法从 namenode 上取下 fsimage 和日志，和本地合并再传回 namenode （应该是 run 方法完成）34、hadoop 中节点之间的进程通信是通过什么协议来实现的（） a、httpb、smtp c、ssh d、rpc35、下面有关 namenode 和 secondary namenode 通信协议说法错误的是（）a、secondary namenode 使用 namenodeprotocol 协议与 namenode进行通信b

15、、如果文件系统处于安全模式，那么关闭当前日志并打开新的日志操作会失败c、如果旧的编辑日志丢失了，那么滚动 fsimage 日志会失败d、secondary namenode 可以从 namenode 中得到任何 datanode 的块及其位置36、下面有关 namenode 和 datanode 之间的 hearbeat 说法错误的是（）a、datanode 通过发送 heartbeat 告诉 namenode 自己还活着， 并且工作正常b、heatbeat 包含 datanode 状态相关信息c、namenode 回复 heartbeat 一些 datanodecommandd、如果 nam

16、enode 在某一固定时间内没有收到 datanode 的heatbeat，那么它会要求 datanode 发送 heartbeat37、下面哪个协议用于 datanode 和 namenode 之间的通信（） a、datanodeprotocolb、namenodeprocotol c、clientprotocold、clientdatanodeprotocol38、下面哪个协议用于 secondary namenode 和 namenode 之间的通信（）a、datanodeprotocol b、namenodeprocotol c、clientprotocold、clientdatano

17、deprotocol39、在 hadoop 上提交 job 时不涉及哪个实体（） a、客户端b、hdfsc、secondarynode d、jobtracker40、mapreduce 处理流程中 reduce 如何获取 map 端结果（） a、map 端发送b、reduce 端获取c、map 端发送到中间管理节点，reduce 统一获取d、随机发送“”“”at the end, xiao bian gives you a passage. minand once said, people who learn to learn are very happy people. in every wonderful life, learning is an eternal theme. as a professional clerical and teaching position, i understand the importance of continuous learning, life is diligent, nothing can be gained, only continuous learning can achieve better self. only by constantly learning and mastering the latest relevant