Hadoop试题试题库.docx

1、Hadoop试题试题库1.以下哪一项不属于 Hadoop 可以运行的模式 _C_。A.单机（本地）模式B.伪分布式模式C.互联模式D.分布式模式2.Hadoop 的作者是下面哪一位 _B 。A.Martin FowlerB.Doug cuttingC.Kent BeckD.Grace Hopper3.下列哪个程序通常与 NameNode 在同一个节点启动 _D_。A.TaskTrackerB.DataNodeC.SecondaryNameNodeD.Jobtracker4.HDFS 默认 Block Size 的大小是 _B_。A.32MBB.64MBC.128MBD.256M5.下列哪项通常

2、是集群的最主要瓶颈 C_。A.CPUB.网络C.磁盘 IOD.内存6.下列关于 MapReduce说法不正确的是 C_。A.MapReduce 是一种计算框架B.MapReduce 来源于 google 的学术论文C.MapReduce 程序只能用 java 语言编写D.MapReduce 隐藏了并行计算的细节，方便使用8.HDFS 是基于流数据模式访问和处理超大文件的需求而开发的，具有高容错、高可靠性、 高可扩展性、高吞吐率等特征，适合的读写任务是 _D 。A一次写入，少次读B多次写入，少次读C多次写入，多次读D一次写入，多次读9.HBase 依靠 _A 存储底层数据。A.HDFSB.Had

3、oopC.MemoryD.MapReduce10.HBase 依赖 _D_提供强大的计算能力。A.ZookeeperB.ChubbyC.RPCD.MapReduce11.HBase 依赖 _A_提供消息通信机制A.ZookeeperB.ChubbyC.RPCD.Socket12.下面与 HDFS类似的框架是 _C ？A.NTFSB.FAT32C.GFSD.EXT313.关于 SecondaryNameNode 下面哪项是正确的 _C_。A.它是 NameNode 的热备B.它对内存没有要求C.它的目的是帮助 NameNode 合并编辑日志，减少 NameNode 启动时间D.Secondary

4、NameNode 应与 NameNode 部署到一个节点14.大数据的特点不包括下面哪一项 _D_。A.巨大的数据量B.多结构化数据C.增长速度快D.价值密度高HBase测试题1.HBase 来源于哪一项？ CA The Google File SystemB MapReduceC BigTableD Chubby2.下面对 HBase的描述哪些是正确的？ B 、C、DA 不是开源的B 是面向列的C 是分布式的D 是一种 NoSQL数据库3.HBase 依靠（）存储底层数据 AA HDFSB HadoopC MemoryD MapReduce4.HBase 依赖（）提供消息通信机制 AA Zo

5、okeeperB ChubbyC RPCD Socket5.HBase 依赖（）提供强大的计算能力 DA ZookeeperB ChubbyC RPCD MapReduce6.MapReduce 与 HBase的关系，哪些描述是正确的？ B 、CA 两者不可或缺， MapReduce是 HBase 可以正常运行的保证B 两者不是强关联关系，没有 MapReduce， HBase可以正常运行C MapReduce 可以直接访问 HBaseD 它们之间没有任何关系7.下面哪些选项正确描述了 HBase 的特性？ A、 B、C、DA 高可靠性B 高性能C 面向列D可伸缩8.下面与 Zookeeper

6、 类似的框架是？ DA ProtobufB JavaC KafkaD Chubby9.下面与 HDFS类似的框架是？ CA NTFSB FAT32C GFSD EXT310.下面哪些概念是 HBase 框架中使用的？ A、CA HDFSB GridFSC ZookeeperD EXT3第二部分： HBase 核心知识点11.LSM 含义是？ AA 日志结构合并树B 二叉树C 平衡二叉树D 基于日志结构的合并树12.下面对 LSM结构描述正确的是？ A 、CA 顺序存储B 直接写硬盘C 需要将数据 Flush 到磁盘D 是一种搜索平衡树13.LSM 更能保证哪种操作的性能？ BA 读B 写C 随

7、机读D 合并14.LSM 的读操作和写操作是独立的？ AA 是。B 否。C LSM 并不区分读和写D LSM 中读写是同一种操作15.LSM 结构的数据首先存储在（） 。 BA 硬盘上B 内存中C 磁盘阵列中D 闪存中16HFile 数据格式中的 Data 字段用于（） 。AA 存储实际的 KeyValue 数据B 存储数据的起点C 指定字段的长度D 存储数据块的起点17HFile 数据格式中的 MetaIndex 字段用于（） 。 DA Meta 块的长度B Meta 块的结束点C Meta 块数据内容D Meta 块的起始点18HFile 数据格式中的 Magic 字段用于（） 。AA 存

8、储随机数，防止数据损坏B 存储数据的起点C 存储数据块的起点D 指定字段的长度19 HFile 数据格式中的KeyValue 数据格式，下列选项描述正确的是（） 。 A、 DA 是 byte 数组B 没有固定的结构C 数据的大小是定D 有固定的结构长的20 HFile 数据格式中的 KeyValue 数据格式中 Value 部分是（）。 C A 拥有复杂结构的字符串B 字符串C 二进制数据D 压缩数据 第三部分： HBase 高级应用介绍31 HBase 中的批量加载底层使用（）实现。 AA MapReduceB HiveC CoprocessorD Bloom Filter32.HBase

9、性能优化包含下面的哪些选项？ A、 B、C、D A 读优化B 写优化C 配置优化D JVM 优化33.Rowkey 设计的原则，下列哪些选项的描述是正确的？ A、B、 CA 尽量保证越短越好B 可以使用汉字C 可以使用字符串D 本身是无序的34.HBase 构建二级索引的实现方式有哪些？ A 、BA MapReduceB CoprocessorC Bloom FilterD Filter35.关于 HBase二级索引的描述，哪些是正确的？ A、 BA 核心是倒排表B 二级索引概念是对应 Rowkey 这个“一级”索引C 二级索引使用平衡二叉树D 二级索引使用 LSM结构36.下列关于 Bloo

10、m Filter 的描述正确的是？ A、 CA 是一个很长的二进制向量和一系列随机映射函数B 没有误算率C 有一定的误算率D 可以在 Bloom Filter 中删除元素 第四部分： HBase 安装、部署、启动37.HBase 官方版本可以安装在什么操作系统上？ A、B、C A CentOSB UbuntuC RedHatD Windows38.HBase 虚拟分布式模式需要（）个节点？ A A 1D 最少 3 个39.HBase 分布式模式最好需要（）个节点？ CB 2C 3D 最少关于 hadoop 的选择题1、Doug Cutting 所创立的项目的名称都受到其家人的启发，以下项目不是

11、由他 创立的项目是A HadoopB NutchC LuceneD Solr答案：D2、配置 Hadoop时， JAVA_HOM包E含在哪一个配置文件中A hadoop-default.xmlB hadoop-env.shC hadoop-site.xmlD configuration.xsl 答案：B 知识点： hadoop 配置3、Hadoop配置文件中， hadoop-site.xml 显示覆盖 hadoop-default.xml 里的内 容。在版本 0.20 中， hadoop-site.xml 被分离成三个 XML文件，不包括 A conf-site.xmlB mapred-sit

12、e.xmlC core-site.xmlD hdfs-site.xml 答案：A 知识点： hadoop 配置4、HDFS默认的当前工作目录是 /user/$USER ，fs.default.name 的值需要在哪个 配置文件内说明A.mapred-site.xmlB.core-site.xmlC.hdfs-site.xmlD.以上均不是 答案：B 知识点： hadoop 配置5、关于 Hadoop单机模式和伪分布式模式的说法，正确的是A 两者都起守护进程，且守护进程运行在一台机器上B 单机模式不使用 HDFS，但加载守护进程C 两者都不与守护进程交互，避免复杂性D 后者比前者增加了 HDFS

13、输入输出以及可检查内存使用情况 答案：D知识点： hadoop 配置6、下列关于 Hadoop API 的说法错误的是A Hadoop 的文件 API 不是通用的，只用于 HDFS文件系统B Configuration 类的默认实例化方法是以 HDFS系统的资源配置为基础的C FileStatus 对象存储文件和目录的元数据D FSDataInputStream 是 java.io.DataInputStream 的子类 答案：A/HDFS 7、HDFS的 NameNode负责管理文件系统的命名空间，将所有的文件和文件夹的 元数据保存在一个文件系统树中，这些信息也会在硬盘上保存成以下文件： A

14、日志B命名空间镜像C两者都是答案：C知识点：8、HDFS的 namenode保存了一个文件包括哪些数据块， 分布在哪些数据节点上， 这些信息也存储在硬盘上。A正确B错误答案：B知识点：在系统启动的时候从数据节点收集而成的9、Secondary namenode 就是 namenode出现问题时的备用节点A正确B错误 答案：B 知识点：它和元数据节点负责不同的事情。 其主要功能就是周期性将元数据节点 的命名空间镜像文件和修改日志合并， 以防日志文件过大。 合并过后的命名空间 镜像文件也在 Secondary namenode保存了一份，以防 namenode失败的时候，可 以恢复。10、出现在

15、datanode 的 VERSION文件格式中但不出现在 namenode的 VERSION 文件格式中的是A.namespaceIDB.storageIDC.storageTypeD.layoutVersion 答案：B 知识点：其他三项是公有的。 layoutVersion 是一个负整数，保存了 HDFS的持 续化在硬盘上的数据结构的格式版本号； namespaceID是文件系统的唯一标识符， 是在文件系统初次格式化时生成的； storageType 表示此文件夹中保存的是数据 节点的类型11、Client 在 HDFS上进行文件写入时， namenode根据文件大小和配置情况， 返 回部

16、分 datanode 信息，谁负责将文件划分为多个 Block ，根据 DataNode 的地址 信息，按顺序写入到每一个 DataNode 块A ClientB NamenodeC DatanodeD Secondary namenode答案：A知识点： HDFS文件写入12、HDFS的是基于流数据模式访问和处理超大文件的需求而开发的，默认的最 基本的存储单位是 64M，具有高容错、 高可靠性、高可扩展性、 高吞吐率等特征， 适合的读写任务是A一次写入，少次读写B多次写入，少次读写C一次写入，多次读写D多次写入，多次读写答案：C知识点： HDFS特性13、HDFS无法高效存储大量小文件，想让

17、它能处理好小文件，比较可行的改进 策略不包括A 利用 SequenceFile 、 MapFile 、 Har 等方式归档小文件B 多 Master 设计C Block 大小适当调小D 调大 namenode内存或将文件系统元数据存到硬盘里 答案：D 知识点： HDFS特性14、关于 HDFS的文件写入，正确的是A 支持多用户对同一文件的写操作B 用户可以在文件任意位置进行修改C 默认将文件块复制成三份存放D 复制的文件块默认都存在同一机架上答案：C知识点：在 HDFS的一个文件中只有一个写入者，而且写操作只能在文件末尾完 成，即只能执行追加操作。 默认三份文件块两块在同一机架上， 另一份存放

18、在其 他机架上。15、Hadoop fs 中的 -get 和-put 命令操作对象是A 文件B 目录C 两者都是 答案：C 知识点： HDFS命令16、Namenode在启动时自动进入安全模式，在安全模式阶段，说法错误的是 A 安全模式目的是在系统启动时检查各个 DataNode 上数据块的有效性 B 根据策略对数据块进行必要的复制或删除C 当数据块最小百分比数满足的最小副本数条件时，会自动退出安全模式D 文件系统允许有修改答案：D知识点： HDFS安全模式 /MapReduce17、MapReduce框架提供了一种序列化键 / 值对的方法，支持这种序列化的类能 够在 Map和 Reduce过

19、程中充当键或值，以下说法错误的是A 实现 Writable 接口的类是值B 实现 WritableComparable 接口的类可以是值或键C Hadoop 的基本类型 Text 并不实现 WritableComparable 接口D 键和值的数据类型可以超出 Hadoop自身支持的基本类型 答案：C18、以下四个 Hadoop预定义的 Mapper 实现类的描述错误的是A IdentityMapper 实现 Mapper ，将输入直接映射到输出B InverseMapper 实现 Mapper ，反转键 / 值对C RegexMapper实现 Mapper ，为每个常规表达式的匹配项生成一个

20、 (match, 1) 对D TokenCountMapper实现 Mapper ，当输 入的值为分词时，生成 (taken, 1) 对答案：B知识点： InverseMapper 实现 Mapper19、下列关于 HDFS为存储 MapReduce并行切分和处理的数据做的设计，错误的 是A FSDataInputStream 扩展了 DataInputStream 以支持随机读B 为实现细粒度并行，输入分片 (Input Split) 应该越小越好C 一台机器可能被指派从输入文件的任意位置开始处理一个分片D 输入分片是一种记录的逻辑划分， 而 HDFS数据块是对输入数据的物理分割 答案：B知

21、识点：每个分片不能太小， 否则启动与停止各个分片处理所需的开销将占很大 一部分执行时间20、针对每行数据内容为” Timestamp Url ” 的数据文件， 在用 JobConf 对象 conf 设 置 conf.setInputFormat(WhichInputFormat.class) 来 读 取 这 个 文 件 时 ，WhichInputFormat 应该为以下的A TextInputFormatB KeyValueTextInputFormatC SequenceFileInputFormatD NLineInputFormat 答案：B 知识点：四项主要的 InputFormat

22、类。KeyValueTextInputFormat 以每行第一个 分隔符为界，分隔符前为 key ，之后为 value ，默认制表符为 t21、有关 MapReduce的输入输出，说法错误的是A 链接多个 MapReduce作业时，序列文件是首选格式B FileInputFormat 中实现的 getSplits() 可以把输入数据划分为分片， 分片 数目和大小任意定义C 想完全禁止输出，可以使用 NullOutputFormatD 每个 reduce 需将它的输出写入自己的文件中，输出无需分片 答案：B知识点：分片数目在 numSplits 中限定，分片大小必须大于 mapred.min.s

23、ize 个字节，但小于文件系统的块22、 Hadoop Streaming 支持脚本语言编写简单 MapReduce程序，以下是一个例 子：bin/hadoop jar contrib/streaming/hadoop-0.20-streaming.jar input input/filename output output mapper dosth.py 5 file dosth.py D mapred.reduce.tasks=123、以下说法不正确的是 A Hadoop Streaming 使用 Unix 中的流与程序交互 B Hadoop Streaming 允许我们使用任何可执行脚本

24、语言处理数据流 C 采用脚本语言时必须遵从 UNIX的标准输入 STDIN，并输出到 STDOUT D Reduce 没有设定，上述命令运行会出现问题 答案：D 知识点：没有设定特殊的 reducer ，默认使用 IdentityReducer24、在高阶数据处理中， 往往无法把整个流程写在单个 MapReduce作业中， 下列 关于链接 MapReduce作业的说法，不正确的是AJob 和 JobControl 类可以管理非线性作业之间的依赖 BChainMapper 和 ChainReducer 类可以用来简化数据预处理和后处理的构成 C使用 ChainReducer 时，每个 mappe

25、r 和 reducer 对象都有一个本地 JobConf 对象DChainReducer.addMapper() 方法中，一般对键/ 值对发送设置成值传递， 性能 好且安全性高 答案：D知识点：ChainReducer.addMapper() 方法中， 值传递安全性高， 引用传递性能高25、下面哪个程序负责 HDFS 数据存储。答案 C datanodea)NameNodeb)Jobtrackerc)Datanoded)secondaryNameNodee)tasktracker26.HDfS 中的 block 默认保存几份？ 答案 A默认 3 分a)3 份b)2 份c)1 份d)不确定27.

26、下列哪个程序通常与 NameNode 在一个节点启动？答案 Da)SecondaryNameNodeb)DataNodec)TaskTrackerd)Jobtracker28.Hadoop 作者 答案 C Doug cuttinga)Martin Fowlerb)Kent Beckc)Doug cutting29.HDFS 默认 Block Size 答案： Ba)32MBb)64MBc)128MB30、下列哪项通常是集群的最主要瓶颈：答案： C磁盘a)CPUb)网络c)磁盘 IOd)内存31.关于 SecondaryNameNode 哪项是正确的？答案 Ca)它是 NameNode 的热备b

27、)它对内存没有要求c)它的目的是帮助 NameNode 合并编辑日志，减少 NameNode 启动时间d)SecondaryNameNode 应与 NameNode 部署到一个节点。多选题：1.下列哪项可以作为集群的管理？答案： ABDa)Puppetb)Pdshc)Cloudera Managerd)Zookeeper2.配置机架感知的下面哪项正确：答案 ABCa)如果一个机架出问题，不会影响数据读写b)写入数据的时候会写到不同机架的 DataNode 中c)MapReduce 会根据机架获取离自己比较近的网络数据3.Client 端上传文件的时候下列哪项正确？答案 Ba)数据经过 Name

28、Node 传递给 DataNodeb)Client 端将文件切分为 Block ，依次上传c)Client 只上传数据到一台 DataNode，然后由 NameNode 负责 Block 复制工 作4.下列哪个是 Hadoop 运行的模式：答案 ABCa)单机版b)伪分布式c)分布式5.Cloudera 提供哪几种安装 CDH 的方法？答案： ABCDa)Cloudera managerb)Tarballc)Yumd)Rpm判断题：1.Ganglia 不仅可以进行监控，也可以进行告警。 ( 正确)2.Block Size 是不可以修改的。(错误 )3.Nagios 不可以监控 Hadoop 集

29、群，因为它不提供 Hadoop 支持。(错误 )4.如果 NameNode 意外终止， SecondaryNameNode会 接替它使集群继续工作。 (错误 )5.Cloudera CDH 是需要付费使用的。(错误 )6.Hadoop 是 Java 开发的，所以 MapReduce 只支持 Java 语言编写。( 错误 )7.Hadoop 支持数据的随机读写。 (错 )8.NameNode负 责管理 metadata ，client 端每次读写请求，它都会从磁盘中读取或则会写入 metadata 信息并反馈 client 端。（错误）9.Hadoop 自身具有严格的权限管理和安全措施保障集群正常运行。 （错误 ）10.Slave 节点要存储数据，所以它的磁盘越大越好。 （ 错误）11.hadoop dfsadmin report 命令用于检测 HDFS 损坏块。（错误 ）12.Hadoop 默认调度器策略为 FIFO （正确 ）13.集群内每个节点都应该配 RAID，这样避免单磁盘损坏， 影响整个节点运行。 （错误 ）14.因为 HDFS 有多个副本，所以 NameNode 是不存在单点问题的。 （错误 ）15.每个 m