Hadoop题库共2页.docx
《Hadoop题库共2页.docx》由会员分享,可在线阅读,更多相关《Hadoop题库共2页.docx(18页珍藏版)》请在冰豆网上搜索。
![Hadoop题库共2页.docx](https://file1.bdocx.com/fileroot1/2023-1/22/9b81113b-6b84-4e25-92d9-db17e0b0a346/9b81113b-6b84-4e25-92d9-db17e0b0a3461.gif)
Hadoop题库共2页
1.以下哪一项不属于Hadoop可以运行的模式—C—。
A.单机(本地)模式
B.伪分布式模式
C互联模式
D.分布式模式
2.Hadoop的作者是下面哪一位__B。
A.MartinFowler
B.Dougcutting
C.KentBeck
D.GraceHopper
3.下列哪个程序通常与NameNode在同一个节点启动_D___。
A.TaskTracker
B.DataNode
C.SecondaryNameNode
D.Jobtracker
4.HDFS默认BlockSize的大小是___B___。
A.32MB
B.64MB
C.128MB
D.256M
B.网络
C磁盘IO
D.内存
C_。
6.下列关于MapReduce说法不正确的是
A.MapReduce是一种计算框架
B.MapReduce来源于google的学术论文
C.MapReduce程序只能用java语言编写
D.MapReduce隐藏了并行计算的细节,方便使用
少次读
少次读
多次读
多次读
8.HDF淀基于流数据模式访问和处理超大文件的需求而开发的,具有高容错、高可靠性、高可扩展性、高吞吐率等特征,适合的读写任务是__D。
A.—次写入,
B.多次写入,
C.多次写入,
D.—次写入,
9.HBase依靠A存储底层数据。
A.HDFS
B.Hadoop
C.Memory
D.MapReduce
10.HBase依赖—D___提供强大的计算能力。
A.Zookeeper
B.Chubby
C.RPC
D.MapReduce
11.HBase依赖A提供消息通信机制
A.Zookeeper
B.Chubby
C.RPC
D.Socket
12.下面与HDFS类似的框架是—C?
A.NTFS
B.FAT32
C.GFS
D.EXT313.关于SecondaryNameNode下面哪项是正确的C_。
A.它是NameNode的热备
B.它对内存没有要求
NameNode启动时间
C它的目的是帮助NameNode合并编辑日志,减少
D.
D___。
SecondaryNameNode应与NameNode部署到一个节点
14.大数据的特点不包括下面哪一项
A•巨大的数据量
B.多结构化数据
C增长速度快
D.价值密度高
HBase测试题
1.HBase来源于哪一项?
C
ATheGoogleFileSystem
BMapReduce
CBigTable
DChubby
B、C、D
2.下面对HBase的描述哪些是正确的?
A不是开源的
B是面向列的
C是分布式的
D是一种NoSQL数据库
3.HBase依靠()
AHDFS
存储底层数据A
BHadoop
CMemory
DMapReduce
8.下面与Zookeeper类似的框架是?
D
AProtobuf
BJava
CKafka
DChubby9.下面与HDFS类似的框架是?
C
ANTFS
BFAT32
CGFS
DEXT3
10.下面哪些概念是HBase框架中使用的?
A、C
AHDFS
BGridFS
CZookeeper
DEXT3
第二部分:
HBase核心知识点
11.LSM含义是?
A
A日志结构合并树
B二叉树
C平衡二叉树
D基于日志结构的合并树12.下面对LSM结构描述正确的是?
A顺序存储
B直接写硬盘
C需要将数据Flush到磁盘
D是一种搜索平衡树13.LSM更能保证哪种操作的性能?
A读
B写
C随机读
D合并14.LSM的读操作和写操作是独立的?
A是。
B否。
CLSM并不区分读和写
DLSM中读写是同一种操作15.LSM结构的数据首先存储在()
A硬盘上
B内存中
C磁盘阵列中
D闪存中
16HFile数据格式中的Data字段用于()。
A
A存储实际的KeyValue数据
B存储数据的起点
C旨定字段的长度
D存储数据块的起点
17HFile数据格式中的MetaIndex字段用于()。
D
AMeta块的长度
BMeta块的结束点
CMeta块数据内容
DMeta块的起始点18HFile数据格式中的Magic字段用于()。
A
A存储随机数,防止数据损坏
B存储数据的起点
C存储数据块的起点
D指定字段的长度
D有固定的结构
A
拥
20HFile数据格式中的KeyValuf数据格式芮悩』部分是()。
C有复杂结构的字符串
B字符串
C二进制数据■
D压缩数据
第三部分:
HBase高级应用介绍
31HBase中的批量加载底层使用()实现。
A
AMapReduce
BHive
CCoprocessor
DBloomFilter
A、B、CD
32.HBase性能优化包含下面的哪些选项?
A读优化
B写优化
C配置优化
DJVM优化
33.Rowkey设计的原则,下列哪些选项的描述是正确的?
A尽量保证越短越好
B可以使用汉字
C可以使用字符串
D本身是无序的
A、B、C
34.HBase构建二级索引的实现方式有哪些?
AMapReduce
BCoprocessor
CBloomFilter
A、B
DFilter
35.关于HBase二级索引的描述,哪些是正确的?
A核心是倒排表
B二级索引概念是对应Rowkey这个一级”索引
C二级索引使用平衡二叉树
D二级索引使用LSM结构
A、B
36.下列关于BloomFilter的描述正确的是?
A、
A是一个很长的二进制向量和一系列随机映射函数
B没有误算率
C有一定的误算率
D可以在BloomFilter中删除元素
第四部分:
HBase安装、部署、启动
37.HBase官方版本可以安装在什么操作系统上?
ACentOS
BUbuntu
A、B、C
CRedHat
DWindows
38.HBase虚拟分布式模式需要()个节点?
A1
B2
C3
D最少3个
39.HBase分布式模式最好需要()个节点?
A1
B2
C3
D最少
关于hadoop的选择题
1、DougCutting所创立的项目的名称都受到其家人的启发,以下项目不是由他创立的项目是
Hadoop
Nutch
Lucene
Solr
A.
B.
C.
D.
答案:
D
2、
A.
B.
C.
D.答案:
B知识点:
hadoop配置
配置Hadoop时,JAVA_HOME包含在哪一个配置文件中
hadoop-default.xmlhadoop-env.shhadoop-site.xmlconfiguration.xsl
conf-site.xmlmapred-site.xmlcore-site.xmlhdfs-site.xml
3、Hadoop配置文件中,hadoop-site.xml显示覆盖hadoop-default.xml里的内容。
在版本0.20中,hadoop-site.xml被分离成三个XML文件,不包括A.
B.
C.
D.
答案:
A
知识点:
hadoop配置
4、HDFS默认的当前工作目录是/user/$USER,fs.default.name的值需要在哪个配置文件内说明
A.mapred-site.xml
B.core-site.xml
C.hdfs-site.xml
D.以上均不是
答案:
B
知识点:
hadoop配置
5、关于Hadoop单机模式和伪分布式模式的说法,正确的是
A.两者都起守护进程,且守护进程运行在一台机器上
B.单机模式不使用HDFS,但加载守护进程
C.两者都不与守护进程交互,避免复杂性
D.后者比前者增加了HDFS输入输出以及可检查内存使用情况
答案:
D
知识点:
hadoop配置
6、下列关于HadoopAPI的说法错误的是
A.
B.
C.
D.
Hadoop的文件API不是通用的,只用于HDFS文件系统
Configuration类的默认实例化方法是以HDFS系统的资源配置为基础的FileStatus对象存储文件和目录的元数据
FSDataInputStream是java.io.DatalnputStream的子类答案:
A//HDFS
7、HDFS的NameNode负责管理文件系统的命名空间,将所有的文件和文件夹的元数据保存在一个文件系统树中,这些信息也会在硬盘上保存成以下文件:
A.日志
B.命名空间镜像
C.两者都是
答案:
C
知识点:
8、HDFS的namenode保存了一个文件包括哪些数据块,分布在哪些数据节点上,这些信息也存储在硬盘上。
A.正确
B.错误
答案:
B
知识点:
在系统启动的时候从数据节点收集而成的
9、Secondarynamenode就是namenode出现问题时的备用节点
A.正确
B.错误
答案:
B
知识点:
它和元数据节点负责不同的事情。
其主要功能就是周期性将元数据节点的命名空间镜像文件和修改日志合并,以防日志文件过大。
合并过后的命名空间镜像文件也在Secondarynamenode保存了一份,以防namenode失败的时候,可以恢复。
10、出现在datanode的VERSION文件格式中但不出现在namenode的VERSION文件格式中的是
namespaceIDstorageIDstorageTypelayoutVersion
A.
B.
C.
D.
答案:
B
个负整数,保存了HDFS的持namespaceID是文件系统的唯一标识storageType表示此文件夹中保存的
知识点:
其他三项是公有的。
layoutVersion是续化在硬盘上的数据结构的格式版本号;符,是在文件系统初次格式化时生成的;是数据节点的类型
返回部分datanode信息,谁负责将文件划分为多个Block,根据DataNode的地址信息,按顺序写入到每一个DataNode块
Client
Namenode
Datanode
Secondarynamenode
A.
B.
C.
D.
答案:
A
知识点:
HDFS文件写入
少次读写少次读写多次读写多次读写
12、HDFS的是基于流数据模式访问和处理超大文件的需求而开发的,默认的最基本的存储单位是64M,具有高容错、高可靠性、高可扩展性、高吞吐率等特征,适合的读写任务是
A.一次写入,B.多次写入,C•一次写入,
D.多次写入,
答案:
C
知识点:
HDFS特性
13、HDFS无法高效存储大量小文件,想让它能处理好小文件,比较可行的改进策略不包括
A.利用SequenceFile、MapFile、Har等方式归档小文件
B.多Master设计
C.Block大小适当调小
D.调大namenode内存或将文件系统元数据存到硬盘里
答案:
D
14、关于HDFS的文件写入,正确的是
A
B
C
D
知识点:
HDFS特性
.支持多用户对同一文件的写操作
.用户可以在文件任意位置进行修改.默认将文件块复制成三份存放
.复制的文件块默认都存在同一机架上
答案:
C
知识点:
在HDFS的一个文件中只有一个写入者,而且写操作只能在文件末尾完成,即只能执行追加操作。
默认三份文件块两块在同一机架上,另一份存放在其他机架上。
15、Hadoopfs中的-get和-put命令操作对象是
A.文件
B.目录
C.两者都是
答案:
C
知识点:
HDFS命令
16、Namenode在启动时自动进入安全模式,在安全模式阶段,说法错误的是
A.安全模式目的是在系统启动时检查各个DataNode上数据块的有效性
B.根据策略对数据块进行必要的复制或删除
C.当数据块最小百分比数满足的最小副本数条件时,会自动退出安全模式
D.文件系统允许有修改
答案:
D
知识点:
HDFS安全模式
//MapReduce
17、MapReduce框架提供了一种序列化键/值对的方法,支持这种序列化的类能够在Map和Reduce过程中充当键或值,以下说法错误的是
A.实现Writable接口的类是值
B.实现WritableComparablevT>接口的类可以是值或键
C.HadooP的基本类型Text并不实现WritableComparablevT>接口
D.键和值的数据类型可以超出HadooP自身支持的基本类型
答案:
C18、以下四个Hadoop预定义的Mapper实现类的描述错误的是
IdentityMapper实现Mapper,将输入直接映射到输出
A.
InverseMapper实现Mapper,反转键/值对
RegexMapper实现Mapper,为每个常
B.
C.规表达式的匹配项生成一个(match,1)对
D.TokenCountMapper实现Mapper,当输入的值为分词时,生成(taken,1)对
答案:
B
知识点:
InverseMapper实现Mapper19、下列关于HDFS为存储MapReduce并行切分和处理的数据做的设计,错误的是
A.FSDataInputStream扩展了DataInputStream以支持随机读
B.为实现细粒度并行,输入分片(InputSplit)应该越小越好
C.一台机器可能被指派从输入文件的任意位置开始处理一个分片
D.输入分片是一种记录的逻辑划分,而HDFS数据块是对输入数据的物理分
割
答案:
B知识点:
每个分片不能太小,否则启动与停止各个分片处理所需的开销将占很大一部分执行时间
20、针对每行数据内容为”TimestampUrl的数据文件,在用JobConf对象conf设置conf.setInputFormat(WhichInputFormat.class)来读取这个文件时,WhichInputFormat应该为以下的
A.TextInputFormat
B.KeyValueTextInputFormat
C.SequenceFileInputFormat
D.NLineInputFormat
答案:
B
知识点:
四项主要的InputFormat类。
KeyValueTextlnputFormat以每行第一个分隔符为界,分隔符前为key,之后为value,默认制表符为\t
21、有关MapReduce的输入输出,说法错误的是
A.链接多个MapReduce作业时,序列文件是首选格式
B.FileInputFormat中实现的getSplits()可以把输入数据划分为分片,分片数目和大小任意定义
C.想完全禁止输出,可以使用NullOutputFormat
D.每个reduce需将它的输出写入自己的文件中,输出无需分片答案:
B
知识点:
分片数目在numSplits中限定,分片大小必须大于mapred.min.size个字节,但小于文件系统的块
22、HadoopStreaming支持脚本语言编写简单MapReduce程序,以下是一个例子:
bin/hadoopjarcontrib/streaming/hadoop-0.20-streaming.jar
—inputinput/filename
—outputoutput
—mapper‘dosth.py5'
—filedosth.py
—Dmapred.reduce.tasks=1
23、以下说法不正确的是
HadoopStreaming使用Unix中的流与程序交互
HadoopStreaming允许我们使用任何可执行脚本语言处理数据流
采用脚本语言时必须遵从UNIX的标准输入STDIN,并输出到STDOUT
Reduce没有设定,上述命令运行会出现问题
A.
B.
C.
D.
答案:
D
知识点:
没有设定特殊的reducer,默认使用IdentityReducer
24、在高阶数据处理中,往往无法把整个流程写在单个MapReduce作业中,下
列关于链接MapReduce作业的说法,不正确的是
A.Job和JobControl类可以管理非线性作业之间的依赖
B.ChainMapper和ChainReducer类可以用来简化数据预处理和后处理的构成
C.使用ChainReducer时,每个mapper和reducer对象都有一个本地JobConf对象
D.ChainReducer.addMapper()方法中,一般对键/值对发送设置成值传递,性能好且安全性高
答案:
D
知识点:
ChainReducer.addMapper()方法中,值传递安全性高,引用传递性能高
25、下面哪个程序负责HDFS数据存储。
答案Cdatanode
a)NameNode
b)Jobtracker
c)Datanode
d)secondaryNameNode
e)tasktracker
26.HDfS中的block默认保存几份?
答案A默认3分
a)3份
b)2份
c)1份
d)不确定
27.下列哪个程序通常与NameNode在一个节点启动?
答案D
a)SecondaryNameNode
b)DataNode
c)TaskTracker
d)Jobtracker
28.Hadoop作者答案CDougcutting
a)MartinFowler
b)KentBeck
c)Dougcutting
29.HDFS默认BlockSize答案:
B
a)32MB
b)64MB
c)128MB
30、下列哪项通常是集群的最主要瓶颈:
答案:
C磁盘
a)CPU
b)网络
C)磁盘10
d)内存31.关于SecondaryNameNode哪项是正确的?
答案C
a)它是NameNode的热备
b)它对内存没有要求
C)它的目的是帮助NameNode合并编辑日志,减少NameNode启动时间
d)SecondaryNameNode应与NameNode部署到一个节点。
多选题:
1.下列哪项可以作为集群的管理?
答案:
ABD
a)Puppet
b)Pdsh
C)ClouderaManagerd)Zookeeper
2.配置机架感知的下面哪项正确:
答案ABC
a)如果一个机架出问题,不会影响数据读写
b)写入数据的时候会写到不同机架的DataNode中
C)MapReduCe会根据机架获取离自己比较近的网络数据
3.Client端上传文件的时候下列哪项正确?
答案B
a)数据经过NameNode传递给DataNode
b)Client端将文件切分为Block,依次上传
C)Client只上传数据到一台DataNode,然后由NameNode负责BloCk复制工作
4.下列哪个是Hadoop运行的模式:
答案ABC
a)单机版
b)伪分布式
C)分布式5.Cloudera提供哪几种安装CDH的方法?
答案:
ABCD
a)Clouderamanager
b)Tarball
C)Yum
d)Rpm
判断题:
1.Ganglia不仅可以进行监控,也可以进行告警。
(正确)
2.BloCkSize是不可以修改的。
(错误)
3.Nagios不可以监控Hadoop集群,因为它不提供Hadoop支持。
(错误)
4.如果NameNode意外终止,SeCondaryNameNode会接替它使集群继续工作。
(错误)
5.ClouderaCDH是需要付费使用的。
(错误)
6.Hadoop是Java开发的,所以MapReduce只支持Java语言编写。
(错误
)
7.Hadoop支持数据的随机读写。
(错)
8.NameNode负责管理metadata,client端每次读写请求,它都会从磁盘中读取或则会写入metadata信息并反馈client端。
(错误)
9.Hadoop自身具有严格的权限管理和安全措施保障集群正常运行。
(错误)
10.Slave节点要存储数据,所以它的磁盘越大越好。
(错误)
11.hadoopdfsadmin-eport命令用于检测HDFS损坏块。
(错误)
12.Hadoop默认调度器策略为FIFO(正确)
13.集群内每个节点都应该配RAID,这样避免单磁盘损坏,影响整个节点运行。
(错误)
14.因为HDFS有多个副本,所以NameNode是不存在单点问题的。
(错误)
15.每个map槽就是一个线程。
(错误)
16.Mapreduce的inputsplit就是一个block。
(错误)
17.DataNode首次加入cluster的时候,如果log中报告不兼容文件版本,那需要NameNode执行“Hadoopnamenode-format”操作格式化磁盘。
(错误)
18.NameNode的WebUI端口是50030,它通过jetty启动的Web服务。
(错
误)
19.Hadoop环境变量中的HADOOP_HEAPSIZE用于设置所有Hadoop守护线程的内存。
它默认是200GB。
(错误)