Hadoop大数据性能测试总结报告.docx
《Hadoop大数据性能测试总结报告.docx》由会员分享，可在线阅读，更多相关《Hadoop大数据性能测试总结报告.docx（31页珍藏版）》请在冰豆网上搜索。
Hadoop大数据性能测试总结报告
Hadoop大数据
性能测试总结报告
CurrentVersion:
V0.1
Owner:
DateCreated:
2015-08-03
DateLastUpdated:
2015-08-03
LastUpdatedBy:
Author:
黄双雄
ReviewedBy:
ApprovedBy:
版本信息
版本号
修订日
修订者
审核者
描述
0.1
2015.08.03
黄双雄
压力测试报告初稿
1.概述3
1.1性能测试背景3
1.2性能测试目标3
1.3性能测试范围3
1.4硬件配置3
2.性能测试结果4
2.1.单交易基准测试4
2.2峰值测试结果7
2.3测试结果10
1.概述
1.1性能测试背景
1.2性能测试目标
验证hadoop和本地数据的列表的读取速度和文件下载速递的优劣性
1.3性能测试范围
本次性能测试需要获得的性能指标如下所列：
1.列表的读取速度
2.打开图片（文件的下载速递）
1.4硬件配置
硬件配置：
XEON8核1.87G8G内存550G硬盘
2•性能测试结果
2.1.单交易基准测试
用户运行动态:
Legenl
4X
Run
▼iGr^pfiMinrnum|GiaphiGrohM^wnum菁
GraphMedan▼[GiapbiSWDeviser■
]o
4Q5
100
62[12,67
场景名称
业务
运行时间
Think
Time
平均响应时间（S）
用户数
目的
基准测
试
打开列表
20min
3
0.006
100
验证单一交易的性能，作为其它测试类别结果的参考
打开图片
20min
3
0.057
100
如上图：
每秒增加3个用户，持续加到100，以100个用户开始运行，持续20分钟
每秒点击数:
34}
22
3«
36
秒。
带宽使用情况:
Throughput
DOM01.DO0Z0003„0004.DOQS.ODDft.DO07.00D8J0OSiMl10.001tD012_Cffl13.00M.001S.M1S.00117:
001S.OO1^0020:
00
Elapsedscenarcolimemm.ss
M.000,000
4S.QOO.DOO-46.000.00044.000.000；4^000,000\«.000,000I3S-Q00.D00]36.000.003^9OOG.OOO\S_000,000]^,000.000\^000.000^
盘000,0001^LOOQ,OOO^20.000.000^18.mQO0^馆』go込14.000.000^12.000,000」
10.000.000n8-000.000J
Legend
良旳日用*|GaphMawwm审|曲妙辰左"[▼|G咱phMd.DeMi3od・||
如上图：
随着时间的增加，每秒点击数在不断变化，但趋于平稳，平均约为
47次每秒，最高可达49.5次每
47411
48563
▼Heaguffefnent
审」由咄|窗别仙"
SiaMitryR*>wtHfliMiing¥m«rtKitsp«rSee^adTrfen&telivh盘¥■!
■■（；・Trunsn^^Tiie®
00.00Dl:
0002:
0003:
W04:
0005306.OD07:
MM.Q009.W10:
0011J012M13:
0014.00I5.G0W.0Q17JDlfi.0419.0020JD
Eldredscenanalimemmrss
HitsperSecond
|Hitsp-srSecond.
Tbrira^aipixl
|Tr«ns«ctii^nS^rnnftry
Tr^dx-sl"'"Rtt百foivx®Tim«|
呂unmKTFRvpoTt|Runnin.（：
Vusrirt
~7
T—F
/
/
jr
—*—-_•--■—
「*■■»
-■—*
—■•—
■.——
"■一A-•—■
—A—.
i
r
I
.
!
1
f
I
丨…■1
Lt^indl
|Me-asuremenf
〒旧曲制hnimunn
▼[舀vgrapg
GraphMamvum〒
GF^g-hMecian
T]Graph$ldDeviatipr▼|
「Thiowi力put
&47493575
35559965747
4931E322
3BJZ3S95625「
531591R^1B
"rF玉叫**埜1苜％"[亀rs
平均事物响应时间:
HuTiTiin-C：
Vusi-FlI
HitsS*c^nd
Thrcuchp-ut|
TruqxlctionSumrvary
SiviniHrj"R-iport
0.065-
006：
0Q5S
AverageTransactionResponseTime
0叱
0Q4S-1
004-
0D込
003
OQ2S-!
002-
0015^
001
ri・ei・er■in■h・・■・・・■a
DD.&ODIMDZOD03_M04.00OS-0ODfi.DO07:
DODBJ00&-0010.0011.0012_001X0014JOIS.Ofl1B.D017.0018.M19.0020.00
Elapsedscenariolim吃mm:
ss
（SPLI曰冨邑3E匚mMeDckOLIQl8需」加$
it密
±予
ScA*
Meawr-emwi3
5iaph'*Min；▼IGiaph'sAve,T.IGuphJs
GfiSph'sMec^.
6t»h-s&tdI-
Average
1
tJffS片
0.054
0057
0.065
0,057
1002
iQ'05?
0.006
0.00G
0.007
0QK
0
QjOOG
如上图，随着时间的推移，响应时间开始稳定，个别事物有小幅度波动，但总体趋于稳定
事物概要说明:
Lt輕前
F临咆塔苞11去T?
|理|囁§■U
0-
|=|Cal>ISci.'r.
Mwsweirieiii
ZEr
Pits
如上图，事物数全部为Pass,0Fail,说明系统的处理能力较强。
每秒事物数：
测试结论：
如测试结果所示以100个用户进行单交易基准测试，事务（打开列表、打开图片）平均响应时间均小于2S,
每秒点击数及每秒事物数较高，事物成功率100%无网络瓶颈且服务器硬件监控性能表现良好，硬件平台的
支持满足要求，系统基准测试达标。
2.2峰值测试结果
场景名称
业务
业务比重
运行时间
Think
Time
并发数
目的
负载测试
打开列表
50%
20min
3
3000
检测系统业务性能
打开图片
50%
20min
3
3000
用户运行动态:
2430
32-30:
2COOi
fl&00：
1fe）Q-
H啊0-
1MO-toooJ
帥L
EM:
230-
广
«
J
J
r
J
r
J
r
r
RunningVusers
00:
0001:
00&2:
0003:
00H:
00ft£:
00MtM97^0Md»t»M1t>:
M11:
M12:
0013:
M14:
0015:
0016:
0517:
0&IS:
OG19:
0G20:
0021:
0022:
0023:
002^:
0025:
0026:
0027:
002&:
002MC
1F唸哼“
a遍11空P1]£8
;m
|莊--s«>
|Gr6phMiFlimijm
〒金9i曲Average
[GriohManmjm
*Gf®phFiledian审
Grt讨iStdDeviaiiOrtL*
Lut1
|Rn*i!
Q
[1233=05
2500
|1365
793-9M
Elaps-Bd与匚Enariotimemm.ss
如上图，以2500个用户开始运行，每隔1秒增加5个用户，运行20分钟
每秒点击数:
PUDF⑷」md^x
HitsperSecond
25.00
00
1QJ>0T5：
K20:
M
Elapsedscensnolimemm：
ss：
p1M&asuement
*iGraptiMinnium
'l^veiao?
Grai^M-amym
*|Gr^phMedan
・|Graph$：
dDeviser•
［恤
37.5
1S3.694
15675
23157
Legend罕X|
如上图：
随着时间的增加，每秒点击数在不断变化，但趋于平稳，平均约为
154次每秒，最高可达182
次每秒
带宽使用:
Throughput
120,0W.0W^n^ow.ooo^110.000.000：
lOS.MW.CHOfl'fIN.OW.CKHh^55.000,000^
臥MhOOG\毎QOOQE聲000如^000,000*
斂OWKCKMh».QW,Q0&^
^O.OW.OOG135.0W.0W；
2S.tm.QOG；20,0m,™
J_：
L
20.00
1S:
0Q
Elaps&dscenanclimemm.ss
LeginJ
¥X
|F嘘
缶暹■]哑]F■■
|s«EI
MeasurEfnerit
■t|Graphtdrinnunn
|工||住眄专ge
GraphMawnumO
G■寺由hUcfen
t|GraphStdD品ahz＜「章|]
Thxwghput
13390332.186
115288053.®3-
1233-i2&43
1-7-7-'Tin
）1000881.377
2S:
DO
如上图，最高带宽峰值是120000000B，已超过100M/S的局域网传输速率上线，所以已达到峰值
事物概耍说明:
Trams^icijoriSuimnarv
就他“巧.皿mM.DO&
B5.AQ0-
&{|.{10&-
75.000-TQ.QOQi-fiS.OOGw.roo-55.-OOG-
45.TOD-ifl.DO&
JS.OOO-
30.1300■
25.™'
JOQAiim-iorcm
5,000■
BS
0x
F昭嗚•诵|匍1工］畔］一禺Lb
打开冏片
]Sea*
Measuremenl
回
rz
F&
1
P曲
如上图，在峰值测试的情况下事物几乎为全部为
Pass,11个Fail,说明系统的处理能力已结达到峰值
平均事物响应时间:
Elapsedscen^nctimemmgs
1胡除
uk|
鞘气◎毬,1缶为|1|關
%吾圉
■llCrfZlState
仃〔|hTwiTErri
Giph旨Wii回
Graph5Ave审|Graph'sM®cT
Mk[*]
GraphsStd.|畑計3庐
打幵囹片
15«7
19.97J
M279
S.lffi
16.01
进入列査
0M5
3.003
11.8M
11113
jaw
&14
如上图，随着时间的推移，响应时间开始稳定，个别事物有较大幅度波动，但总体趋于稳定
测试结论:
以2500个用户开始运行，每隔1秒增加5个用户由测试结果中的图显示在并发用户数约为2500用户
2500时，系统已达到峰值
时，系统事物已有失败的事物出现，且带宽已到峰值，所以由此推断当用户到
2.3测试结果
hadoop
500用户
800用户
1000用户
1500用户
2500用户
查看列表
0.029
1.512
1.886
3.965
9.14
打开图片
3.055
5.494
8.118
11
16.01
本地
查看列表
0.029
1.437
1.961
3.945
8.968
打开图片
3.124
5.830
8.319
1
1.005
16.26
事物响应时间:
500用户（hadoop）
孟puna血皀ME-』wcoUDd強0>[r
-»
00:
0001:
0002：
DO03：
0DtM.OO05：
DO>D€：
ODD7DflQ@：
DDH：
001DQ011：
DD12M13：
[M14:
0015.M16：
DQ117:
001BOO19：
0d20:
0021：
D0
Elapsedscenariotimemm:
53
唱临唯口理I曰-1aj叩過吗眉
x|Cd■|Scale■
r^eaBUBment
■Graph'aMm▼
GraphsAve
F|Graph'sMas■
Graph's-Mk★
GraphbStd.-
”［平均倍
1
打开图片
OW
2.918
I3.5D5
3237
D.測
3.055
0-007
D.Q28
|o.D9S
0.025
D.01&
0029
CPU
CPU：
User%
Sys%
¥ait%
Idle%
CPU%
Avg
26,5
16.4
0.0
57.1
42.9
Max
42.3
23,1
1.5
99.0
63,6
MaK:
Avg
1.6
1,4
44.7
1*7
1+5
硬盘读写
•Atb.
4000
DisktotalKB/scentosl-2015/7/31
3000
KD0
L50O
LOGO
3M）
u»g口旨号潜2sso®a疽:
g“直3-sE-g90目so直sss-s巨官g“Kiss0^0割目sss-9
■MDisk*ti怙KR4■區曲Era]ffl/c——W/fac■
500用户（本地）
2.5i
2.4-2
&
1.6-
1.E-
心
1.2^
眄
D.4-：
AverageTransactionResponseTime
ax|
|T5临*
t«
}丨H|画F■■
00:
0001041DZ.flO03：
DD04MD5：
0D06（Ml07-Dd05：
DDHUO10:
0011[HlIZ.K13：
DDH^015:
00WD41I7：
OD1S：
DD2<]：
0D21M
Elapsedscenariotimemm:
33
Measugnierl杠开图片
w
Graph'sMm»
GraphbAw®■
jijfaph!
3Max^[Graph'sMet▼prap^BSid.■
|Average
D?
D38
3.454
13.337
10.972
1124
D.D05
0.Q2C
007
|o.（H7
|o.oi
0029
CPU:
UserX
Sys%
Wait%
Idle%
CPU%
Avg
11.5
12,7
0.1
75,7
24,2
Max
15,5
18,S
3.8
99,1
33,3
Max:
Avg
1.3
1.5
40.S
1.,3
1.电
D（$ktotalKB/$cerrfosl-2015/7/31
DiikiCB/s«■■■OisklArriteKB^sfD/sec
4W=
35OD-
3OM>-
-354
25W-
15Wlow
5至列'IOAm'扁2?
ifi：
10.7
.2541
■100
@w
@I口
吿i口
ip
RrfiD
戈口
LD
T二口
醫TCi
sEd
S3
@占口
ISIUJ一一QsitJCIdMact:
$B!
w-d><
X
a-
■
■
:
N：
=
F
"11
■4
■a
¥
、
I
3
z
k
p
„«■
f
二
盘
Graph'sMee呼
lH
a
1
更
g
TTE
k
a
rl
Wl
s
1-
苕
o
邕
o
►
T
&窖s
fr
u
3
L
L
is
0
g
Vco
in
m
g
V
1~~1
co
cog
o
挤
cn
g
■'i~~i
i-^o
LD
00
g
»i~iA
i-H
4
1-^
9
話
g
■'
■i
in
c4
■ex]
o
寸
co
□0
>-=d
X
0s
S?
■88
-SS
SS
00E
叫
at
DP
at
EJ3
ar
EO
9T
E0
at
EC
gi
i£i
ar
i£i
ar
£0
ar
9T
SO
si
站9TbDSTbDST
EO9T
EO'91
ZD：
fll
Z0：
9TTOSTtoar
D0-9[
00-91貂丄[昭Mesit
BS-2Tisrc
H
il
21
Lt
H
il
PC
Lt
Lt
H
■'I
MAt5*訂5*if解山b*AT
AverageTransactionResponseTime
S9i
a乂
|T5|T|U|[
旦IF■I!
l|Cd”
EcaleTllMeasunsnieft丘
GraphtMri▼
Sraph'sAv
升级会员 