中国电信LTE网络质量评估测试规范试行稿V1.docx
《中国电信LTE网络质量评估测试规范试行稿V1.docx》由会员分享,可在线阅读,更多相关《中国电信LTE网络质量评估测试规范试行稿V1.docx(37页珍藏版)》请在冰豆网上搜索。
中国电信LTE网络质量评估测试规范试行稿V1
中国电信LTE网络质量评估测试标准
(试行稿)
中国电信集团公司
2014年2月
1.总则
1.1概述
无线网络只有通过实际网络质量的检查测试才能获得真正意义上的网络运行质量信息,才能了解用户对网络质量的真实感受。
通过DT测试和CQT测试在现场模拟用户行为,结合专业测试工具进行分析,是获取无线网络性能、发现无线网络问题的主要方法。
通过与竞争对手网络进行现场测试综合比照,还可以了解中国电信LTE网络与竞争对手网络在网络性能上的差距。
1.2术语定义
DT〔DrivingTest〕测试是使用测试设备沿指定的路线移动,进行不同类型的呼叫,记录测试数据,统计网络测试指标。
CQT〔CallQualityTest〕测试是在特定的地点使用测试设备进行一定规模的拨测,记录测试数据,统计网络测试指标。
1.3测试仪表
网络质量评估通常采用路测仪表进行,其形态包括传统仪表、便携式仪表等;建网初期评估网络基本覆盖时,同时也需要采用扫频仪辅助测试。
测试时所使用的软硬件设备,必须满足中国电信集团相关的仪器仪表标准。
2.城区DT测试方法
本章主要介绍的是以评估网络质量为目的的常规测试方法,评估网络质量应根据测试和优化的目的,选取对应的方法进行测试。
2
2.1测试仪表
〔增加推荐的仪表种类,名称,以及终端的型号〔首选/可选〕,待补充〕
场景
终端要求
电脑要求
仪表要求
长呼
可使用三星N719U
操作系统:
win732位
CPU:
IntelCorei5
内存:
4G
硬盘大小:
500G
支持4/3G互操作控制
短呼
——
支持4/3G互操作控制
锁定测试
——
——
支持锁定制式/频点/小区;支持4/3G互操作控制
2.2城区DT长呼测试
测试目的
通过长呼测试,对网络覆盖质量、保持性能、切换性能、吞吐率进行评估。
1
2
2.1
2.2
测试时间
建网初期可任意时间测试,在LTE正式商用并且用户数量具备一定规模后,建议测试安排在工作日〔周一至周五〕9:
00-19:
00进行。
新疆和西藏的测试时间由于时差延后1个小时。
测试范围
测试范围主要包括:
城区主干道、商业密集区道路〔商业街〕、住宅密集区道路、学院密集区道路、机场路、环城路、沿江两岸、城区内主要桥梁、隧道、城内风景点周边道路等。
要求测试路线尽量均匀覆盖整个城区主要干道和次级街道,并且尽量不重复,在主/次干道已测完的情况下,在工作负荷允许的情况下,建议对重点业务区域所有道路进行遍历测试。
测试速度
在城区应尽量保持正常行驶速度〔30~60公里/小时〕;在城郊快速路车速应尽量保持在60~80公里/小时,高速公路尽量保持在80公里/小时以上,不限制最高车速。
测试步骤
2.2.1.1全采样方式
全采用方式适宜在无流量成本压力,并且网络对大流量测试不敏感时使用。
测试内容:
FTP上传/下载测试,通过上传/下载超大文件,长时间保持FTP业务测试。
测试条件要求:
测试时,保持车窗关闭,将LTE终端、支持LTE测试的路测设备放置在第二排座位中间,连接好GPS;根据测试的要求,仪表设置为“Hybrid”模式。
测试步骤:
(1)确认测试终端已经成功附着网络,并能连接网络发起业务;
(2)利用测试软件中的内置FTP测试功能,从FTPserver上下载一个足够大的文件〔5GB以上〕,设置5线程下载,每个线程独立下载完整文件〔不使用断点续传〕,下载次数设置无限次〔或设置大于测试时间的次数〕,保证行驶期间测试不中断,业务可循环进行;
(3)利用测试软件中的内置FTP测试功能,向FTPserver上传足够大的文件〔2GB以上〕,设置为多文件上传〔并发数量设置为5〕,上传次数设置无限次〔或设置大于测试时间的次数〕,保证行驶期间测试不中断,业务可循环进行;
(4)当终端离开LTE网络回落/切换到EHRPD网络时,测试软件自动停止FTP业务,终端回到休眠态。
当终端在休眠态重选到LTE网络后,自动发起FTP测试。
(5)上传、下载分别在两部终端同时进行测试;
(6)当发生拨号连接异常中断后,应间隔10秒后重新发起连接:
a)如果属于因人为误操作终端未到周期就主动释放造成拨号连接中断,则不计为掉话,但拨号异常中断前的传输过程FTP速率采样点和时间纳入统计。
b)测试过程中假设连续10秒FTP层没有任何数据传输,开始自动尝试PING服务器,包大小为32字节,间隔时间1秒钟,超时时间2秒钟,直到FTP传输恢复或FTP测试失败后停止;测试过程中假设超过30秒FTP层没有任何数据传输,此时需断开网络连接,并记为一次业务掉线;该数据传输过程最后30秒对应的FTP速率采样点和时间不纳入LTE的速率统计。
(7)测试过程中假设出现FTP服务器登录失败,应间隔4秒后重新登录;连续10次登录失败,应断开网络连接,间隔10秒后重新进行测试。
2.2.1.2抽样测试方式
抽样方式适宜在有流量成本压力,并且网络对大流量测试敏感时使用,如多运营商网络比照测试。
测试内容:
时间抽样的ABM测试,长时间保持UDP业务测试。
测试条件要求:
测试时,保持车窗关闭,将LTE终端、支持LTE测试的路测设备放置在第二排座位中间,连接好GPS;根据测试的要求,仪表设置为“Hybrid”模式;同时,准备基于UDP业务的测试服务器。
测试步骤:
(1)确认测试终端已经成功附着网络,并能连接网络发起业务;
(2)下载测试测试采用抽样带宽方式,即在FTP连接建立后,在每1S时间内,只在连续的100ms时间内进行UDP传输。
(3)FTP上传测试测试采用抽样带宽方式,即在FTP连接建立后,在每1S时间内,只在连续的100ms时间内进行UDP传输。
(4)当终端离开LTE网络回落/切换到EHRPD网络时,测试软件自动停止FTP业务,终端回到休眠态。
当终端在休眠态重选到LTE网络后,自动发起FTP测试。
(5)上传、下载分别在同一终端分时隙进行测试;
(6)当发生拨号连接异常中断后,应间隔10秒后重新发起连接:
c)如果属于因人为误操作终端未到周期就主动释放造成拨号连接中断,则不计为掉话,但拨号异常中断前的传输过程FTP速率采样点和时间纳入统计。
d)测试过程中假设连续10秒FTP层没有任何数据传输,开始自动尝试PING服务器,包大小为32字节,间隔时间1秒钟,超时时间2秒钟,直到FTP传输恢复或FTP测试失败后停止;测试过程中假设超过30秒FTP层没有任何数据传输,此时需断开网络连接,并记为一次业务掉线;该数据传输过程最后30秒对应的FTP速率采样点和时间不纳入LTE的速率统计。
2.3城区DT短呼测试
2.3
测试目的
通过短呼测试,对网络接入性能、用户面时延进行评估。
测试时间
建网初期可任意时间测试,在LTE正式商用并且用户数量具备一定规模后,建议测试安排在工作日〔周一至周五〕9:
00-19:
00进行。
新疆和西藏的测试时间由于时差延后1个小时。
测试范围
同DT长呼测试范围。
测试速度
同长呼测试。
测试步骤
测试内容:
循环进行PING测试。
测试条件要求:
测试时,保持车窗关闭,将LTE终端、支持LTE测试的路测设备放置在第二排座位中间,连接好GPS;根据测试的要求,仪表设置为“Hybrid”模式。
测试步骤:
(1)检查PING服务器及测试系统配置,可使用FTP服务器作为PING服务器,要求服务器打开PING功能。
(2)终端在Idle状态发起AttachRequest附着LTE网络。
当终端处于激活态时,终端对PING服务器的IP地址进行PING操作,开始PING测试。
(3)每次PING包测试〔成功或超时〕间隔为10秒,PING包超时时间为5秒,PING包长为512Bytes。
(4)每次连接在重复10次PING包测试后,发起Detach去附着断开网络连接,使终端回到Idle状态;间隔10秒后,重新执行上述操作,保证测试期间任务循环执行
(5)当终端离开LTE网络回落/切换到EHRPD网络时,测试软件自动停止PING测试业务,终端回到休眠态。
当终端在休眠态重选到LTE网络后,自动重新发起PING测试
(6)如出现网络连接异常中断,应断开拨号,间隔10秒后重新连接并继续测试,该次异常事件对应的PING周期内的PING时延、尝试及失败次数不纳入统计。
2.4锁定测试
锁定测试指根据测试优化的要求,锁定网络制式、锁定频点、锁定小区等方式进行测试。
2.4
锁定制式测试
锁定LTE网络测试测试主要用于评估LTE网络质量,防止终端切换至其他网络〔2G/3G〕导致部分区域LTE未测试。
建议:
在LTE网络质量评估的DT测试中锁定LTE网络。
具体操作-在终端或路测软件中设置网络为LTEonly。
锁定频点测试
在多频组网的LTE网络中,锁定频点测试用于评估LTE网络的单频网络质量,而且优化人员通过单频网络测试数据,可获得各频段LTE小区分别对道路的覆盖情况,对多频组网的网络优化提供数据参考。
建议:
根据网优需求进行测试,不要求常规化。
具体操作-在终端或路测软件中选择锁定频点,设置EARFCN后执行即可。
锁定模式测试
在FDD/TDD混合组网的LTE网络中,锁定模式测试用于评估LTE网络的FDD/TDD网络质量,通过锁定模式的测试数据,可分别获得FDD及TDD网络的覆盖及质量情况,对FDD/TDD混合组网的建设及结构优化提供数据参考。
建议:
根据网优需求进行测试,不要求常规化。
具体操作-在终端或路测软件中选择模式,设置后执行即可。
锁定小区测试
锁定小区功能一般用于单个小区的性能评估/验证工作,例如进行拉远测试等。
建议:
根据网优需求进行测试,不要求常规化。
具体操作-在终端或路测软件中选择锁定小区,设置小区的EARFCN和PCI后执行即可。
2.5FTP服务器设置
FTP服务器功能要求
支持断点续传功能,支持多线程,服务端支持PASSIVE被动模式,放开帐号登录数限制,放开用户上传下载权限并打开ping功能,放开带宽限制,保留操作日志。
注:
服务端PASSIVE被动模式对应客户端连接属性的PASV模式配合使用。
建议配置服务器软件:
●Linux:
vsftpd-2.0.1以上
●Win32:
FileZillaServerversion0.9.41beta
FTP服务器部署要求
〔1〕采用专用服务器用于测试,操作系统优先采用Unix,启用FTP服务,安装FTP服务器端,允许PING操作,硬盘预留空间容量不少于1TB。
如有防火墙,需放开FTP和PING服务端口,系统应安装所有安全漏洞补丁。
〔2〕支持断点续传功能,支持多线程,服务端支持PASSIVE被动模式,放开帐号登录数限制,放开带宽限制,保留操作日志。
〔3〕各省需配置至少两台公网FTP服务器,吞吐量带宽1000Mbps的带宽与性能要求,尽量减少外围因素对数据吞吐量的影响。
3.城区CQT测试方法
3
3.1测试仪表
终端要求
电脑要求
仪表要求
可使用三星N719U
操作系统:
win732位
CPU:
IntelCorei5
内存:
4G
硬盘大小:
500G
支持3G/4G互操作
支持室内打点
3.2城区CQT测试场所选取
城区CQT测试时重点在话务量相对较高的区域、品牌区域、市场竞争激烈区域、特殊重点保障区域内选取位置点。
地理上尽可能均匀分布,场所类型尽量广。
重点选择有典型意义的大型写字楼、大型商场、大型餐饮娱乐场所、大型住宅小区、高校、交通枢纽和人流聚集的室外公共场所等。
各场所选取比例:
测试场所类型
场所类型
所占比例
商务办公类
五星级标准认证酒店、四星级标准认证酒店、三星级标准认证酒店、三星级以下认证酒店、快捷商务酒店、其它旅舍、商务办公大厦、会务中心、展览中心、交易所
15%
机关企业类
人民政府、人大政协、政府部门、公检法、街道机构、各党派和社团、厂矿农企、新闻媒体、科研机构、社会福利院、特殊场所、其它企事业、外国驻华大使馆、领事馆、军事机关、军用运输、其它军事场所
10%
教育医疗类
公立重点高校、公立普通高校、私立民办高等院校、成人教育院校、省市级重点中小学、普通中小学、中等专业学校、幼儿园、特殊学校、社会就业培训机构、其它教育培训机构、历史文化场馆、艺术场馆、科教场馆、书籍档案场馆、革命教育基地、其它科教文化场所、三甲医院、普通公办医院、民办医院、其它医疗机构、卫生防疫站、保健体检中心、休疗养机构
15%
商业市场类
大型综合百货公司、中小型百货商店、大型超市、中小型超市、美容连锁、服饰连锁、汽车服务连锁、婴幼儿连锁、家电连锁、其它连锁机构、食品、服饰、纺织、医药、汽配、电子、文体、农贸市场、五金交电、工艺美术、家居建材、办公用品、宠物、其它专业零售批发市场、中国电信营业厅、中国移动营业厅、中国联通营业厅、其它通信运营商营业厅、银行储蓄类营业厅、水/电/气/煤营业点、有线电视运营商营业点、其它行业营业厅
15%
餐饮娱乐类
酒楼饭店、快餐店、地方小吃街、休闲咖啡厅、其它餐饮场所、文化娱乐活动场所、游乐场、KTV、舞厅酒吧、洗浴中心、棋牌茶室、歌舞剧院、其它类型娱乐场所、公园、动物园、植物园、步行街、社会广场、国家5A级风景区、国家4A级风景区、其它旅游景区、体育运动场所、健身俱乐部、其它类型体育场所
15%
居民住宅类
低层住宅、高层住宅、混合式小区住宅、普通低层住宅、城中村住宅、其它旧式住宅居民区、花园洋房式住宅、独立别墅区住宅、联排别墅区住宅
20%
交通枢纽类
火车站、地铁站、城市轻轨客站、磁悬浮客站、海港、河港、城市轮渡、民用机场、军民合用的机场、长途客运站、高速公路服务区、城市汽车站、交通广场、机动车停车场库、非机动车停车场库
10%
3.3测试位置的选取
测试位置点的选取应合理分布,选取人流量较大和无线业务使用习惯的地方,容易暴露区域性覆盖问题,而不是孤点覆盖问题。
每个CQT场所重点测试以下位置及其主要通道。
〔1〕建筑物内要求分顶楼、楼中部位、底层。
某一楼层内的采用点应在以下几处位置选择,具体以测试时用户经常活动的地点为首选。
〔2〕大楼出入口、电梯口、楼梯口和建筑物内中心位置。
〔3〕人流密集的位置,包括大堂、餐厅、娱乐中心、会议厅、商场和休闲区等。
〔4〕成片住宅小区重点测试深度、高层、底层等覆盖难度较大的场所,以连片4-5栋楼作为测试对象选择采样点。
〔5〕医院的采样点重点选取门诊、挂号缴费处、停车场、住院病房、化验窗口等人员密集的地方。
有信号屏蔽要求的手术室、X光室、CT室等场所不安排测试。
〔6〕风景区的采样点重点选取停车场、主要景点、购票处、接待设施处、典型景点及景区附近大型餐饮、娱乐场所。
〔7〕火车客站、长途汽车客站、公交车站、机场、码头等交通聚集场所的采样点重点选取候车厅、站台、售票处、商场和广场。
〔8〕学校的采样点重点选取宿舍区、会堂、食堂、行政楼等人群聚集活动场所,如学生活动中心〔会场/舞厅/电影院等〕、体育场看台、露天聚集场所〔宣传栏〕、学生宿舍/公寓、学生/教工食堂、校部/院系所办公区、校内商业区、校内休闲区/博物馆/展览馆、校医院、校招待所/接待中心/对外交流中心/留学生服务中心,校内/校外教工宿舍〔住宅小区〕、小学/幼儿园校门口以及校外毗邻商业区〔如学生街〕等。
教学楼主要测试休息区和会议室。
〔9〕步行街的采样点应该包括步行街两旁的商铺及休息场所。
3.4测试步骤
CQT业务测试前,应通过GPS记录测试点的经纬度,准备测试场景的室内地图〔可拍摄室内疏散通道分布图〕,测试时,应根据行走的路线在地图上面打点。
针对不同的评估维度及角度,可采用锁定LTE或者混合模式的方法进行测试。
CQTFTP业务测试
同DT测试方法,长呼测试时,指定每个测试点的测试时长不少于5分钟。
3
3.1
3.2
3.3
3.4
CQTPing业务测试
3.5
同DT测试方法,需设置Ping包大小为32Byte、512Byte分别进行测试,每种包大小分别进行ping测试100次。
其余要求同DT测试方法。
4.网络质量评估重点
LTE网络质量主要可以从以下几个方面进行评估:
1、覆盖;2、接入性能;3、业务保持能力;4、业务性能;5、移动性能。
4
4
评估类别
关键指标
覆盖
覆盖率
里程覆盖率
4G/3G占用时长
接入性能
RRC连接建立成功率
E-RAB建立成功率
无线接通率
ATTACH成功率
Service成功率
业务保持能力
业务掉线率
无线掉线率
业务性能
应用层速率
Ping时延
PRB调度
MCS
CQI
BLER
单双流调度比例
MIMO
移动性能
切换成功率
切换控制面时延
切换用户面时延
LTE->CDMA2000系统间小区切换出成功率
LTE->CDMA2000系统间小区切换出时延
4.1覆盖评估
关键参数
2
3
4
3.1
4.1.1
4.1.2
4.1.1.1RSRP
Referencesignalreceivepower,参考信号接收功率,用于衡量某扇区的参考信号的强度,在一定频域和时域上进行测量并滤波。
可以用来估计UE离扇区的大概路损,LTE系统中测量的关键对象。
在小区选择中起决定作用。
通常说的RSRP是指CRS的RSRP,CRS指Cell-specificreferencesignals,具体资源单元映射情况如下:
Mappingofdownlinkreferencesignals(normalcyclicprefix)
单位:
dBm,取值范围:
-140dBm至-40dBm
4.1.1.2SINR
Signaltointerference-plus-noiseratio,信号与干扰加噪声比。
一般情况下,SINR是指CRS的SINR,即关注测量频率带宽内的小区,小区的参考信号的无线资源的信号干扰噪声比。
单位:
dB,取值范围:
-20dB至50dB
4.1.1.3RSRQ
ReferenceSignalReceivedQuality,参考信号接收质量,小区参考信号功率相对小区所有信号功率〔RSSI〕的比值。
RSRQ计算方法为:
N×RSRP/RSSI,N为RSSI测量带宽内的RB数;
单位:
dB,取值范围:
-40dB至0dB
4.1.1.4PUSCH-TxPower
物理上行共享信道(PhysicalUplinkSharedChannel)发射功率。
LTE的上行数据在PUSCH上传输,因此PUSCH-TxPower反馈的是上行数据传输时的发射功率。
[dBm]
单位:
dbm,取值范围:
-40dbm至23dbm
4.1.1.5PUCCH-TxPower
物理上行控制信道(PhysicalUplinkControlChannel)发射功率。
即终端上行控制信道上发送控制信息时的发射功率,在一些情况下控制信息在PUSCH上传输,PUCCH空闲,因此PUCCH-TxPower可能值为空。
[dBm]
单位:
dbm,取值范围:
-40dbm至23dbm
关键指标
4.1.3
4.1.1.6覆盖率
定义:
覆盖率=(RSRP≥--105dBm&SINR≥-3dB)的采样点数/采样点总数×100%
注:
(1)本定义适用于城区、农村、乡镇、风景区等各类场景下LTE网络测试时的覆盖率统计。
(2)采样点总数为所有测试终端的采样点样本数之和。
(3)覆盖率综合通话状态、空闲状态以及网络无覆盖时的结果。
4.1.1.7里程覆盖率
定义:
覆盖率=(RSRP≥--105dBm&SINR≥-3dB)的里程/测试总里程×100%
注:
(1)本定义适用于高速公路、铁路、航道等场景下LTE网络测试的里程覆盖率统计。
(2)测试路段总里程数:
含GPS数据的采样点间距离之和。
(3)里程覆盖率综合通话状态、空闲状态以及网络无覆盖时的结果。
4.1.1.84G/3G占用时长比
定义:
4G占用时长比例=混合模式下4G网络占用时长/测试总时长
3G占用时长比例=混合模式下3G网络占用时长/测试总时长
注:
(1)本定义侧重于从用户感知层面评估用户面的4G业务覆盖率,4G占用时长包含满足(RSRP≥--105dBm&SINR≥-3dB)的时间以及不满足(RSRP≥--105dBm&SINR≥-3dB)的时间两部分。
4.2接入性能评估
4.1
4.2
数据维度
终端接入主要包括attach和service。
在接入步骤来看重点关注:
1、RRC建立〔含随机接入〕;2、ERAB建立。
关键信令/事件
4.2.1.1Attach流程
Attachprocedure
上图为3GPP中的attach流程图,在上图中attachreq是指在RRCconnectionsetupcomplete携带的attachreq,在此之前有RRC建立的过程:
在测试过程中表达的是终端的流程,先有attachreq,由attachreq触发RRCconnectionreq,当RRC建立完成时Attachreq才发送给网络。
在实际测试过程中看到终端的attach流程顺序是:
1、attachrequest
2、RRCconnectionrequest
3、Msg1:
RA
4、Msg2:
RAR
5、…….(见RRC建立流程及attach信令流程)
Attach的几种重要的步骤包括:
鉴权、加密、终端能力上报、承载建立。
一般情况下在开机阶段自动完成Attach过程,在测试计划中未配置attach相关设置的时候,测试过程中一般情况没有attach的过程,只有当出现异常,网络侧将终端detach后,才会有attach的过程。
4.2.1.2Service流程
在IDLE态由业务触发service过程包括终端触发和网络触发两种,流程图分别如下:
UEtriggeredServiceRequestprocedure
NetworktriggeredServiceRequestprocedure
与Attach的过程类似,上图中的servicereq是在RRC建立完成消息携带的Servicereq,测试中在终端侧看到service过程还包括RRC建立过程。
在service过程中也包括:
鉴权、加密、承载建立。
与Attach主要的区别在于网络侧已经存储终端能力,终端不需要再上报终端能力,在RB建立过程中,service只需要建立DRB/SRB2,不再需要建立EPS默认承载。
关键指标
4.2.1.3RRC连接建立成功率
定义:
RRC连接建立成功率=RRC连接建立成功次数/RRC连接建立尝试次数×100%。
注:
RRC连接建立尝试次数:
UE发出的“RRCConnectionRequest”消息;
RRC连接建立成功次数:
收到RRCConnectionsetupcomplete消息,表示成功。
4.2.1.4E-RAB建立成功率
定义:
E-RAB建立成功率=〔Attach过程E-RAB建立成功次数+ServiceRequest过程E-RAB建立成功次数+承载建立过程E-RAB建立成功次数〕/〔Attach过程E-RAB请求建立次数+Servic