完整版中国电信移动互联网业务感知测试APP功能规范v0文档格式.docx

完整版中国电信移动互联网业务感知测试APP功能规范v0文档格式.docx

《完整版中国电信移动互联网业务感知测试APP功能规范v0文档格式.docx》由会员分享，可在线阅读，更多相关《完整版中国电信移动互联网业务感知测试APP功能规范v0文档格式.docx（51页珍藏版）》请在冰豆网上搜索。

4.2业务测试与业务监测功能3

4.3辅助诊断功能7

4.4网络异常监测功能8

4.5数据采集功能9

4.6客户端的自动升级功能10

4.7测试目标的选择功能10

4.8不同版本的功能11

5APP限制功能要求12

5.1终端软件版本升级治理13

5.2终端配置治理13

5.3采集数据上传治理13

5.4风险和隐私治理14

6APP及限制和预处理性能要求14

6.1机型适配14

6.2终端操作系统14

6.3耗电保护14

7APP及限制和预处理与分析系统的接口要求14

7.1数据上传格式及要求14

7.2与业务感知分析系统的接口21

8APP后台数据预处理及分析功能要求32

8.1通用功能32

8.2KQI统计33

83KQ［分析33

8.4KQI评价36

8.5网络异常分析36

8.6业务速率分析38

8.7业务行为分析38

8.8在网行为分析40

附件一、访问各时间点41

本标准为中国电信首次制定,旨在对移动互联网业务感知测试APP的功能进行统一标准,以支撑中国电信开展移动互联网业务感KQI指标的采集、分析及优化.

本标准起草单位：

本标准由中国电信集团公司网络运营维护事业部组织制定,中国电信股份广州研究院起草.

本标准主要起草人：

姜松、郑忠民、李文云、背维华、蒋春元、贺晓东等.

中国电信移动互联网业务感知测试APP功能要求

1范围

本标准规定中国电信移动互联网业务感知测试APP的功能,包括业务测试功能、业务监测功能、辅助诊断功能、数据采集功能、异常事件监测功能、业务行为监测功能、自动升级功能、测试目标选择功能、测试结果数据上传功能、APP限制功能、APP数据预处理、接口功能等要求.

本标准适用于中国电信移动互联网业务感知测试APP及分析系统,为移动互联网业务感知分析系统〔以下称“分析系统〞〕开发部署提供技术依据.

2缩略语

以下缩略语适用于本标准:

HyperTextTraiisfeiProtocol

超文本传输协议

ICMP

InternetControlMessageProtocoL

Iiiteinet

限制报文协议

IN1SI

InteinationalMobileSubscriberIdentity

国际移动用户识别码

MSISDN

MobileStationISDNNumber

移动用户薄号

LIE

LongTermEvolution

长期演进

URL

UniformResourceLocator

统一资源定位符

WAP

WirelessApplicationProtocol

无线应用协议

Wi-Fi

WirelessFidelity

无线保真

KQI

KeyQualityIndex

关键质量指标

DPI

DeepPacketInspection

深度报文监测

3移动互联网业务感知测试APP在网络中的位置

移动互联网业务感知数据的获取主要有两种方式:

方式1为测试APP方式,方式2为信令及DPI监测方式.移动互联网业务感知测试APP作为移动互联网网业务感知分析系统的一局部,在网络中的位置如下：

测试APP及限制和预处理的逻辑架构如以下列图所示.它包括以下三个局部：

〔1〕测试APP局部：

在智能终端上安装测试APP软件,通过业务监测、业务测试两种工作模式,实现终端业务感知数据的采集,测试数据上传效劳器.

（2）APP限制局部：

对终端的采集进行集中限制,对配置的更新周期、软件版本更新检查周期、数据上传周期、业务配置等进行治理.

4APP功能要求

移动网络的口常使用中,通过在上模拟真实用户行为的操作或者监测真实用户在上的实际业务操作过程或者监测真实用户在上的实际业务操作过程可以直观地表达用户感知数据,特别是使用率较高的页面浏览、视频播放和即时通信等业务,可以真实反映出用户业务感知情况.业务感知测试APP应具备对页面浏览类、视频类和即时通讯类业务的端到端测试功能,对相关业务感知KQI指标进行采集,包括当时的无线环境信息、坐标位置信息以及信息

QCTxxxx-201x等,并根据标准要求解析、生成、合并数据信息,向数据平台提供数据结果.

4.1APP工作模式

测试APP在不同的应用场景下采用不同的工作模式.工作模式包括两类：

业务测试模式和业务监测模式.

〔1〕业务测试模式：

APP软件带有操作界面,使用者可以在界面上模拟真实用户行为主动发起业务测试,并由APP软件自动采集被测业务的相关信息.测试采集信息可以由使用者手动触发上传,也可由软件自动完成上传.

业务测试模式具备全自动测试模式,通过效劳器端每天下发测试参数到,在终端上实现一键测试.暂定支持的业务测试包括网页浏览、视频浏览、测速.并可以实现测速参数针对不同省份可调,包括具体测试网址、测试次数.

全自动测试模式下,如果出现超时严重〔10s〕,可以启动相关辅助诊断工具进行分析检测.

〔2〕业务监测模式：

使用者正常使用终端进行各种业务,在其使用各类业务的过程中,APP的后台进程持续监测用户的业务使用行为,当用户使用了需要监测的特定业务时,由APP的后台进程自动对该用户的业务使用相关信息进行采集,采集信息根据约定的规那么自动上传到效劳器.在此模式下,用户不需要进行任何额外的操作,数据采集和上传的过程也不能对用户的正常使用产生任何干扰.此模式不要求测试APP具备操作界面.

〔3〕测试任务同步：

测试APP上的业务测试内容和业务监测内容应具备远程同步功能,每次启动APP时自动与后台同步最新的测试内容或监测内容,也可手动进行同步.内容同步功能可根据不同省份下发不同的测试内容,具体测试内容在后台进行统一制定.

〔4〕自动化测试功能：

业务测试模式除提供界面供用户手动触发任务外,应具备业务自动化测试功能.自动化测试功能是指测成APP根据限制平台的统一任务调度安排,对接收到的测试任务执行测试,测试完成后结果根据要求回传后台.

4.2业务测试与业务监测功能

4.2.1浏览类业务测试与监测功能

QCTxxxx-201x业务感知测试APP应对主流页面浏览类网站/应用发起端到端的访问测试,通过指定URL和测试次数,在应用层对URL发起请求,对请求和响应流程各阶段进行时戳捕获,解析后获取以下指标：

DNS解析延时、首包延时、页面翻开延时、请求地址、请求3、下载文件大小、下载文件速度、访问成功是否成功、建立连接时延、发送请求时延、接收响应时延；

移动网络页面浏览类业务感知指标主要表达在请求各阶段的延时,而业务感知KQI评价指标选用首包延时和页面翻开延时.

a〕效劳器首包响应延时：

用户发起浏览请求到收到目标效劳器响应第一个200ok报文之间的所经历的时长,单位为ms.首包延时表达了用户容易感知到的浏览器对的响应是否有反响及时长.

b〕页面翻开延时：

用户发起浏览请求到收到整个页面下载完毕并渲染完成时长,单位为So页面翻开时延反映了用户从访问开始到页面打开所需要等待的时间,影响业务感知.

APP在每次启动前进行一次待测试地址的请求,以便于根据不同阶段的测试需求进行调整.浏览类业务感知测试可以一次进行一个站点或者多个站点的访问测试,根据既定顺序线性执行测试并回传测试结果.测试中,APP应显示完整页面.

DNS解析时延：

从程序访问开始到完成DNS解析的时延；

建立连接时延：

DNS解析结束到TCP连接建立完成的时延：

发送请求时延：

TCP建立完成开始到收到响应的第一个数据包的时延：

接收响应时延：

从接收到第一个响应数据包开始到响应接收完成的时延：

空口建立时延：

网页浏览时,如果出现超时情况,应能主动调用辅助诊断工具进行诊断调用.〔仅针对专业版〕.

4.2.2视频类业务测试与监测功能

业务感知测试APP应对在线视频类业务进行播放测试,通过指定要请求的视频地址进行端到端的访问,通过模拟用户在线观看视频的实际业务,在视频访问的过程中,记录视频平均下载速率、峰值速率、卡顿次数等指标.

指标计算：

用户发起视频播放请求后的10s内,每500ms记录一次该阶段的下载速率,并统计出整个阶段的视频下载的平均速率和峰值速率；

APP在启动时需要请求一次最新的视频浏览类测试地址,以便于适应不同阶段的需求而对视频类业务感知KQI指标进行提取.

请求的视频文件大小大约在10M左右.对于网络状况较好的情况下,如果不到10s就己经下载完成,应只统计下载期间的速率.

4.2.3即时通信类业务测试与监测功能

业务感知测试APP须对即时通信类业务进行消息发送和接收测试,通过在指定某种或某几种即时通信工具上模拟用户的发送消息和接收消息,获取到消息发送/接收的时延、速率及成功率.

移动网络的即时通信类业务感知指标主要表达在用户使用此类应用时消息发送和接收的准确情况,业务感知KQI评价指标选用发送/接收成功率：

a〕消息发送是否成功：

用户在触发消息发送到效劳器成功接收消息；

b〕消息发送接收时延：

用户在触发消息发送到对端用户接收成功所消耗的时间记为消息发送接收时延；

c〕消息发送速率：

发送速率可以用发送消息的大小/用户在触发消息发送到效劳器接收成功所消耗的时间,发送消息可以是文本、图片和视频；

d〕消息接收是否成功：

发送消息在发送成功后,用户在接收端上接收到相同内容的消息记为接收成功；

4.2.4网络测速功能

业务感知测试APP须对网络的吞吐率进行测试,测试过程包括下载速率测试和上传速率测试.网络测速通过协议进行,测速地址选用目前已有的测速效劳器.

网络测速采集的指标包括下载平均速率,下载峰值速率,上传平均速率和上传峰值速率：

a〕下载平均速率：

用户在触发网络测速下载测试时,整个下载过程的平均速率,用下载消耗数据量/下载消耗时长；

b〕下载峰值速率：

用户在触发网络测速下载测试时,在整个下载过程中每500ms记录一次速率情况,取各次中最快的几位峰值速率：

C〕上传平均速率：

用户在触发网络测速上传测试时,整个上传过程的平均速率,用上传消耗数据量/上传消耗时长；

d〕上传峰值速率：

用户在触发网络测速上传测试时,在整个下载过程中每500ms记录一次速率情况,取各次中最快的几位峰值速率：

e〕支持多线程测试,针对3G网络只使用单线程测试,针对4G网络开启多线程测试〔哲定开4线程〕.

f〕测速开始前应首先发起Pmg测试,保证测速效劳器能正常访问.如果Ping超时,应提示用户测速效劳器不可用.

g〕本项功能应实现为一键测试,无需用户做更多操作.

h〕测速网址应按归底省份卜发不同网址.但对于漫游用户上报的测试数据应在做统计时剔除掉〔后台进行操作〕.测速所用文件为100MB以上,测速时间为10so

4.2.5全自动测试

业务感知测试APP〔专业版〕应具备一犍式全自动测试功能.在测试中,根据效劳器所下发的配置参数完成网页、视频、测速测试.在测试中,应对目标网址依次进行测试,并在APP上显示测试结果〔非后台处理方式〕.

APP具备在网络出现异常情况导致超时的情况下,能启动辅助诊断匚具