经验 14 分贝 0 家园分 47 在线时间: 5 小时 最后登录: 2019-11-7 帖子: 6 精华: 0 注册时间: 2009-4-26 UID: 368885
注册:2009-4-26 1
中国电信LTE网络质量评估测试规范
(试行稿)
中国电信集团公司
2015年4月
目录
1. 总则 5
1.1 概述 5
1.2 术语定义 5
1.3 测试仪表 5
2. 城区DT测试方法 5
2.1 测试仪表 5
2.2 城区DT长呼测试 6
2.2.1 测试目的 6
2.2.2 测试时间 6
2.2.3 测试范围 6
2.2.4 测试速度 7
2.2.5 测试步骤 7
2.2.5.1 全采样方式 7
2.2.5.2 抽样测试方式 8
2.3 城区DT短呼测试 9
2.3.1 测试目的 9
2.3.2 测试时间 9
2.3.3 测试范围 10
2.3.4 测试速度 10
2.3.5 测试步骤 10
2.4 锁定测试 11
2.4.1 锁定制式测试 11
2.4.2 锁定频点测试 11
2.4.3 锁定模式测试 11
2.4.4 锁定小区测试 11
2.5 FTP服务器设置 12
2.5.1 FTP服务器功能要求 12
2.5.2 FTP服务器部署要求 12
3. 城区CQT测试方法 12
3.1 测试仪表 12
3.2 城区CQT测试场所选取 13
3.3 测试位置的选取 14
3.4 测试步骤 15
3.4.1 CQT FTP业务测试 15
3.4.2 CQT Ping业务测试 15
4. 网络质量评估重点 15
4.1 覆盖评估 16
4.1.1 关键参数 16
4.1.1.1 RSRP 16
4.1.1.2 SINR 17
4.1.1.3 RSRQ 17
4.1.1.4 PUSCH-TxPower 18
4.1.1.5 PUCCH-TxPower 18
4.1.2 关键指标 18
4.1.2.1 覆盖率 18
4.1.2.2 里程覆盖率 19
4.1.2.3 4G/3G占用时长 19
4.2 接入性能评估 19
4.2.1 数据维度 19
4.2.2 关键信令/事件 19
4.2.2.1 Attach流程 20
4.2.2.2 Service流程 22
4.2.3 关键指标 24
4.2.3.1 RRC连接建立成功率 24
4.2.3.2 E-RAB建立成功率 24
4.2.3.3 无线接通率 24
4.2.3.4 ATTACH成功率 25
4.2.3.5 Service成功率 25
4.3 业务保持能力评估 25
4.3.1 数据维度 25
4.3.2 关键信令/事件 25
4.3.2.1 FTP download/upload failed 25
4.3.2.2 RRC release 25
4.3.2.3 RRC connection reestablishment request 25
4.3.3 关键指标 26
4.3.3.1 业务掉线率 26
4.3.3.2 无线掉线率 26
4.4 业务性能评估 27
4.4.1 数据维度 27
4.4.2 关键参数 27
4.4.2.1 RB 27
4.4.2.2 MCS 28
4.4.2.3 CQI 29
4.4.2.4 RI 30
4.4.3 关键指标 30
4.4.3.1 PDCP层速率 30
4.4.3.2 Ping时延 30
4.4.3.3 PRB调度 30
4.4.3.4 MCS 32
4.4.3.5 CQI 32
4.4.3.6 BLER 32
4.4.3.7 单双流调度比例 33
4.4.3.8 MIMO 33
4.5 移动性能评估 34
4.5.1 数据维度 34
4.5.2 关键信令/事件 34
4.5.2.1 Measurement Report 34
4.5.2.2 RRC connection reconfiguration 34
4.5.3 关键指标 34
4.5.3.1 切换成功率 34
4.5.3.2 切换控制面时延 35
4.5.3.3 切换用户面时延 36
4.5.3.4 LTE->CDMA2000系统间小区切换出成功率 36
4.5.3.1 LTE->CDMA2000系统间小区切换出时延 36
5. 附录:其他关键指标 37
1. 总则
1.1 概述
无线网络只有通过实际网络质量的检查测试才能获得真正意义上的网络运行质量信息,才能了解用户对网络质量的真实感受。通过DT测试和CQT测试在现场模拟用户行为,结合专业测试工具进行分析,是获取无线网络性能、发现无线网络问题的主要方法。通过与竞争对手网络进行现场测试综合对比,还可以了解中国电信LTE网络与竞争对手网络在网络性能上的差距。
1.2 术语定义
DT(Driving Test)测试是使用测试设备沿指定的路线移动,进行不同类型的呼叫,记录测试数据,统计网络测试指标。
CQT(Call Quality Test)测试是在特定的地点使用测试设备进行一定规模的拨测,记录测试数据,统计网络测试指标。
1.3 测试仪表
网络质量评估通常采用路测仪表进行,其形态包括传统仪表、便携式仪表等;建网初期评估网络基本覆盖时,同时也需要采用扫频仪辅助测试。测试时所使用的软硬件设备,必须满足中国电信集团相关的仪器仪表规范。
2. 城区DT测试方法
本章主要介绍的是以评估网络质量为目的的常规测试方法,评估网络质量应根据测试和优化的目的,选取对应的方法进行测试。
2.1 测试仪表
传统路测仪表:
场景 终端要求 电脑要求 仪表要求
长呼 建议三星N7509V 操作系统:win7 32位
CPU:Intel Core i5
内存:4G
硬盘大小:500G 支持4/3G互操作控制,CAT4
短呼 —— 支持4/3G互操作控制
锁定测试 建议海思芯片终端;或三星N7509V(锁制式/频点) —— 支持锁定制式/频点/小区;支持4/3G互操作控制,CAT4
自动路测仪表:
分类 要求
测试模块 要求使用CAT4的FDD/TDD模块,如需测试4/3G互操作,模块需同时支持eHRPD网络;
管理平台 要求完成设备管理及指标分析;支持设备的在线监控;支持问题区域的分析及闭环管理;
便携仪表:
要求操作系统为安卓或IOS;支持4/3G互操作,CAT4终端;专业版需支持无线参数及信令采集。
2.2 城区DT长呼测试
2.2.1 测试目的
通过长呼测试,对网络覆盖质量、保持性能、切换性能、吞吐率进行评估。
2.2.2 测试时间
建网初期可任意时间测试,在LTE正式商用并且用户数量具备一定规模后,建议测试安排在工作日(周一至周五)9:00-19:00进行。新疆和西藏的测试时间由于时差延后1个小时。
2.2.3 测试范围
测试范围主要包括:城区主干道、商业密集区道路(商业街)、住宅密集区道路、学院密集区道路、机场路、环城路、沿江两岸、城区内主要桥梁、隧道、城内风景点周边道路等。要求测试路线尽量均匀覆盖整个城区主要干道和次级街道,并且尽量不重复,在主/次干道已测完的情况下,在工作负荷允许的情况下,建议对重点业务区域所有道路进行遍历测试。
2.2.4 测试速度
在城区应尽量保持正常行驶速度(30~60公里/小时);在城郊快速路车速应尽量保持在60~80公里/小时,高速公路尽量保持在80公里/小时以上,不限制最高车速。
2.2.5 测试步骤
2.2.5.1 全采样方式
全采用方式适宜在无流量成本压力,并且网络对大流量测试不敏感时使用。
测试内容:
FTP上传/下载测试,通过上传/下载超大文件,长时间保持FTP业务测试。
测试条件要求:
测试时,保持车窗关闭,将LTE终端、支持LTE测试的路测设备放置在第二排座位中间,连接好GPS;根据测试的要求,仪表设置为 “Hybrid”模式。
测试步骤:
(1) 确认测试终端已经成功附着网络,并能连接网络发起业务;
(2) 利用测试软件中的内置 FTP 测试功能,从 FTP server上下载一个足够大的文件(5GB 以上),设置5线程下载,每个线程独立下载完整文件(不使用断点续传),下载次数设置无限次(或设置大于测试时间的次数),保证行驶期间测试不中断,业务可循环进行;
(3) 利用测试软件中的内置 FTP 测试功能,向 FTP server上传足够大的文件(2GB 以上),设置为多文件上传(并发数量设置为5),上传次数设置无限次(或设置大于测试时间的次数),保证行驶期间测试不中断,业务可循环进行;
(4) 当终端离开LTE网络回落/切换到EHRPD网络时,测试软件自动停止FTP业务,终端回到休眠态。当终端在休眠态重选到LTE网络后,自动发起FTP测试。
(5) 上传、下载分别在两部终端同时进行测试;
(6) 当发生拨号连接异常中断后,应间隔10秒后重新发起连接:
a) 如果属于因人为误操作终端未到周期就主动释放造成拨号连接中断,则不计为掉话,但拨号异常中断前的传输过程FTP速率采样点和时间纳入统计。
b) 测试过程中若连续10秒 FTP 层没有任何数据传输,开始自动尝试 PING服务器,包大小为32字节,间隔时间1秒钟,超时时间2秒钟,直到FTP传输恢复或FTP测试失败后停止;测试过程中若超过30秒 FTP 层没有任何数据传输,此时需断开网络连接,并记为一次业务掉线;该数据传输过程最后30秒对应的FTP速率采样点和时间不纳入LTE的速率统计。
(7) 测试过程中若出现FTP 服务器登录失败,应间隔 4 秒后重新登录;连续10 次登录失败,应断开网络连接,间隔 10 秒后重新进行测试。
2.2.5.2 抽样测试方式
抽样方式适宜在有流量成本压力,并且网络对大流量测试敏感时使用,如多运营商网络对比测试。
测试内容:
时间抽样的ABM测试,长时间保持UDP业务测试。
测试条件要求:
测试时,保持车窗关闭,将LTE终端、支持LTE测试的路测设备放置在第二排座位中间,连接好GPS;根据测试的要求,仪表设置为 “Hybrid”模式;同时,准备基于UDP业务的测试服务器。
测试步骤:
(1) 确认测试终端已经成功附着网络,并能连接网络发起业务;
(2) 下载测试测试采用抽样带宽方式,在每1S时间内,只在连续的100ms时间内进行UDP传输。
(3) 上传测试测试采用抽样带宽方式,在每1S时间内,只在连续的100ms时间内进行UDP传输。
(4) 当终端离开LTE网络回落/切换到EHRPD网络时,测试软件自动停止抽样业务测试,终端回到休眠态。当终端在休眠态重选到LTE网络后,自动发起抽样测试。
(5) 上传、下载分别在同一终端分时隙进行测试;
(6) 当发生拨号连接异常中断后,应间隔10秒后重新发起连接:
c) 如果属于因人为误操作终端未到周期就主动释放造成拨号连接中断,则不计为掉话,但拨号异常中断前的传输过程抽样速率采样点和时间纳入统计。
d) 测试过程中若超过30秒 应用 层没有任何数据传输,此时需断开网络连接,并记为一次业务掉线;该数据传输过程最后30秒对应的抽样速率采样点和时间不纳入LTE的速率统计。
2.3 城区DT短呼测试
2.3.1 测试目的
通过短呼测试,对网络接入性能、用户面时延进行评估。
2.3.2 测试时间
建网初期可任意时间测试,在LTE正式商用并且用户数量具备一定规模后,建议测试安排在工作日(周一至周五)9:00-19:00进行。新疆和西藏的测试时间由于时差延后1个小时。
2.3.3 测试范围
同DT长呼测试范围。
2.3.4 测试速度
同长呼测试。
2.3.5 测试步骤
测试内容:
循环进行PING测试。
测试条件要求:
测试时,保持车窗关闭,将LTE数据卡、支持LTE测试的路测设备放置在第二排座位中间,连接好GPS;根据测试的要求,仪表设置为 “LTE ONLY”模式。
测试步骤:
(1) 检查PING服务器及测试系统配置,可使用FTP服务器作为PING服务器,要求服务器打开PING功能。
(2) 终端在Idle状态发起Attach Request附着LTE网络。当终端处于激活态时,终端对PING服务器的IP地址进行PING操作,开始PING测试。
(3) 每次PING包测试(成功或超时)间隔为10秒,PING包超时时间为5秒,PING 包长为512Bytes。
(4) 每次连接在重复10次PING包测试后,发起Detach去附着断开网络连接,使终端回到Idle状态;间隔10秒后,重新执行上述操作,保证测试期间任务循环执行
(5) 如出现网络连接异常中断,应断开拨号,间隔10秒后重新连接并继续测试,该次异常事件对应的PING周期内的PING时延、尝试及失败次数不纳入统计。
2.4 锁定测试
锁定测试指根据测试优化的要求,锁定网络制式、锁定频点、锁定小区等方式进行测试。
2.4.1 锁定制式测试
锁定LTE网络测试测试主要用于评估LTE网络质量,避免终端切换至其他网络(2G/3G)导致部分区域LTE未测试。
建议:在LTE网络质量评估的DT测试中锁定LTE网络。具体操作-在终端或路测软件中设置网络为LTE only。
2.4.2 锁定频点测试
在多频组网的LTE网络中,锁定频点测试用于评估LTE网络的单频网络质量,而且优化人员通过单频网络测试数据,可获得各频段LTE小区分别对道路的覆盖情况,对多频组网的网络优化提供数据参考。
建议:根据网优需求进行测试,不要求常规化。具体操作-在终端或路测软件中选择锁定频点,设置EARFCN后执行即可。
2.4.3 锁定模式测试
在FDD/TDD混合组网的LTE网络中,锁定模式测试用于评估LTE网络的FDD/TDD网络质量,通过锁定模式的测试数据,可分别获得FDD及TDD网络的覆盖及质量情况,对FDD/TDD混合组网的建设及结构优化提供数据参考。
建议:根据网优需求进行测试,不要求常规化。具体操作-在终端或路测软件中选择模式,设置后执行即可。
2.4.4 锁定小区测试
锁定小区功能一般用于单个小区的性能评估/验证工作,例如进行拉远测试等。
建议:根据网优需求进行测试,不要求常规化。具体操作-在终端或路测软件中选择锁定小区,设置小区的EARFCN和PCI后执行即可。
2.5 FTP服务器设置
2.5.1 FTP服务器功能要求
支持断点续传功能,支持多线程,服务端支持PASSIVE被动模式,放开帐号登录数限制,放开用户上传下载权限并打开ping功能,放开带宽限制,保留操作日志。
注:服务端PASSIVE被动模式对应客户端连接属性的PASV模式配合使用。
建议配置服务器软件:
Linux: vsftpd-2.0.1以上
Win32: FileZilla Server version 0.9.41 beta
2.5.2 FTP服务器部署要求
(1)采用专用服务器用于测试,操作系统优先采用Unix,启用FTP服务,安装FTP服务器端,允许PING操作,硬盘预留空间容量不少于1TB。如有防火墙,需放开FTP和PING服务端口,系统应安装所有安全漏洞补丁。
(2)支持断点续传功能,支持多线程,服务端支持PASSIVE被动模式,放开帐号登录数限制,放开带宽限制,保留操作日志。
(3)各省需配置至少两台公网FTP服务器,吞吐量带宽1000Mbps的带宽与性能要求,尽量减少外围因素对数据吞吐量的影响。
3. 城区CQT测试方法
3.1 测试仪表
终端要求 电脑要求 仪表要求
可使用三星N719U 操作系统:win7 32位
CPU:Intel Core i5
内存:4G
硬盘大小:500G 支持3G/4G互操作
支持室内打点
3.2 城区CQT测试场所选取
城区CQT测试时重点在话务量相对较高的区域、品牌区域、市场竞争激烈区域、特殊重点保障区域内选取位置点。地理上尽可能均匀分布,场所类型尽量广。重点选择有典型意义的大型写字楼、大型商场、大型餐饮娱乐场所、大型住宅小区、高校、交通枢纽和人流聚集的室外公共场所等。
各场所选取比例:
测试场所类型 场所类型 所占比例
商务办公类 五星级标准认证酒店、四星级标准认证酒店、三星级标准认证酒店、三星级以下认证酒店、快捷商务酒店、其它旅舍、商务办公大厦、会务中心、展览中心、交易所 15%
机关企业类 人民政府、人大政协、政府部门、公检法、街道机构、各党派和社团、厂矿农企、新闻媒体、科研机构、社会福利院、特殊场所、其它企事业、外国驻华大使馆、领事馆、军事机关、军用运输、其它军事场所 10%
教育医疗类 公立重点高校、公立普通高校、私立民办高等院校、成人教育院校、省市级重点中小学、普通中小学、中等专业学校、幼儿园、特殊学校、社会就业培训机构、其它教育培训机构、历史文化场馆、艺术场馆、科教场馆、书籍档案场馆、革命教育基地、其它科教文化场所、三甲医院、普通公办医院、民办医院、其它医疗机构、卫生防疫站、保健体检中心、休疗养机构 15%
商业市场类 大型综合百货公司、中小型百货商店、大型超市、中小型超市、美容连锁、服饰连锁、汽车服务连锁、婴幼儿连锁、家电连锁、其它连锁机构、食品、服饰、纺织、医药、汽配、电子、文体、农贸市场、五金交电、工艺美术、家居建材、办公用品、宠物、其它专业零售批发市场、中国电信营业厅、中国移动营业厅、中国联通营业厅、其它通信运营商营业厅、银行储蓄类营业厅、水/电/气/煤营业点、有线电视运营商营业点、其它行业营业厅 15%
餐饮娱乐类 酒楼饭店、快餐店、地方小吃街、休闲咖啡厅、其它餐饮场所、文化娱乐活动场所、游乐场、KTV、舞厅酒吧、洗浴中心、棋牌茶室、歌舞剧院、其它类型娱乐场所、公园、动物园、植物园、步行街、社会广场、国家 5A级风景区、国家 4A 级风景区、其它旅游景区、体育运动场所、健身俱乐部、其它类型体育场所 15%
居民住宅类 低层住宅、高层住宅、混合式小区住宅、普通低层住宅、城中村住宅、其它旧式住宅居民区、花园洋房式住宅、独立别墅区住宅、联排别墅区住宅 20%
交通枢纽类 火车站、地铁站、城市轻轨客站、磁悬浮客站、海港、河港、城市轮渡、民用机场、军民合用的机场、长途客运站、高速公路服务区、城市汽车站、交通广场、机动车停车场库、非机动车停车场库 10%
3.3 测试位置的选取
测试位置点的选取应合理分布,选取人流量较大和无线业务使用习惯的地方,容易暴露区域性覆盖问题,而不是孤点覆盖问题。每个CQT场所重点测试以下位置及其主要通道。
(1)建筑物内要求分顶楼、楼中部位、底层。某一楼层内的采用点应在以下几处位置选择,具体以测试时用户经常活动的地点为首选。
(2)大楼出入口、电梯口、楼梯口和建筑物内中心位置。
(3)人流密集的位置,包括大堂、餐厅、娱乐中心、会议厅、商场和休闲区等。
(4)成片住宅小区重点测试深度、高层、底层等覆盖难度较大的场所,以连片4-5栋楼作为测试对象选择采样点。
(5)医院的采样点重点选取门诊、挂号缴费处、停车场、住院病房、化验窗口等人员密集的地方。有信号屏蔽要求的手术室、X光室、CT室等场所不安排测试。
(6)风景区的采样点重点选取停车场、主要景点、购票处、接待设施处、典型景点及景区附近大型餐饮、娱乐场所。
(7)火车客站、长途汽车客站、公交车站、机场、码头等交通聚集场所的采样点重点选取候车厅、站台、售票处、商场和广场。
(8)学校的采样点重点选取宿舍区、会堂、食堂、行政楼等人群聚集活动场所,如学生活动中心(会场/舞厅/电影院等)、体育场看台、露天聚集场所(宣传栏)、学生宿舍/公寓、学生/教工食堂、校部/院系所办公区、校内商业区、校内休闲区/博物馆/展览馆、校医院、校招待所/接待中心/对外交流中心/留学生服务中心,校内/校外教工宿舍(住宅小区)、小学/幼儿园校门口以及校外毗邻商业区(如学生街)等。教学楼主要测试休息区和会议室。
(9)步行街的采样点应该包括步行街两旁的商铺及休息场所。
3.4 测试步骤
CQT业务测试前,应通过GPS记录测试点的经纬度,准备测试场景的室内地图(可拍摄室内疏散通道分布图),测试时,应根据行走的路线在地图上面打点。针对不同的评估维度及角度,可采用锁定LTE或者混合模式的方法进行测试。
3.4.1 CQT FTP业务测试
同DT测试方法,长呼测试时,指定每个测试点的测试时长不少于5分钟。
3.4.2 CQT Ping业务测试
同DT测试方法,需设置Ping包大小为32Byte、512Byte分别进行测试,每种包大小分别进行ping测试100次。其余要求同DT测试方法。
4. 网络质量评估重点
LTE网络质量主要可以从以下几个方面进行评估:1、覆盖;2、接入性能;3、业务保持能力;4、业务性能;5、移动性能。
评估类别 关键指标
覆盖 覆盖率
里程覆盖率
4G/3G占用时长
接入性能 RRC连接建立成功率
E-RAB建立成功率
无线接通率
ATTACH成功率
Service成功率
业务保持能力 业务掉线率
无线掉线率
业务性能 应用层速率
Ping时延
PRB调度
MCS
CQI
BLER
单双流调度比例
MIMO
移动性能 切换成功率
切换控制面时延
切换用户面时延
LTE->CDMA2000系统间小区切换出成功率
LTE->CDMA2000系统间小区切换出时延
4.1 覆盖评估
4.1.1 关键参数
4.1.1.1 RSRP
Reference signal receive power,参考信号接收功率,用于衡量某扇区的参考信号的强度,在一定频域和时域上进行测量并滤波。可以用来估计UE离扇区的大概路损,LTE系统中测量的关键对象。在小区选择中起决定作用。
通常说的RSRP是指CRS的RSRP,CRS指Cell-specific reference signals,具体资源单元映射情况如下:
Mapping of downlink reference signals (normal cyclic prefix)
单位:dBm,取值范围:-140dBm至-40dBm
备注:一般取第一个天线端口的数值R0,如果第二个天线端口测量值R1可靠,则取R0和R1的最大值。
4.1.1.2 SINR
Signal to interference-plus-noise ratio,信号与干扰加噪声比。一般情况下,SINR是指CRS的SINR,即关注测量频率带宽内的小区,小区的参考信号的无线资源的信号干扰噪声比。
单位:dB,取值范围:-20dB至50dB
对于两个天线端口的测量值,SINR取SINR0及SINR1的平均值。
4.1.1.3 RSRQ
Reference Signal Received Quality,参考信号接收质量,小区参考信号功率相对小区所有信号功率(RSSI)的比值。RSRQ计算方法为: N×RSRP/RSSI, N为RSSI测量带宽内的RB数;
单位:dB,取值范围:-40dB至0dB
4.1.1.4 PUSCH-TxPower
物理上行共享信道(Physical Uplink Shared Channel)发射功率。LTE的上行数据在PUSCH上传输,因此PUSCH-TxPower反馈的是上行数据传输时的发射功率。
[dBm]
单位:dbm,取值范围:-40dbm至23dbm
4.1.1.5 PUCCH-TxPower
物理上行控制信道(Physical Uplink Control Channel)发射功率。即终端上行控制信道上发送控制信息时的发射功率,在一些情况下控制信息在PUSCH上传输,PUCCH空闲,因此PUCCH-TxPower可能值为空。
[dBm]
单位:dbm,取值范围:-40dbm至23dbm
4.1.2 关键指标
4.1.2.1 覆盖率
定义:
覆盖率=(RSRP≥--105dBm&SINR≥-3dB)的采样点数/采样点总数×100%
注:
(1) 本定义适用于城区、农村、乡镇、风景区等各类场景下LTE网络测试时的覆盖率统计。
(2) 采样点总数为所有测试终端的采样点样本数之和。
(3) 覆盖率综合通话状态、空闲状态以及网络无覆盖时的结果。
4.1.2.2 里程覆盖率
定义:
覆盖率=(RSRP≥--105dBm&SINR≥-3dB)的里程/测试总里程×100%
注:
(1) 本定义适用于高速公路、铁路、航道等场景下LTE网络测试的里程覆盖率统计。
(2) 测试路段总里程数:含GPS数据的采样点间距离之和。
(3) 里程覆盖率综合通话状态、空闲状态以及网络无覆盖时的结果。
4.1.2.3 4G/3G占用时长
定义:
4G占用时长=混合模式下4G网络占用时长/测试总时长
3G占用时长=混合模式下3G网络占用时长/测试总时长
注:
(1) 本定义侧重于从用户感知层面评估用户面的4G业务覆盖率,4G占用时长包含满足(RSRP≥--105dBm&SINR≥-3dB)的时间以及不满足(RSRP≥--105dBm&SINR≥-3dB)的时间两部分。
4.2 接入性能评估
4.2.1 数据维度
终端接入主要包括attach和service。在接入步骤来看重点关注:1、RRC建立(含随机接入);2、ERAB建立。
4.2.2 关键信令/事件
4.2.2.1 Attach流程
Attach procedure
上图为3GPP中的attach流程图,在上图中attach req是指在RRC connection setup complete携带的attach req,在此之前有RRC建立的过程:
在测试过程中体现的是终端的流程,先有attach req,由attach req触发RRC connection req,当RRC建立完成时Attach req才发送给网络。
在实际测试过程中看到终端的attach流程顺序是:
1、attach request
2、RRC connection request
3、Msg1:RA
4、Msg2:RAR
5、…….(见RRC建立流程及attach 信令流程)
Attach的几种重要的步骤包括:鉴权、加密、终端能力上报、承载建立。
一般情况下在开机阶段自动完成Attach过程,在测试计划中未配置attach相关设置的时候,测试过程中一般情况没有attach的过程,只有当出现异常,网络侧将终端detach后,才会有attach的过程。
4.2.2.2 Service流程
在IDLE态由业务触发service过程包括终端触发和网络触发两种,流程图分别如下:
UE triggered Service Request procedure
Network triggered Service Request procedure
与Attach的过程类似,上图中的service req是在RRC建立完成消息携带的Service req,测试中在终端侧看到service过程还包括RRC建立过程。
在service过程中也包括:鉴权、加密、承载建立。与Attach主要的区别在于网络侧已经存储终端能力,终端不需要再上报终端能力,在RB建立过程中,service只需要建立DRB/SRB2,不再需要建立EPS默认承载。
4.2.3 关键指标
4.2.3.1 RRC连接建立成功率
定义:
RRC连接建立成功率=RRC连接建立成功次数/RRC连接建立尝试次数×100%。
注:
RRC连接建立尝试次数:UE发出的“RRC Connection Request”消息;
RRC连接建立成功次数:收到RRC Connection setup complete消息,表示成功。
4.2.3.2 E-RAB建立成功率
定义:
E-RAB建立成功率=(Attach过程E-RAB建立成功次数+Service Request过程E-RAB建立成功次数+承载建立过程E-RAB建立成功次数)/(Attach过程E-RAB请求建立次数+Service Request过程E-RAB请求建立次数+承载建立过程E-RAB请求建立次数)×100%。
注:
E-RAB请求建立:搜索RRC连接重配完成消息,找到后,继续判断其最近上一条RRCConnection Reconfiguration,如果信元MobilityControlInfo不存在,且Radio Resource Config Dedicated的DRB-ToAddModifyList存在,则表示为RRC 重配事件为E-RAB建立请求
E-RAB建立成功:收到RRC Connection Reconfiguration Complete消息
4.2.3.3 无线接通率
定义:
无线接通率=E-RAB建立成功率×RRC连接建立成功率(业务相关)×100%
4.2.3.4 ATTACH成功率
定义:
ATTACH成功率=ATTACH成功次数/ATTACH尝试次数×100%。
4.2.3.5 Service成功率
定义:
SERVICE成功率=SERVICE成功次数/SERVICE尝试次数×100%。
4.3 业务保持能力评估
4.3.1 数据维度
掉线率可分为两个层面,分为业务掉线率和无线掉线率。业务掉线率侧重于用户感知,无线掉线率侧重于体现网络侧存在的业务中断问题。
4.3.2 关键信令/事件
4.3.2.1 FTP download/upload failed
FTP上传下载失败条件:
FTP download/upload failed事件触发条件:1、根据设定的超时时间N,持续出现N秒应用层无流量;2、拨号连接主动断开。
4.3.2.2 RRC release
RRC release包括两个方面:1、终端收到网络侧下发的RRC connection release消息,终端状态转变为IDLE。2、由于弱覆盖等一些原因,终端无法保持RRC连接态,终端自动将状态转变为IDLE
4.3.2.3 RRC connection reestablishment request
终端会在一些异常情况下RRC连接重建立,具体情况包括:1、终端检测到底层无线链路失败;2、切换失败;3、收到PDCP包完整性校验失败;4、RRC重建立失败。
4.3.3 关键指标
4.3.3.1 业务掉线率
定义:
业务掉线率=业务掉线次数/业务总次数×100%
注:
业务掉线:业务过程中,持续出现30s应用层无流量或网络连接主动断开均视为业务掉线。
4.3.3.2 无线掉线率
定义:
无线掉线率=无线掉线次数总和/无线业务建立成功总次数*100%
注:
业务建立成功;采用其他业务或者长呼时,测试正常进行每90秒记为一次业务建立成功;
无线掉线次数:
1)在业务过程中,触发RRC重建立,记为一次掉线;若重建失败导致的多次连续重建,只记为一次掉线;
2)在业务过程中,没有触发RRC重建立,终端返回RRC IDLE或脱网状态,记为一次掉线;
其中:
上述两种情况的掉线情况不重复计算
终端因为IDLE TIMER释放RRC连接,返回IDLE状态不计为掉线;
终端切换失败后,在第一次RRC链路重建成功的,不计为掉线;
业务掉线率的评估,建议采用FTP上传和FTP下载业务测试方式;
4.4 业务性能评估
4.4.1 数据维度
数据业务评估主要考察上下行的速率,最终目的是希望获得良好的上下行速率,影响速率的关键因素是分析的重点:资源调度、调制方式、MIMO,可以从上述三个方面评估网络。除此之外,时延也是用户感知的一个重要部分,从指标上看,分为用户面和控制面时延。
4.4.2 关键参数
4.4.2.1 RB
Resource Block,资源块。通常情况下提到的RB是指PRB,物理上实际分配的RB。网络给用户调度的RB越多,则可能获得越高的速率。由下表可以看到:在Normal CP的情况下RB在频域上是占用180kHz(12个频宽为15kHz的子载波),频域上市占用7个symbol(OFDM符号)
Configuration
Normal cyclic prefix
12 7
Extended cyclic prefix
6
24 3
Configuration
Normal cyclic prefix 12 7
Extended cyclic prefix 12 6
Downlink resource grid Uplink resource grid
4.4.2.2 MCS
Modulation and Coding Scheme,调制与编码策略。MCS决定了固定资源下携带数据量的大小。
MCS Index
Modulation Order
TBS Index
MCS Index
Modulation Order
TBS Index
Redundancy Version
rvidx
0 2 0 0 2 0 0
1 2 1 1 2 1 0
2 2 2 2 2 2 0
3 2 3 3 2 3 0
4 2 4 4 2 4 0
5 2 5 5 2 5 0
6 2 6 6 2 6 0
7 2 7 7 2 7 0
8 2 8 8 2 8 0
9 2 9 9 2 9 0
10 4 9 10 2 10 0
11 4 10 11 4 10 0
12 4 11 12 4 11 0
13 4 12 13 4 12 0
14 4 13 14 4 13 0
15 4 14 15 4 14 0
16 4 15 16 4 15 0
17 6 15 17 4 16 0
18 6 16 18 4 17 0
19 6 17 19 4 18 0
20 6 18 20 4 19 0
21 6 19 21 6 19 0
22 6 20 22 6 20 0
23 6 21 23 6 21 0
24 6 22 24 6 22 0
25 6 23 25 6 23 0
26 6 24 26 6 24 0
27 6 25 27 6 25 0
28 6 26 28 6 26 0
29 2 reserved 29 reserved 1
30 4 30 2
31 6 31 3
Modulation and TBS index table for PDSCH(蓝色部分)
Modulation, TBS index and redundancy version table for PUSCH(灰色部分)
(注:Modulation Order中2/4/6分别代表QPSK/16QAM/64QAM)
4.4.2.3 CQI
ChannelQualityIndicator信道质量指示符。终端周期性或非周期性向网络上报CQI,反馈终端测量到的信道质量情况,网络侧根据信道质量指示CQI采用不同的调制方式进行数据传输。CQI值越高代表终端侧测量到的信道质量越好。
CQI index modulation code rate x 1024 efficiency
0 out of range
1 QPSK 78 0.1523
2 QPSK 120 0.2344
3 QPSK 193 0.3770
4 QPSK 308 0.6016
5 QPSK 449 0.8770
6 QPSK 602 1.1758
7 16QAM 378 1.4766
8 16QAM 490 1.9141
9 16QAM 616 2.4063
10 64QAM 466 2.7305
11 64QAM 567 3.3223
12 64QAM 666 3.9023
13 64QAM 772 4.5234
14 64QAM 873 5.1152
15 64QAM 948 5.5547
4.4.2.4 RI
Rank Indicator,终端根据信号解调得到信号相关性的情况上报RI,网络侧将终端上报的RI作为单双流调度的依据之一。
4.4.3 关键指标
4.4.3.1 PDCP层速率
定义:
PDCP层下载速率=PDCP层总下载数据量/下载总时长
PDCP层上传速率=PDCP层总上传数据量/上传总时长
注:总时长为测试过程中占用4G和3G总时长。
PDCP层4G平均下载速率=PDCP层总下载数据量/占用4G时长
PDCP层4G平均上传速率=PDCP层总上传数据量/占用4G时长
4.4.3.2 Ping时延
定义:
Ping时延=各次Ping成功的时间相加/Ping成功的次数
注:Ping时延反馈了无线网络抖动的情况。
4.4.3.3 PRB调度
定义:
下行平均每秒调度PRB个数=下载过程中下行调度PRB总个数/总下载时长
上行平均每秒调度PRB个数=上传过程中上行调度PRB总个数/总上传时长
下行平均每时隙调度PRB个数=下行业务调度PRB个数总和/(已调度给UE的子帧数*2)
上行平均每时隙调度PRB个数=上行业务调度PRB个数总和/(已调度给UE的子帧数*2)
下行子帧调度率=调度给UE的子帧数总和 / 下行业务时长
上行子帧调度率=调度给UE的子帧数总和 / 上行业务时长
注:
上述指标代表了上下行PRB调度整体情况,PRB的调度数量取决于两个指标:1、平均每时隙调度PRB个数;2、子帧调度率。分别代表了资源调度的频域和时域。
在频域上RB调度的数量最大值由带宽决定:
系统带宽 1.4 3 5 10 15 20
传输带宽 RB Num 6 15 25 50 75 100
Subcarriers 72 180 300 600 900 1200
MHz 1.08 2.7 4.5 9 13.5 18
在时域上,FDD系统的调度是可全调度的。
在TDD系统中的调度由SubFrameAssignmentType、SpecialSubFramePatterns决定。
Uplink-downlink
configuration Downlink-to-Uplink
Switch-point periodicity Subframe number
0 1 2 3 4 5 6 7 8 9
0 5 ms D S U U U D S U U U
1 5 ms D S U U D D S U U D
2 5 ms D S U D D D S U D D
3 10 ms D S U U U D D D D D
4 10 ms D S U U D D D D D D
5 10 ms D S U D D D D D D D
6 5 ms D S U U U D S U U D
4.4.3.4 MCS
定义:
下行Code0 MCS平均值=下行码字0MCS值总和/下行码字0MCS上报次数
下行Code1 MCS平均值=下行码字1MCS值总和/下行码字1MCS上报次数
上行MCS平均值=上行码字MCS值总和/上行码字MCS上报次数
注:
对MCS进行统计时只统计MCS0-28,MCS29/30/31为保留位,可用于重传等情况。
MCS需要按照单流、双流及综合单双流分别统计。
4.4.3.5 CQI
定义:
Code0CQI平均值=下行码字0CQI值总和/下行码字0CQI上报次数,高频率CQI占比=max(每种CQI上报个数/CQI上报个数总和)
Code1CQI平均值=下行码字1CQI值总和/下行码字1CQI上报次数,高频率CQI占比=max(每种CQI上报个数/CQI上报个数总和)
CQI需要按照单流、双流及综合单双流分别统计。
4.4.3.6 BLER
定义:
PDSCH BLER=下行PDSCH信道传输总错误TB数/下行PDSCH传输总TB数。
PUSCH BLER=上行PUSCH信道传输总错误TB数/上行PUSCH信道传输总TB数
注:
BLER评估主要统计上下行共享信道传输的平均误块比率,反映业务信道传输数据的准确性和稳定性,也与网络侧设定的TARGETBLER有关,BLER一般情况下维持在网络侧设定的TARGETBLER以内(一般不超过10%,过低的设定可能会导致速率下降),CQI选取准则中BLER的阀值为10%,具体如下:
If the PDSCH BLER using the transport format indicated by median CQI is less than or equal to 0.1, the BLER using the transport format indicated by the (median CQI + 1) shall be greater than 0.1. If the PDSCH BLER using the transport format indicated by the median CQI is greater than 0.1, the BLER using transport format indicated by (median CQI – 1) shall be less than or equal to 0.1.(3GPP TS36.101_9.2.1.1)
(双流时code0/1的CQI见3GPP TS36.101_9.2.2.1)
4.4.3.7 单双流调度比例
定义:
单流调度比例=单流调度RB数/总调度RB数 X 100%
双流调度比例=双流调度RB数/总调度RB数 X 100%
注:
4.4.3.8 MIMO
MIMO评估的几个方面:
1、传输模式TM的选择,部分传输模式如TM2/TM7只支持单流,因此需要评估各种传输模式的占比情况,确定支持双流的TM3/TM8等的占比情况。
2、在支持双流的传输模式中,根据网络环境/终端对信号解调的情况将存在单流传输和双流传输并存的情况,建议可对单流及双流的调度比例进行评估。
3、RI上报,网络侧根据终端上报的RI结合计算出的频谱效率决定采用单流或双流方式传输。可关注RI1/RI2的比例。
4.5 移动性能评估
4.5.1 数据维度
移动性的衡量指标主要是切换成功率及切换时延,另外考虑到频繁切换和乒乓切换等问题,可以从切换间隔里程、切换间隔时间,这个角度评估网络。切换包括同频切换、异频切换以及4G/3G互操作(切换及重选)。
4.5.2 关键信令/事件
4.5.2.1 Measurement Report
LTE系统内切换共定义了5个测量事件:A1:服务值变得比门限值更好;A2、服务值变得比门限值更差;A3、邻小区优于服务小区;A4、邻小区比门限值好;A5、为A2和A4事件的组合。
当终端的测量结果满足原小区重配置消息中测量控制指示的测量事件,此时终端上报Measurement Report(测量报告)给网络侧。
4.5.2.2 RRC connection reconfiguration
这里提到的重配置消息指含MobilityControlinformation的重配置消息,其中还包含一些必要的参数如:new C-RNTI,专用的RACH前导等
4.5.3 关键指标
4.5.3.1 切换成功率
切换成功率=切换成功次数/切换尝试次数×100%
终端进行具体切换操作时从测量报告开始的,但是从切换的整体流程是从终端在收到重配置消息中的测量控制开始的,终端根据网络侧配置的测量控制消息进行测量,满足条件则触发终端上报测量报告。网络侧根据终端上报的测量报告及网络侧切换配置(例如邻区配置等)决定是否进行切换。具体切换流程见下图:
Intra-MME/Serving Gateway HO(3GPP 36300_10.1.2.1.1)
4.5.3.2 切换控制面时延
定义:
切换过程中从发起切换到在目标小区完成随机接入的时延。
切换控制面时延= 切换尝试到切换成功之间的时间差
4.5.3.3 切换用户面时延
定义:
切换过程中在源小区收到RLC层数据包的最后一个子帧到在目标小区上收到RLC层数据包的第一个子帧的时间差。取切换成功的事件进行统计。
计算公式:切换用户面时延=Time_t-Time_s(ms)
注:
Time_t:切换成功之前最后一个数据包RLC_DL_AM_ALL_PDU或者RLC_DL_UM_DATA_PDU中,并且信元RB_CFG_IDX的值在[3,10]之间,的最后一个子帧的帧号子帧号对应的时间;
Time_s:切换成功后第一个数据包RLC_DL_AM_ALL_PDU或者RLC_DL_UM_DATA_PDU,且RB_CFG_IDX值在[3,10]之间,的第一个子帧的帧号子帧号对应的时间。
4.5.3.4 LTE->CDMA2000系统间小区切换出成功率
定义:
LTE->CDMA2000系统间小区切换出成功率 = LTE->CDMA2000系统间小区切换出成功次数 / LTE->CDMA2000系统间小区切换出准备次数×100%;
4.5.3.1 LTE->CDMA2000系统间小区切换出时延
定义:
LTE->CDMA2000系统间小区切换出时延 = LTE->CDMA2000系统间小区切换出成功时间点—LTE->CDMA2000系统间小区切换出准备时间点;
5. 附录:其他关键指标