路测数据分析及应用
用户感知评价
良好的用户感知是运营
语音业务 感知评价 网页浏览 感知评价 视频播放 感知评价 网盘业务 感知评价 邮件业务 感知评价
商吸附用户的关键;
网络质量指标不能全面
电 话 能 否 打 通 电 话 会 不 会 掉 话 网 页 能 不 能 打 开 网 页 打 开 快 不 快 视 频 能 否 播 放 多 长 时 间 始 播 放 播 放 卡 不 卡 能 否 下 载 上 传 速 度 快 不 快 能 否 发 送 接 收 速 度 快 不 快
网 盘 上 传 开 始 时 延 分 布
网 盘 下 载 开 始 时 延
网 盘 下 载 开 始 时 延 分 布
网 盘 上 传 平 均 速 率
网 盘 上 传 速 率 分 布
网 盘 下 载 速 率
网 盘 下 载 速 率 分 布
邮 件 发 送 成 功 率
邮 件 正 文 接 收 成 功 率
邮 件 完 整 接 收 成 功 率
CSFB语音业务(长呼、短呼)
• CSFB语音业务接入性(回落成功 率、回落时延、CSFB话音接通率、 端到端接通时延等; • CSFB语音业务返回性能(挂机返 回LTE成功率、返回时长等; • CSFB语音业务保持性(掉话率); • CSFB语音业务质量(MOS值 等)。
内网数据业务(FTP、PBM) •LTE网络覆盖性能(覆盖率、带宽 情况、RSRP分布、TxPower分布) •LTE网络干扰性能(RS-SINR分布、 良好覆盖率等) •LTE网络移动性能(系统内切换成 功率及时延、系统间切换/重定向 成功率时延等) •LTE网络调度相关信息(MCS、 CQI、双流占比、RB调度等) •LTE网络内网速率表现(上下行平 均速率、速率分布等
定位网络的问题、查找异常事件原因,并做调整效果对比测试
对小区设置参数实地进行验证 提升业务质量,保证用户体验
路测与其他数据源的对比
路测优势
真实客观反映网络覆 盖,全面评估实际道路 网络质量和业务质量; 准确的位置信息,方 便精确定位问题; 采集信令,便于对网 络问题原因进行分析; 可进行友商测试,方 便对比。
视 频 播 放 成 功 率
视 频 播 放 时 延
视 频 播 放 时 延 分 布
视 频 卡 顿 次 数 比
每 次 卡 顿 平 均 时 长
视 频 播 放 掉 线 率
网 盘 上 传 开 始 成 功 率
网 盘 下 载 开 始 成 功 率
网 盘 上 传 完 成 成 功 率
网 盘 下 载 完 成 成 功 率
网 盘 上 传 开 始 时 延
路测劣势
测试终端类型有限、数 量有限,仅能体现个别抽 样用户的用户感知; 仅能反映测试时间段的 网络情况; 测试路线受限于道路情 况,难以进入窄路、居民 住宅、办公楼等区域; 人力物力投资均较大。
有没有可以替代路测的方法呢?
MR,最小化路测,基于智能终端的无线网络质量分析系统, 或者通过某些应用软件上报测量信息。。。
公网数据业务(网页浏览、网盘业 务、流媒体、邮件、speedtest等) •公网业务接入性(主页面打开成功 率、时延,流媒体播放成功率、时 延,网盘上传下载开始成功率、时 延等) •公网业务保持性(流媒体掉线率、 冲缓冲次数,网盘上传下载掉线率 等) •公网业务质量(网盘上传、下载平 均速率,网页完整打开成功率、时 延等)
定义测试指标 测 试 规 范 测 试 准 备
完成测试脚本 测 试 执 行
确保测试路线、 测试设备正常
测试log解析 数 据 分 析
确定测试业务
完成加密密匙、 解密文件 准备测试卡、测 试车辆 调测测试设备
导出测试log
出具测试指标
选择测试仪表
备份测试log
整理测试结果、 筛查网络问题 分析问题原因 (联合其他数据 源) 完成测试报告
MR提取方法、统计方法、数据 的输出格式和内容各厂家间机 制不同而存在差异。 各地业务模型,业务量相差较大 各地业务模型,业务量相差较大 ,FACH 等功能开通情况不同,使 ,FACH 等功能开通情况不同,使 得采样量存在较大差别;且 MR 得采样量存在较大差别;且 MR 数数 据与互操作等网络参数设置密切 据与互操作等网络参数设置密切 相关,不适宜作为横向比较。 相关,不适宜作为横向比较。
制定测试方法
整理测试问题、 完成测试日报
确定测试路线
预测试
路测测试指标—LTE网络质量
覆盖 干扰 CSFB 移动性 LTE速率 RSRP连 RS-SINR RSRP≥- 续100米 LTE网络 RSCSFB端 连续连 100dBm 小于占比 SINR≥- 续100米 重叠覆 到端语 栅格比 110dBm (栅格 5dB栅格 小于盖率 音接通 例 里程占 化) 比例 5dB里程 率 比 占比 RSRP连 RS-SINR 续100米 小于连续100 LTE栅格 110dBm CSFB端 米小于数/总栅 5dB记为 重叠覆 到端语 记为连 格数 续弱覆 连续质 盖率 = 音接通 RSRP≥*100%, RS盖路段, 差路段, 重叠覆 率=CSFB 100dBm 栅格中 SINR≥RSRP连 RS-SINR 盖度>=3 主叫接 ≥90%的 5dB的栅 的栅格 续弱覆 连续质 的采样 通次数 数/总栅 采样点 格数/总 盖里程 差里程 点 / 总采 /CSFB主 格数 占用LTE 栅格数 占比 占比=连 样点 * 叫试呼 *100% 网络, *100% . =RSRP连 续质差 100% 次数 则该栅 续弱覆 路段里 ×100% 格为LTE 盖路段 程之和 栅格 /LTE测试 之和/LTE 测试里 里程 程 LTE下行 LTE上行 CSFB挂 CSFB端 LTE - LTE下行 LTE上行 速率低 速率低 CSFB挂 机返回 LTE系统 >WCDM 平均速 平均速 于4Mbps 于1Mbps 到端建 机返回 LTE时延 内切换 A重定向 率(栅 率(栅 比例 立平均 比例 LTE时延 大于3s 成功率 时长 成功率 格化) 格化) (栅格 (栅格 的比例 化) 化)
测试场景
CQT
LTE覆盖重点和热点区域:、 营业厅、地铁、景点、医疗 机构、学校、交通枢纽、大 型商场购物中心等
LTE重点覆盖的县城
县城
测试决定测试 场景
主要内容
1. 路测数据的采集及特点
2. 路测数据的解析方法
3.路测数据的分析方法
路测数据内容
GPS、 时间信 息
GPS信息: Longitude、 Latitude、 Altitude、Speed 时间信息:日期、时、分、秒、毫秒
海量路测数据分析系统整体架构(ActixOne)
ActixOne系统是集中式数据管理分析
系统。以处理路测数据为主要功能, 采用Oracle数据库完成对入库数据的 管理,通过基于 Web 的界面提供可视 化、分析和优化软件功能。 数据加载服务器自动加载处理测试数 据和网络基站配置数据,并将结果传 送给存储服务器( oracle 数据库), 用户通过web访问中间件服务器,浏 览海量数据的分析结果或查看历史测 试数据。
CSFB端 到端建 立时延 总和/ CSFB主 叫接通 次数总 和
LTE下行 主叫终 LTE- 平均速 主叫终 端发出 LTE系统 >WCDM 率(栅 端发出 disconne 内切换 disconne ct与主叫 A重定向 格化)= 成功次 ct与主叫 终端在 成功次 所有栅 数/LTE系 终端在 LTE网络 数/LTE- 格下行 统内切 LTE网络 发起TAU >WCDM 速率之 换尝试 A重定向 和/PBM 发起TAU complete 次数 complete 的时间 尝试次 下行速 *100% 的时间 差大于 数*100% 率采样 3s的比 差 栅格数 例
服务小区参数、UE状态参数、邻区参数 基本测量参数:RSRP、RSRQ、RS-SINR、TxPower、BLER等 业务测量参数:数据速率等 RRC层信令:Attach、RRC建立、RRC重配置(ERAB建立、 MR、切换等) NAS消息:如服务请求、Disconnect、Connect等 系统消息:SIB3、SIB5、SIB7、SIB11等等 测试过程记录信息:如HTTP测试开始、测试结束等 事件记录信息:如主页面打开、视频开始播放等
反映用户体验,可能出 现网络质量评价好、但 用户体验差的情况; 路测数据可以统计用户
话 音 接 通 率
话 音 信 令 掉 线 率
主 页 面 打 开 成 功 率
完 成 打 开 成 功 率
主 页 面 打 开 时 延
主 页 面 打 开 时 延 分 布
完 成 打 开 时 延
完 成 打 开 时 延 分 布
参数 信息
信令 消息
事件 标签
路测数据内容—参数
表 格 呈 现 便 于 灵 活 计 算
GPS信息
地 理 化 呈 现 更 为 直 观
时间信息
统 计 呈 现
路测数据内容—信令
RRC信令
信令方向及对应信道
系统消息
NAS消息
详细信令内容
路测数据内容—事件
移动性相关事件 数据业务测试相关事件
切换成功地理化呈现
LTE上行 平行速 率(栅 格化)= 所有栅 格上行 速率之 和/PBM 上行速 率栅格 数
LTE下行 低速率 比例 (栅格 化)=下 行速率 小于4M 的栅格 数/下行 总栅格 数
LTE上行 低速率 比例 (栅格 化)=上 行速率 小于1M 的栅格 数/总栅 格数
路测测试指标—LTE网络用户感知
邮 件 正 文 接 收 时 延
邮 件 正 文 接 收 时 延 分 布
邮 件 完 整 接 收 时 延
邮 件 完 整 接 收 时 延 分 布来自邮 件 发 送 时 延
邮 件 发 送 时 延 分 布
感知类相关指标,真实 反映用户体验。