中国移动自动路测监控指导手册-V2
自动路测监控指导手册
(2012年3月编制)
方 K
目录
目录
一.测试计划创建 . .......................................................................................................................... 2
1.1添加测试计划信息 . ............................................................................................................ 2
1.2 配置测试方案 . ................................................................................................................... 3
1.3测试计划下发 . .................................................................................................................... 9
二 .测试前需检查的内容 . ............................................................................................................ 10
2.1测试计划命名核查 . ......................................................................................................... 10
2.2测试号码核查 . ................................................................................................................. 10
2.3下发时间核查 . ................................................................................................................. 12
2.4网格配置核查 . ................................................................................................................. 12
2.5通道配置核查 . ................................................................................................................. 12
2.6 ATU设备管理 . ................................................................................................................. 14
三.测试过程中监控内容 . ............................................................................................................ 15
3.1 监控登陆日志 . ................................................................................................................ 15
3.2 事件监控 . ........................................................................................................................ 15
3.3 告警监控 . ........................................................................................................................ 16
3.4 监控状态 . ........................................................................................................................ 17
3.5 实时监控 . ........................................................................................................................ 18
3.6 监控log 列表 . ................................................................................................................ 20
四. 测试结束后的监控内容 . .......................................................................................................... 21
五.常见问题及处理手段 . ............................................................................................................ 21
5.1计划任务执行延时或未能正常下发 .............................................................................. 21
5.2 GPS信息监控不到 . ......................................................................................................... 21
5.3 测试LOG 缺失和统计异常 . ............................................................................................ 22
5.4 测试事件监控不到 . ........................................................................................................ 22
六. 需要上报省公司的内容和要求 . .............................................................................................. 22
为了形成自动路测测试监控的规范性和可操作性,便于今后更好的开展测试工作,结合前期测试监控经验与体会编写了本监控手册,本手册主要为集团自动路测测试监控提供参考和鉴戒,以总览、图表、操作步骤及实例等各种形式对自动路测监控管理工作进行全面介绍,确保全省监控人员的监控工作有据可依,提升自动路测测试质量。
本手册自印发之日起执行,适用范围为黑龙江移动通信有限公司各分公司网络部门测试人员与监控人员,解释权、修改权归黑龙江移动通信有限公司。
一. 测试计划创建
因为测试计划的制定是否正确,直接影响到最终的测试结果,为了防止其他测试计划对正在执行的测试计划的影响,禁止在测试计划正常测试中制定新的测试计划。
1.1添加测试计划信息
测试计划信息分为三部分: 测试计划基本信息、网络配置信息、Log 文件处理策略。 步骤1. 在图所示
页面,点击按钮,页面自动跳转到测试计划信息默认页面,如下
附图1. 测试计划信息页面
步骤2. 配置测试计划信息:
1) 测试计划基本信息:
● 测试计划名称:建议用户规范计划的名称以便于后续查找
● 下发时间:建议设置在正式测试之前30分钟下发
● 添加网格:添加要测试的网格
2) 网路配置信息:(注意回传模块接入点设置,其他建议使用默认配置,无需更改)
3) Log 文件处理策略(建议使用默认设置,无需更改)
点击
按钮,页面自动跳转到页面,添加测试计划信息成功,新增的测试计划信息显示在列表中,如下图所示
附图2. 测试计划信息添加成功页面
1.2 配置测试方案
步骤1. 打开页面,如下图所示
附图3. 测试计划列表页面
步骤2. 点击按钮,页面自动跳转到配置测试计划初始化页面,如下图所示
附图4. 配置测试计划初始化页面
步骤3. 点
击
页面,如下图所示
中模块列表中
的,页面自动跳转
到
附图5. 测试方案列表页面
步骤4. 点击中的,跳转到,如下页面:
附图6. 测试命令组信息页面
● 名称:建议规范填写名称,例如:移动GSM 语音主叫
● 循环次数:默认值999
● 是否禁用:启用
● 时间条件:遵循
● 执行日期:计划测试的日期
● 执行时间:计划测试的时间
● 执行序号:建议默认值,无需改变
步骤5. 在点击“”按钮,测试命令组信息修改成功,如下图所示
附图7. 测试命令组信息修改成功页面
步骤6. 在下拉菜单中选择“GSM/TD/WCDMA主叫”点击
令配置信息对话框,如下图所示按钮,页面弹出测试命
附图8. 测试命令配置页面
● 名称:建议默认设置,无需改变
● 测试次数:建议值 999 (务必保证和被叫次数相同)
● 呼叫号码:无需填写,在选择被叫后会自动生成
● 请选择被叫:在下拉菜单中选择该主叫要呼叫的被叫号码
● 随机通话时长测试:固定通话时长
● 持续时间(单位:秒):180 (表示通话时长3分钟)
● 呼叫间隔(单位:秒): 20 (表示两次通话时间间隔20s)
● 最长通话时间(单位:秒)10( 建议默认值设置,无需改变)
● 是否做MOS 测试:进行MOS 测试 (建议默认值设置,无需改变)
● 是否呼叫语音评估服务器:不呼叫语音评估服务器(建议默认值设置,无需改变) ● MOS 值的最低门限:2.0 (建议默认值设置,无需改变)
步骤8. 根据实际情况配置完测试命令,点击
显示在测试命令列表中,如下图所示 按钮,测试命令添加成功,新添加的测试命令
附图9. 测试命令添加成功页面
步骤9. 配置通道3-GSM 语音被叫命令
附图10. 被叫测试命令添加
附图11. 被叫测试命令添加设置
继续在“”按以上步骤添加被叫测试命令,其他模块的命令依此类推。
特别注意:CDMA 模块-通道6/7的测试命令选择为“CDMA 语音主(被)叫”
1.3测试计划下发
以上命令配置完成后,返回测试计划主界面,如下图;
附图12. 测试计划下发
● 定时下发设置:双击“时间”也可以设置计划下发时间
● 实时下发设置:点击“”可以将计划立即下发
● 查看测试计划信息:点击“● 复制测试计划:点击“”可查看和修改计划信息,点“”可查看计划信息 ”可以将原来的计划复制成一个新的测试计划。然后修改相
应的测试时间和下发时间即可。
二 .测试前需检查的内容
2.1测试计划命名核查
首先需要核查各地市测试计划是否按照上报计划配置执行,命令是否规范。特别是测试计划命名必须严格按照集团规范命名,否则会将非集团测试数据统计到集团测试中,影响指标,同时务必在平台上配置的测试计划注意选择省巡检、日常优化或设备调测(集团巡检无权限选择)。个别地市存在多个测试设备,核查时要多注意。另外需要强调的是:地市公司配置测试计划命名必须和集团规范要求一致,确保无误。
命名规范:省巡检(或日常优化、设备调试)-XX 市网格-网格号-测试日期-时间段-测试版本号 举例:牡丹江 网格5正,3月25日测试,时间段:18-21点 命名:设备调试-牡丹江-网格5-正向-120325pm-329
2.2测试号码核查
要求地市检查测试计划配置中的所有测试号码是否与上报省公司(集团)的测试设备通道中测试号码一致,如果配置错误,请在测试之前通知配置错误的地市公司和省公司。 2.2.1 ATU设备管理测试号码核查
进入ATU 设备管理-ATU 设备信息管理-黑龙江-XX 市-BOXID, 对ATU 设备模块信息中的SIM 卡号进行核查。
2.2.2测试计划中测试号码核查
进入测试计划管理-ATU 测试计划管理-黑龙江-xx 市-BOXID ,点击测试计划的配置方案 “
”,进行配置信息的核查。
进入GSM/TD/WCDMA语音主叫测试命令修改核查被叫通道选择及呼叫号码是否准确。
2.3下发时间核查
需要注意配置下发时间是否正确:测试计划时间和下发时间是否正确,下发时间与测试执行时间至少间隔10分钟,充分预留出设备前台接收任务后自动重启时间。
2.4网格配置核查
计划测试网格与实际配置一致性检查,计划测试网格和配置网格必须完全一致,否则直接影响网格的渗透率。
2.5通道配置核查
逐一检查每个模块通道配置正确情况。每个模块有两部分组成,其一为基本信息列表包括执行日期和执行时间、通道名称、循环次数。其二为测试命令列表,需要重点核查(需要注意主叫和被叫的配置命令的差异)。
● 测试次数:建议值 999 (务必保证和被叫次数相同) ● 呼叫号码:无需填写,在选择被叫后会自动生成
● 请选择被叫:在下拉菜单中选择该主叫要呼叫的被叫号码(注意检查是否选择) ● 持续时间(单位:秒):180 (表示通话时长3分钟) ● 呼叫间隔(单位:秒): 20 (表示两次通话时间间隔20s) ● 是否做MOS 测试:进行MOS 测试 (建议默认值设置,无需改变)
● 是否呼叫语音评估服务器:不呼叫语音评估服务器(建议默认值设置,无需改变) ● MOS 值的最低门限:2.0 (建议默认值设置,无需改变)
核查联通模块时需要关注:联通主被叫配置网络测试锁定在W/G双模切换模式上。
核查电信模块时需要关注:主叫模块的测试模式是EVRC
。
2.6 ATU设备管理
通过ATU 设备信息管理,核查设备模块信息是否配置完整,此信息的准确和完整性将直接影响到该组模块的正常工作。
ATU 设备信息中可获悉设备工作状态(在线或离线),只有设备状态为在线时,测试计划才可以自动正常下发,如是离线状态通知该地市检查是否开机。测试设备是否升级为最新软件版本。
三.测试过程中监控内容
3.1 监控登陆日志
透过ATU 登录日志可详细了解各地市的登录状态、登录时间和离线时间,可以了解设备登录时间和测试期间的工作状态。
设备频繁登录,会影响设备上传数据,导致数据积压。与地市沟通检查回传模块天线接触是否良好,或者需要人工重启观察。一般测试计划正常下发3-5分钟后设备要正常登陆,如果不能正常登陆联系前端测试人员看各项指示灯是否正常。必要或允许的话需将GPS 和回传的天线拿出车外。
3.2 事件监控
测试计划成功下发后,到了执行时间开始执行测试时,需要监控各地市是否出现测试事件。举例说明:点击“监控管理”标签页,在左侧树状栏中点击‘事件监控->黑龙江->牡丹江’,页面自动跳转到事件监控页面。关注一下该地市测试事件、事件时间是否正常,由于平台延时原因,测试事件有时会上传较慢,甚至长时间出现不上传的情况,类此情况需要及时告知该地市检查前端设备有无问题,情况严重者上报至设计院并及时与厂家沟通解决。
核查地市SIM 卡是否欠费,如出现SIM 欠费情况则会出现持续多次的呼叫失败,这类情况需要及时告知该地市和上报省公司处理。
监控中对地市测试过程连续出现2次和2次以上的异常事件,需要通知该地市对问题原因进行定位(如测试号码定义错误等),并及时上报省公司自动测试管理群及管理人员。
3.3 告警监控
告警监控是需要高度重视和关注的主要工作,如果设备存在较严重的告警执行测试任务,对我们的测试指标会有较大影响,直接影响考核成绩。
举例说明点击
标签页,在左侧树状栏中点击‘告警监控->黑龙江->齐齐哈尔’,页面
自动跳转到告警监控页面。
● 告警原因 (告警有轻重级别,红色为最高级别) ● 告警时间 (告警发生时间是历史还是当前)
● 清除时间 (告警如有清除时间代表:该告警已消除,反之告警依然存在) ● 在告警监控中会出现相应的告警信息。
例1:
此告警影响设备上报GPS ,无法在监控中查看设备轨迹,最终log 也将无GPS 信息,无法在地图上定位,需要通知该地市请测试的人员检查一下GPS 天线,很有可能是接触不良导致。
例2:
插好;强制重启或通过WEB 界面上的重启功能给设备下达重启命令进行重启。
3.4 监控状态
当天测试完毕后,需要通过点击标签页,在左侧树状栏中点击“状态监控”,看各地
市LOG 是否完全回传完毕,没有上传完毕不能将自动路测设备提前关闭,遇到平台上传较慢阻塞的
情况时,需要电话通知各地市延长关机时间。
监控状态需要注意剩余磁盘空间最好要大于100M ,设备的温度不要超过60度,未上传的文件不要超过15个。
3.5 MOS监控
点击标签页,在左侧树状栏中点击‘MOS 监控>黑龙江>齐齐哈尔’,页面自动跳转
到MOS 监控页面。如MOS 值持续偏低,应与地市沟通要求检查前端设备,定位故障点,同时与厂家沟通解决。如果情况严重汇报自动路测管理群,进而汇报至设计院。
3.6 实时监控
点击flex 监控就进入实时监控的界面,小绿点的位置即为当前测试车辆所在位置,注意看前后台是否在时间上同步。
FLEX 监控可实时监控前台设备测试轨迹,观察是否执行网格内正常路线行驶。
双击
就会出现实时的状态,可以实时全面观察测试中状况,
包括当前车速、模块工作状态、告警和事件统计等。能充分反映设备当前的工作是否正常,需要适当关注。
3.7 监控log 列表
自动路测设备log 文件是以一个小时为单位的,测试一个小时过后看一下已完成log 列表是否正常,正在测试中的log 在未完成log 列表中。
四.测试过程中应规避的测试管理问题
4.1 严格规避网格内或网格外单条路线重复测试以弥补平均车速,将在网格测试重复率中进行考核。
4.2规避定点停车测试,将对网格测试平均车速进行考核。
4.3 规避网格内绕开热点区域测试,将在网格测试重复率中进行考核。
五.测试结束后的监控内容
测试结束后前台测试车辆要待在原网格停留3-5分钟,以免影响网格溢出率指标,后台需要监控一下log 列表,看是否所有的log 都在已完成的log 列表文件
六.常见问题及处理手段
5.1计划任务执行延时或未能正常下发
1. 测试计划配置错误,需要重点检查测试计划时间和模块通道配置是否正确。
2. 设备故障,重启设备后尚未解决,上报省公司修改测试计划,联系厂家处理。
3. 平台原因,近期平台稳定性较差,会造成测试任务不能正常下发,需要地市人员加强关注。
5.2 GPS信息监控不到
原因可能是:1. 实际无测试;
2.GPS 故障;
3. 回传模块存在问题;
4. 测试平台原因。
如遇到类似情况需及时通知问题地市检查处理,严重情况上报省公司自动测试管理群,设备问题转至厂家。
5.3 测试LOG 缺失和统计异常
原因可能是:1. 测试完成后,预留的设备上传时间不足,造成文件缺失,统计异常。
2. 平台统计原因,如遇需要上报省公司和全省日报汇总地市。
5.4 测试事件监控不到
原因可能是: 1.回传模块故障
2.回传数据卡欠费
3.平台原因延时
七. 考核测试监控与记录事项
考核测试监控与记录事项.xlsx
八. 需要上报设计院的内容和要求
待续