CDMA无线网络DTCQT测试指导书华为公司.doc

新疆CDMA无线网络DT/CQT测试指导书目 录第一部分 总则41概述42术语定义43测试场景分类44测试人员及设备要求54.1测试人员要求542测试设备要求：5421硬件要求5422软件要求5第二部分 DT测试61、城区场景611语音DT测试方法612语音DT测试项目及定义7121 CDMA部分72、农村场景821测试方法822 测试项目及定义8221 CDMA部分8第三部分 CQT测试101语音CQT测试方法1011测试时间1012测试点的选取1013拨打要求112 语音CQT测试项目及定义1221 CDMA部分123数据业务CQT测试方法134 数据业务CQT测试项目及定义14第四部分 测试数据的文档输出161、数据完整性162测试报告要求1721省级DT/CQT总体测试报告要求（电子版）1722分地市(场景)DT/CQT测试报告要求（电子版）18附件1：参考指标18第一部分 总则1 概述本指导书主要针对CDMA无线网络现场评估测试提出DT/CQT测试指导意见。由于不同的地理环境与用户分布对应不同的无线场景，本指导书分别对城区、农村、高速公路等不同无线场景下的DT/CQT测试条件、测试要求和测试方法进行了详细描述。本次DT/CQT测试的目的是为了摸底评估CDMA无线网络质量现状。考虑现阶段不可能在LT网内设置数据测试服务器，本次仅在CQT测试中进行少量数据业务的测试，从用户感知的角度进行网络质量评估。2 术语定义DT（Driving Test）测试是使用测试设备沿指定的路线移动，进行不同类型的呼叫，记录测试数据，统计网络测试指标。CQT（Call Quality Test）测试是在特定的地点使用测试设备进行一定规模的拨测，记录测试数据，统计网络测试指标。3 测试场景分类城区场景：主要进行市区和郊县（含县城和人口密集型乡镇）的城区道路DT测试与深度覆盖CQT测试，包含所辖水域。农村场景：主要进行行政村道路DT测试，包含所辖水域。高速公路场景：主要进行高速公路的道路DT测试。备注：各省如计划对国道、省道、县道等重要公路开展专题测试，可参考高速公路场景的测试方法；与城区紧密结合的道路可纳入城区场景的测试。 4 测试人员及设备要求 4.1测试人员要求要求测试人员应熟悉CDMA相关标准规范，熟悉DT/CQT测试设备及相关测试方法，并具有相关测试经验。42测试设备要求：421硬件要求以下所有硬件均要求符合CDMA无线网络DT/CQT测试仪表技术规范。1、测试手机在同一城市测试时必须使用同一型号手机。【由华为公司提供】2、便携式测试电脑便携式测试电脑要求能提供不少于2个USB接口以满足多部手机同时测试(USB接口不足的情况下可通过USB Hub扩展USB接口)，建议CPU处理速度2.6GHz以上，内存不低于1G，硬盘空间不低于20G。【由华为公司提供】4、GPS每套测试系统应配备一部。【由华为公司提供】5、测试SIM/UIM卡应使用当地CDMA签约用户卡。【回去再次确认】422软件要求1、路测软件路测软件应符合CDMA无线网络DT/CQT测试仪表技术规范的要求，要求测试软件能够支持CDMA测试标准；【由华为公司提供】2、地图准备MapInfo格式的二维电子地图和纸质地图。电子地图用于导入到测试软件中，提供地理化信息，以便辅助测试。纸质地图同样用来辅助测试和分析，可以是旅游地图或地形图等。【由电信无线局提供】3、基站信息表建议准备现场测试区域最新基站信息表资料，该基站信息表格式是现场测试软件所能支持的格式，以便测试和分析时能够直接将基站信息导入软件中，辅助测试和分析。【由电信无线局提供】4、测试路线在进行路测前要规划好测试路线，选取DT测试路线原则：在DT测试范围内，应根据测试目的尽可能遍历区域内多数车辆可通行道路，且尽量不要重复。并在电子地图上画出测试线路。【新疆具体测试路线由电信无线局提供】CQT全疆测十个县，五地州有几个算几个。第二部分 DT测试1、城区场景11语音DT测试方法（一）测试时间：必须安排在工作日（周一至周五）10:30-14:00，17:00-22:00进行。（二）测试路线：要求均匀覆盖城区主要街道，并且尽量不重复。城区主干道、商业密集区道路（商业街）、住宅密集区道路、学院密集区道路、机场路、环城路、高速进城路线、城区内主要桥梁和隧道等为必测道路。测试范围应包括地级市城区和其他外围郊区、县城、人口密集乡镇等郊县区域。（三）测试速度：在城区保持正常行驶速度，不设置最高限速。（四）拨打要求：1、测试时，保持车窗关闭，测试手机置于车辆第二排座位中间位置，并将测试手机水平固定放置。2、手机拨叫、挂机都采用自动方式，拨打10000号码。【交接后，再次拨打10010免费客服号码是否还是可行？到时跟联通客服再次确认。】3、每次通话时长100秒，呼叫间隔20秒；如出现未接通或掉话，应间隔20秒进行下一次试呼。3、测试过程中，遇到无信号的情况，继续按照设置间隔要求不断进行试呼，所有的通话过程全部计入测试结果。4、测试结束后，根据测试项目的定义和说明，用后台数据处理软件统计导出测试项目指标。5、全部测试必须使用相同的测试仪表和后台数据处理软件。6、五地州城区需要在DT过程中测试数据业务下载。12语音DT测试项目及定义121 CDMA部分（1）覆盖率定义：覆盖率(Ec/Io-12dB&反向Tx_Power15dBm&前向Rx-90dBm)的采样点数/总采样点数×100；说明：a. 采样点数为全部采集过程的采样点样本数之和，其中空闲状态下采集到的采样点数须按Ec/Io-12dB&前向Rx-90dBm纳入统计。b. 采样点数取统计结果之和。（2）网络接通率定义：网络接通率被叫接通总次数/试呼总次数×100；说明：a. 试呼次数：出现第一条AC Origination Message表示进行了试呼，一次呼叫的多条AC Origination Message仅计为一次。b. 被叫接通次数：当一次试呼开始后被叫出现了Service Connect Completion Message消息就计数为一次接通。c. 网络接通率被叫总Service Connect Completion Message数/总AC Origination Message数×100d. 网络接通率取主、被叫手机的综合测试统计结果。（3）掉话率定义：掉话率掉话总次数/接通总次数×100；说明：a. 接通次数：当一次试呼开始后出现了Service Connect Completion消息就计数为一次接通。b. 掉话次数：在一次通话中如出现Release Order，就计为一次呼叫正常释放。只有当该消息未出现而由专用模式转为空闲模式时，才计为一次掉话。c. 掉话率（主叫掉话+被叫掉话）/（主叫接通+被叫接通）×100d. 掉话率取主、被叫手机的统计结果。2、农村场景21测试方法（一）测试时间：安排在每天10：30-21：30之间进行。（二）测试范围：包含省会城市在内的三个本地网下属各发达行政村。【除了市区外和高速路以外的场景】（三）测试路线：要求均匀遍历行政村内主要道路，并且尽量不重复。（四）测试速度：保持正常行驶速度，不设置最高限速。（五）拨打要求：1、在测试时每次通话时长100秒，呼叫间隔20秒；如出现未接通或掉话，应间隔20秒进行下一次试呼。不考虑交通情况，连续拨打测试时长应不少于30分钟。22 测试项目及定义221 CDMA部分（1）覆盖率定义：覆盖率(Ec/Io-12dB&反向Tx_Power20dBm&前向Rx-95dBm)的采样点数/总采样点数×100；说明：a. 采样点数为全部采集过程的采样点样本数之和，其中空闲状态下采集到的采样点数须按Ec/Io-12dB&前向Rx-95dBm纳入统计。b. 取统计结果之和。（2）网络接通率定义：网络接通率被叫接通总次数/试呼总次数×100；说明：a. 试呼次数：出现第一条AC Origination Message表示进行了试呼，一次呼叫的多条AC Origination Message仅计为一次。b. 被叫接通次数：当一次试呼开始后被叫出现了Service Connect Completion Message消息就计数为一次接通。c. 网络接通率被叫总Service Connect Completion Message数/总AC Origination Message数×100d. 网络接通率取主、被叫手机的综合测试统计结果。（3）掉话率定义：掉话率掉话总次数/接通总次数×100；说明：a. 接通次数：当一次试呼开始后出现了Service Connect Completion消息就计数为一次接通。b. 掉话次数：在一次通话中如出现Release Order，就计为一次呼叫正常释放。只有当该消息未出现而由专用模式转为空闲模式时，才计为一次掉话。c. 掉话率（主叫掉话+被叫掉话）/（主叫接通+被叫接通）×100d. 掉话率取主、被叫手机的统计结果。第三部分 CQT测试1语音CQT测试方法11测试时间根据新疆实际情况，安排在工作日和休息日10:30-22:00进行。原则上应根据测试点对象不同，优先安排在该区域的话务忙时进行测试，其中居住场所优先安排在休息日或晚间；医院优先安排在工作日门诊时间；风景区优先安排在休息日景点开放时间；餐饮场所优先安排在餐饮时间；娱乐场所优先安排在晚间开放时间。12测试点的选取（一）选取原则CQT测试点应重点在话务量相对较高的区域、品牌区域、市场竞争激烈区域、特殊重点保障区域内选取。地理上尽可能均匀分布，场所类型尽量广。重点选择有典型意义的大型写字楼、大型商场、大型餐饮娱乐场所、大型住宅小区、高校、交通枢纽和人流聚集的室外公共场所等。（二）选取比例1、各省市根据城市网络规模详细选取本省每个本地网的测试点，其中室内场所应占80%，室外场所应占20%。表3 不同规模网络测试点选取数量要求网络规模分类用户预测到达数测试点数量下限特大型网络150万50大型网络100万用户数150万40中型网络50万用户数100万30小型网络50万202、各类型的测试点选取比例参照下表：表4测试点类型选取比例表测试区域类型测试点类型测试点 所占比例人流密集类商业会展中心、大型商场、主干街道店铺、步行街市、专业市场、机场候机楼、车站、学校、重要旅游点、大型医疗机构等。30%餐饮娱乐类大型餐饮娱乐场所、三星级以上酒店（大堂及其属下娱乐场所）、酒楼、饭店、大型电影院等。20%商务办公类政府机关等事业单位（包括下属各主要职能单位）、商务中心、企业、厂矿、农林场、大型办公场所等。20%居民住宅类主要大型住宅小区、普通民居密集区、宿舍、公寓等。30%（三）采样点的选择1、CQT测试点的采样点位置选择应合理分布，尽可能选取人流量较大和移动电话使用习惯的地方，能够暴露区域性覆盖问题，而不是孤点覆盖问题。2、室外公共场所和大型独体建筑物（除地下室和客梯外）至少选择5处采样点，其余建筑物（除地下室和客梯外）至少选择3处采样点。3、新疆五地市的CQT测试点由新疆电信无线局提供。注：CQT测试点中如果遇到政府机关大楼或者核心区域处不准入的情况，则在该建筑周围测试或者放弃该点测试。13拨打要求1、采用手机拨打某固定号码的方式，手机拨叫、挂机、接听均采用手动方式。2、每个采样点拨测前，要连续查看手机空闲状态下的信号强度5秒钟, 若CDMA手机的信号强度连续不满足Ec/Io-12dB & Rx-95dBm，则判定在该采样点覆盖不符合要求，不再作拨测，也不进行补测，同时记录该采样点为无覆盖，并纳入覆盖率统计；若该采样点覆盖符合要求，则开始进行拨测。3、在每个测试点的不同采样点位置做主叫、被叫各5次，每次通话时长45 秒，呼叫间隔15秒；如出现未接通或掉话，应间隔15秒进行下一次试呼。4、测试过程中应作一定范围的慢速移动和方向转换，模拟用户真实感知通话质量；遇到无信号情况，继续按照设置的间隔要求不断进行试呼，所有的通话过程全部计入测试结果。 2 语音CQT测试项目及定义21 CDMA部分（1）覆盖率定义：覆盖率符合试呼条件的采样点数/总采样点数×100； 说明： a. 符合试呼条件的采样点数连续5秒Ec/Io大于-12dB且前向RSSI大于-95dBm的采样点数 b. 覆盖率取主叫手机的统计结果。c. 此指标以手工记录。（2）网络接通率定义：网络接通率被叫接通总次数/试呼总次数×100；说明：a. 试呼次数：出现第一条AC Origination Message表示进行了试呼，一次呼叫的多条AC Origination Message仅计为一次。b. 被叫接通次数：当一次试呼开始后被叫出现了Service Connect Completion Message消息就计数为一次接通。c. 网络接通率被叫总Service Connect Completion Message数/总AC Origination Message数×100d. 此指标以手工记录。（3）掉话率定义：掉话率掉话总次数/接通总次数×100；说明：a. 接通次数：当一次试呼开始后出现了Service Connect Completion消息就计数为一次接通。b. 掉话次数：在一次通话中如出现Release Order，就计为一次呼叫正常释放。只有当该消息未出现而由专用模式转为空闲模式时，才计为一次掉话。c. 掉话率取主、被叫手机的统计结果d. 掉话率（主叫掉话+被叫掉话）/（主叫接通+被叫接通）×100（4）平均呼叫建立时延定义：平均呼叫建立时延（呼叫建立时延总和/接通总次数）说明：a. 呼叫建立时延：出现第一条AC Origination Message到Alert with information的时间差。b. 取所有测试的平均时长。c. 此指标以手工记录。3数据业务CQT测试方法数据业务CQT测试的测试时间和测试地点的要求与语音业务CQT测试相同。（一）点对点短信测试1. 采用手机相互对发点对点短信的方式，每个采样点测试10次，采用人工拨测。2. 在每个采样点进行测试前应清空SIM卡和手机内存储的短信。3. 测试时在没有自动拨测软件的情况下采用秒表作为计时工具。4. 对比测试时各自发送的短消息内容长度应该相同，短信内容包括中文、标点符号、数字，短信长度为50字节，短信最后面加数字编号作为该次短信发送的标志。具体输入要求为： LTC网络短信点对点第xx测试。xx测试输入此次测试的实际次数，并按照测试次数递增。5. 测试时应保证该业务的承载网络可用，否则不在该测试点测试。6. 测试结果为各次结果的平均值。（二）点对点彩E(彩信)测试1. 采用彩E(彩信)手机对发点对点彩E(彩信)的方式，每个采样点测试10次，采用人工拨测。2. 每次测试时，注意将测试手机的短信、PUSH消息、彩E(彩信)全部清空，避免内存慢造成PUSH消息下发失败或者彩E(彩信)提取失败。3. 测试时在没有自动拨测软件的情况下采用秒表作为计时工具。4. 一次完整测试指：发送30K左右大小的彩E(彩信)>接收到PUSH>提取彩E(彩信)；或者PUSH超时计为一次完整测试。5. 正常PUSH成功接收时间小于300s，否则为PUSH超时。6. 测试过程中，应该在一次完整的测试完成后再进行下一次测试。不能连续发送后等待PUSH，否则可能造成接收终端在提取彩信过程中不能收到下发的PUSH消息。7. 测试时应保证该业务的承载网络可用，否则不在该测试点测试。8. 测试结果为各次结果的平均值。4 数据业务CQT测试项目及定义1、点对点短信测试【根据项目进度选择】点对点短信发送成功率=点对点短信短信成功接收总次数/点对点短信发送次数；点对点短信成功发送平均接收时长=点对点短信成功接收总时长/短信成功接收总次数；说明：点对点短信成功接收次数计算方法：点对点短信正常发送，且接收时长在600s内，则此次短信发送成功；否则，虽然该条短信正常发送但接收时长在600s以上，或者该条短信发送不成功，则此次测试当失败处理；点对点短信接收时长计算方法：用主叫手机向被叫手机发送点对点短信，当主叫手机上显示“信息已发出”时，以此标记作为短信发出的时间，计时开始；被叫手机接收到短信发出提示音后，以此标记作为短信接收的时间；两时间段的间隔即为接收时长。2、点对点彩E(彩信) 【根据项目进度选择】（1）彩E(彩信)发送成功率：成功发送彩E(彩信)条数/尝试发送彩E(彩信)总条数×100(2) 彩E(彩信)提取成功率：成功接收彩E(彩信)条数/尝试提取彩E(彩信)条数×100(3) 彩E(彩信)端到端成功率：成功接收彩E(彩信)条数/尝试发送彩E(彩信)条数×100（4）PUSH消息下发平均时延成功下发PUSH消息时间总和/成功接收PUSH消息条数。说明：a) 彩E(彩信)是否成功发送的判决条件为：用手机发送彩E(彩信)给手机，见到“发送成功”为成功发送；见到“发送失败”为未成功发送。b) PUSH消息是否成功接收的判决条件为：发送成功后，观察被测手机是否接收到PUSH消息，并验证发送号码是否正确；正常收到PUSH消息且主叫号码正确的，为成功接收（其中正常接收的标准为300s 之内，且在未收到普通短信提示之前），对于出现重复的PUSH消息，应计为1次，不重复记录。c) 彩E(彩信)是否成功提取的判决条件为：发送成功且被测手机接收到PUSH消息后，进行彩信提取操作，显示“成功接收”并在手机上成功播放的，为成功提取，否则为提取失败。d) PUSH消息下发时延=向被叫手机发送彩E(彩信)成功到被叫手机接收到PUSH消息之间的时间。下发时延为从发送成功提示出现开始计时，观察到被测手机接收到彩E(彩信)PUSH短消息时计时结束。（三）HTTP下载测试【必测】1. 运用路测软件将CDMA 1X测试手机以拨号上网的方式连接公网。2. 以HTTP方式下载一个大小500K Byte的文件（推荐使用当地联通门户网站的文件），或者打开当地联通门户网站首页进行测试，最大下载尝试时间为15分钟，即如果在15分钟内下载未能成功可重新进行下载，如果15分钟后不能完成下载，则停止该次下载测试。3. 一次下载完成后，经过10秒间隔，继续第二次下载测试，每个采样点进行2次下载测试。4. 通过路测软件记录下各层的瞬时吞吐率、下载字节数和下载时间。5. 在测试CDMA 1X网络的同时，在同一采样点位置采用相同方法测试EDGE网络质量，其中文件和服务器采用相应网络的门户网站。若未开通EDGE的网络，在同一采样点位置采用相同方法测试GPRS网络质量。测试时应保证该业务的承载网络可用，否则不在该测试点测试。第四部分 测试数据的文档输出1、数据完整性提交数据之前必须检查数据文件的完整性。包括但不限于：1、是否预定计划完成测试路线；2、测试数据文件是否正确无误；3、测试数据文件总数是否正确；4、测试数据文件的命名是否规范；测试原始数据文件建议采用如下方式统一命名：DT测试文件命名规则：网络（LTC）+场景名称（XX城区/XX农村/XX高速公路/XX铁路/XX海域）(全拼)+测试日期(yyyy:MM:DD共8位)+测试起始时间(HH:MM共4位)+当日文件顺序号(2位)，中间以“-”间隔；样例：LTC-Beijing chengqu-20070910-2010-01（主叫）.RCU 或 LTC-shenhai gaosu-20071101-0954-20（被叫）.SGZCQT测试文件命名规则：网络（LTC）+城市名称(全拼)+测试对象名称（全拼）+测试点名称(全拼)+当日文件顺序号(2位)，中间以“-”间隔；样例：LTC-Beijing-XXXXXXX-XXXXXXX-01（主叫）.RCU 或 LTC-Zhengzhou-XXXXXXX-XXXXXXX-20（被叫）.SGZ注：如果测试原始记录文件分为主叫和被叫，应在文件名称最后加注“（主叫）”或者“（被叫）”5、测试数据的保存每天测试完成后，当天晚上24点以前，在特定服务器上建立以测试城市为名的一级目录，建立DT、CQT两个子目录。将当天测试的数据按照规定的格式，按照测试类别，分别存放在这两个目录下。每个城市的测试人完成规定测试项目的测试，记录和采集相关数据。在确定测试记录和采集数据完整、准确，并完成编号归档后方可结束当地的测试活动。2测试报告要求 参考CDMA无线网络DT/CQT测试评估报告模版21省级DT/CQT总体测试报告要求（电子版）1、 测试概况：测试起时间、测试人员、测试工具、测试卡号码、主要测试场景和区域、测试工作量等基本信息。其中测试工具中包括所有测试模块的型号、参数、功能、规格等详细的技术信息。2、 测试报告撰写人及联系方式。3、 各本地网测试结果汇总。4、 针对网络无覆盖、未接通、掉话、话音质量差等异常问题分专题进行简要地原因分析与评价，突出重点，指出问题，并提出初步网络优化建议。5、 汇总各种异常情况的原始LOG信息。6、 对该本地网（场景）CDMA总体网络质量现场测试情况作简要的分析。22分地市(场景)DT/CQT测试报告要求（电子版）1、 测试概况：测试时间、测试人员、测试工具、测试卡号码、测试场景及区域、测试工作能量等基本信息。其中测试工具中包括所有测试模块的型号、参数、功能、规格等详细的技术信息。2、 测试报告撰写人及联系方式。3、 仔细分析测试中发现的主要问题如网络无覆盖、未接通、掉话、话音质量差等问题；发现有典型意义的问题提出建议。4、 对该本地网（场景）CDMA总体网络质量现场测试情况作简要的分析。 附件1：参考指标由于CDMA FFER指标与GSM BER指标之间可比性和相关性很小，作为语音质量评估比较价值不大，对于不具备MOS测试条件的省份将FFER和RxQual作为网内统计参考指标进行测试，指标定义如下：话音质量FFER =（0%FFER3%的采样点数）*1+（3%<FFER10%的采样点数）*0.7/（总采样点数）×100遗留问题：1. FTP服务器的创建问题，需要协调；2. SIM卡由谁来提供？如何开户？3. 路测过程中拨打免费电话10010 or 10000 ？