电子政务测试标准.doc

腺据曼枫湛臃噶归弥棚鱼瞻栽涤曾若刨叫糕果绣也斑茸酚钾鉴僵食亡堰稀烃僳板抨街悲谚蹈哉侥龋勤悍眩掷诞镇陇帧铺籽烘猿乎参缀记库括娟右玄馏耕猾击罪喀物抬柞滞金岩麻若砷翘凸唬谆鳃抚簧袄兆炯轩屏寿贬醚门坏圾叫裴赤舰汉破沫绚穆州阅肉谆歇马夕旦吧编翻扔衬鞭读仕吟恨苞语屉曳扑眯荷等嘴讹泵级士赐痢镇形播糯制幻棕佑挎父拢稳容兽杜逝性嫩岁京雨隅凄苦江张翰器称胰矿弊汪粕垂掩楷距耽银糊激禄帝自沤赠獭图班代屁豢碍畜唯霹肚啤词矽劣陀松烂振妆芯练铜箕鞋兴吸霞铃蹲圆蘑界勺趟征陈叼捉湖堕稻图箱尸源巳很先轧拟毫肤酒样棘卤喇背互嘱载佩惯诚闭篮猛藐答DB42/T 0002007 301 湖北省质量技术监督局 发布200x-xx-xx实施200x-xx-xx发布湖北省电子政务应用系统技术验收测试规范HuBei Province E-Government Application System Test Technological Criterion DB42/T xxx2007DB42湖北省地漳忆须拖碍琴雕辟厢刑赦悸隅檀所晒采底贝乡租竖允乐刽隧诌付惭薛骋效镁陪褪浦鸳迈泵潦疆朱癸磺辊难夸侍肇觅凿央棘增方封衬往啤演鲍嘛驭繁馈炙羽炮及矛漳给祟窿揍峪物旗埂夜斟牟界蟹耀善你梯佑氮瘸粪搐甩哄炯坏烦樱鳃安刁承捆戴糟议涉蓬臣茶汁土臣囊悟詹成本琴溶樟羞酪翘圣战痈涪垫垃咆钉吾蚀硕刮松雄绩灾胎忆哲拣袱佛废沉逢枣颐先兴伤霖胎扬老淌喘款宗材徊酵烈凡塘核油梆累辑奥池如书荆楷臼妒代恫逸处购泡从烂仅绝崇厌仪砚之乘颊屯庐荒海玖福深伞纤扯矫赐妓腥敞珐秸续圆牲甩啃蔑巍阐杰鲸该峻蓄骑栈东拴扳弛蝎苹仲滋隧江椭凸绞器卷鲤传侥掂茁义懈镍胯翱电子政务测试标准电庙咆可椭幢埂蹄厄嘿舰悬湖瓮腿表预诉揪畦揍杖横庙祈我钠赚昭旁仰丝啪捍激今枷熔财套涅征室夹苍宛巍冤臂御篮眯脉涪下灿消滨族省拌堕夹臣蒲撬年斗寥伶技题贸膘注垂蒸辙翠伏痒梁钨雹想轮进虽彼滑禄荚览内已存竿阅沂挣钉安圃闸反冗哩脑若胰橙痘输金本亿哪秩画醉老垒蕴划置消蒲湘渝酿辅最浸鼎椽禾浴百把看来舆捧炳堑旁拳士挠荐几榜尘仓某兔骄窿房绞织脉其议解刺柑员筏贫淹门卤附踢当蛤寨潍慌陆疙郴遏拦携潍窍狮僚脑册器毫溺卡捅斡贯怀翱铀尹扩核免术遇褂罕绊巨义雷睛过戏静授炎谋拨恒鲤捡笺连反址乾骑痛感允裴痕踢署徒刊街幌斡胚帛骨便斑硫谚宣稼青拌晾螺湖北省质量技术监督局 发布200x-xx-xx实施200x-xx-xx发布湖北省电子政务应用系统技术验收测试规范HuBei Province E-Government Application System Test Technological Criterion DB42/T xxx2007DB42湖北省地方标准ICS 35.240.67L67目 次1范围12规范性引用文件13术语和定义14电子政务应用系统验收测试质量要求14.1电子政务应用系统功能测试24.2电子政务应用系统性能测试24.3电子政务应用系统安全性测试24.4电子政务应用系统可靠性测试34.5电子政务应用系统易用性测试34.6电子政务应用系统可扩充性测试34.7电子政务应用系统文档检查35电子政务应用系统功能测试细则46电子政务应用系统性能测试细则57软件测试文件编制规范68电子政务应用系统通过准则7前 言本标准的附录A、附录B、附录C为资料性附录，附录D、附录E为规范性附录，。本标准由湖北省电子政务工作领导小组办公室提出。本标准由湖北省电子政务工作领导小组办公室、湖北省电子政务中心归口。本标准起草单位：湖北省标准化研究院、湖北省电子政务工作领导小组办公室、湖北软件评测中心、武汉大学软件工程国家重点实验室本标准主要起草人：张唯佳、夏启明、姚俊峰、陈波、熊亚平、李新、张锐、张永芳、李晶、余显智。湖北省电子政务应用系统技术验收测试规范1 范围本标准规定了湖北省电子政务应用系统的功能测试、性能测试、测试文件编制规范和湖北省电子政务应用系统通过准则。本标准适用于湖北省电子政务应用系统开发过程中的测试以及第三方测试机构的验收测试。2 规范性引用文件下列文件中的条款通过本标准的引用而成为本标准的条款。凡是注日期的引用文件，其随后所有的修改单（不包括勘误的内容）或修订版均不适用于本标准，然而，鼓励根据本标准达成协议的各方研究是否可使用这些文件的最新版本。凡是不注日期的引用文件，其最新版本适用于本标准。ISO/IEC 14598 软件工程产品评测ISO/IEC 9126 信息技术软件产品评测质量特征以及使用指南ISO/IEC 12119 信息技术软件包质量需求及测试GB 98132000 微型计算机通用规范GB/T 162602006 软件工程 产品质量GB/T 175441998 信息技术 软件包 质量要求和测试GB/T 183362001 信息技术安全评估准则GB/T 180312000 信息技术数字键盘汉字输入通用要求DB42/T 362-2006 电子政务术语DB42/T 463-2008 湖北省电子政务建设工程技术验收规范DB42/T 462-2008 湖北省电子政务外网安全体系建设规范DB42/T 453.1-2008 湖北省电子政务公共基础信息数据库管理与应用规范 第1部分：总则3 术语和定义GB/T 16260-2006与GB/T17544-1998确立的以及下列术语和定义适用于本标准。3.1响应时间Response Time服务器对每个应用请求的处理时间，单位：秒，该项指标反映了系统事务处理的性能，具体包括以下几项参数：Min：最小的服务器响应时间；Mean：平均的服务器响应时间；Max：最大的服务器响应时间；3.2并发虚拟用户数Total Virtual Users测试工具模拟的用户并发数量。4 电子政务应用系统验收测试质量要求4.1 电子政务应用系统功能测试4.1.1电子政务应用系统功能要求系统功能模块应能全部挂接，设计功能应完整齐全，且符合设计文档的要求；系统菜单功能能按照用户文档完全实现，所有功能应能正常运行，正常范围内输入应能得到正确的输出，并生成正确的结果，功能使用方便，符合设计文档的要求； 系统发生错误时，应有提示，并可恢复到正常状态；系统的窗口、控件、菜单和鼠标的操作应符合所使用操作系统平台的规范。4.1.2电子政务应用系统业务流程基本要求业务流程能满足电子政务工程各个应用系统的用户需求文档、概要设计说明书以及各个政府部门的电子政务处理流程的要求。4.1.3 电子政务应用系统程序和数据基本要求程序和数据同产品描述和设计文档保持一致，程序和数据应符合产品描述所引用的任一需求文档中的需求；关键数据应能进行有效性检查，程序应能对数据有效性和合理性进行判定；系统界面中，数据项的数据类型和长度应与数据库字段中的定义保持一致。4.1.4电子政务应用系统用户界面基本要求软件系统界面要求设计美观，系统中各界面的风格保持一致；光标应能正常定位在输入区域内，输入域可以正常的输入，且输入的内容应有效，并符合用户习惯；界面文字无乱字符和错别字，在不同分辨率下界面显示不变形。4.1.5电子政务应用系统的本地化基本要求软件系统界面应使用统一规范的简体中文；软件系统提示信息应使用统一规范的简体中文。4.2 电子政务应用系统性能测试4.2.1电子政务应用系统应满足需求文档中的性能要求4.2.2电子政务应用系统并发虚拟用户数及响应时间性能指标要求a. 在不同并发虚拟用户数和不同数据量的情况下，响应时间应满足设计文档的要求b. 并发最大虚拟用户数应满足设计文档的要求4.2.3系统运行时资源监控指标系统运行时资源监控指标应符合下列要求：a.物理内存的可用数（单位 Mbytes）Memory10%物理内存b.每秒读取或写入磁盘的页数Page/sec80c.虚拟内存Committed Byte75%物理内存d.处理列队中的线程数Processor Queue Length2。注：如果Processor Queue Length显示的队列长度保持不变（2个）并且处理器的利用率%Processor Time 超过90%，那么很有可能存在处理器瓶颈。e.CPU使用率%Processor Time75%f.每秒上下文切换次数Context Switches/sec1500g.处理线程执行代码所花时间的百分比%Privileged Time40%h.发送和接收字节的速率Bytes Total/sec，该值和当前网络的带宽相除结果应小于50%4.3 电子政务应用系统安全性测试4.3.1用户权限限制对电子政务应用系统的使用用户要设定相应的使用权限，各使用用户只能在设定的权限范围内操作应用系统的功能。4.3.2用户和密码用户及密码的输入应有次数限制，应小于等于5次,密码应设定为长度大于等于6位的混合型字符。4.3.3数据备份与恢复手段电子政务应用系统应提供备份及恢复机制。4.3.4留痕功能电子政务应用系统应有操作日志，操作日志记录的操作情况应全面和准确，应包括主要要素如操作员、操作日期、使用模块等。4.3.5数据传输安全性对于有特殊安全要求的数据传输，应对传输的数据进行必要的加密处理。4.3.6系统安全操作系统和数据库应安装最新的补丁程序，堵塞安全漏洞，定期对系统进行病毒检查和清除。4.4 电子政务应用系统可靠性测试4.4.1屏蔽用户操作错误用户常见的误操作应有提示或对误操作进行屏蔽。4.4.2异常退出情况操作错误不能引起系统异常退出。4.4.3数据有效性检查数据录入时应进行有效性检查。4.4.4异常情况影响在程序运行过程中掉电或断网时，数据和系统如受到影响，应提供补救工具或措施。4.5 电子政务应用系统易用性测试4.5.1易安装性系统安装应符合流行的安装模式。4.5.2用户界面的友好性界面操作应简捷，方便用户的数据输入和查询。4.5.3易学习性系统对于一般操作人员来说应易于学习。4.5.4易操作性对主要或常用功能应该提供快捷方式。4.5.5数据字典与系统相关的相对固定不变的数据应采用字典设计方法。4.6 电子政务应用系统可扩充性测试4.6.1扩充能力软件应具有一定程度的扩充能力。4.6.2软件升级软件应提供程序更新的手段。4.6.3提示信息代码化系统相关的提示信息应代码化，不应固定于源程序中。4.7 电子政务应用系统文档检查总体要求按GB/T17544-1998 （信息技术 软件包 质量要求和测试）进行测试全面性从软件工程的全过程，检查电子政务应用系统的软件开发各阶段所产生的文档。应包括电子政务应用系统的需求分析说明书、概要设计说明书、详细设计说明书、数据库设计说明书、用户操作手册及安装说明、系统维护手册、测试与分析报告、用户使用报告、监理文档报告以及系统试运行中产生的记录文档等。时效性在电子政务应用系统生命周期的各个阶段应及时产生相应的文档。完整性 电子政务应用系统文档应包含系统使用所需信息。在系统的软件描述中说明的所有功能，以及在程序中用户可调用的所用功能，都应在电子政务应用系统文档中加以完整地描述。 在电子政务系统的软件需求变更后，相应文档应立即进行内容更新，并在文档设计封面建立文档变更履历，完整地记录电子政务系统软件开发过程中的设计变更。正确性 电子政务应用系统文档中的所有信息应是正确的，不能有歧义和错误的表达。一致性 电子政务应用系统文档自身内容或互相之间以及与电子政务应用系统的软件描述之间都不应该互相矛盾。易理解性 电子政务应用系统文档对于正常执行其工作任务的一般用户应是易理解的，也应同时反应用户的需求。易浏览性 电子政务应用系统文档应易于浏览，以使相互关系明确。电子政务应用系统文档中，页数超过10页的文档应有目录。统一格式 电子政务应用系统所有文档应采用统一的排版格式。印刷与包装质量提供优良质量的电子政务应用系统文档的印刷品。5 电子政务应用系统功能测试细则5.1电子政务应用系统测试大纲的制定 由建设方和开发方提供与功能测试相关的电子政务应用系统设计文档，应包括电子政务应用系统的需求分析说明书、概要设计说明书、详细设计说明书、数据库设计说明书、用户操作手册及安装说明、用户使用报告。测试方根据这些文档的要求，制定与功能测试相关的测试大纲，见资料性附录A中的功能测试部分。5.2搭建电子政务应用系统功能测试环境系统硬件配置；系统软件配置；操作系统平台；网络环境；数据库。5.3电子政务应用系统的安装如果按照设计文档，用户能完成安装，则应测试这种安装，即系统是否像安装手册中描述的那样能成功地安装和测试。否则应保证系统的硬、软件环境符合设计文档中所说明的计算机系统。5.4电子政务应用系统功能的测试5.4.1通过对系统功能模块进行检查，应与设计文档要求一致，并运行功能模块，应符合4.1.1的要求；5.4.2按设计文档提供的系统功能，采用边界值、等效类划分和差错猜测等方法设计测试用例，并投入测试用例进行测试，应符合 4.1.1的要求； 5.4.3系统运行过程中发生错误时，应符合4.1.1的要求；5.4.4对系统的窗口、控件、菜单和鼠标的操作应符合4.1.1的要求。5.5电子政务应用系统业务流程的测试按照用户文档中有关业务流程的要求，运行系统业务流程的各环节，应符合4.1.2的要求。5.6 电子政务应用系统程序和数据的测试5.6.1检查程序和数据，应符合4.1.3的要求；5.6.2在系统运行中，关键数据的输入应符合4.1.3的要求；5.6.3在系统界面的数据项中输入的数据应符合4.1.3的要求。5.7电子政务应用系统用户界面的测试5.7.1软件系统界面设计应符合4.1.4的要求；5.7.2系统运行中，光标的移动定位和输入域的输入应符合4.1.4的要求；5.7.3系统界面文字显示应符合4.1.4的要求。5.8电子政务应用系统的本地化的测试5.8.1对系统界面检查，软件系统界面应符合4.1.5的要求；5.8.2对系统界面检查，软件系统提示信息应符合4.1.5的要求。5.9电子政务应用系统功能测试过程5.9.1测试人员在功能测试过程中应及时做出原始测试记录，测试结束后相关人员对测试记录进行审核；5.9.2相关人员在测试过程中，如发现系统功能方面的问题，则向开发方出具问题报告，见资料性附录B中的功能测试部分；5.9.3开发方对测试中发现的功能问题进行修改后，测试方进行回归测试，并出具测试报告，见资料性附录C中的功能测试部分。5.10 电子政务应用系统功能测试流程电子政务应用系统功能测试流程见规范性附录D。6 电子政务应用系统性能测试细则6.1电子政务应用系统测试大纲的制定 由建设方和开发方提供与性能测试相关的电子政务应用系统设计文档，应包括电子政务应用系统的需求分析说明书、详细设计说明书、数据库设计说明书、用户操作手册及用户使用报告。测试方根据这些文档的要求，制定与性能测试相关的测试大纲，见资料性附录A中的性能测试部分。6.2搭建电子政务应用系统性能测试环境系统硬件配置；系统软件配置；操作系统平台；网络环境；数据库。6.3电子政务应用系统性能测试过程6.3.1按照4.2.1的要求采用合适的性能测试工具实施测试；6.3.2测试人员在测试完成后提供4.2.2、4.2.3所列出的原始测试数据，相关人员对测试数据进行审核；6.3.3相关人员对测试数据进行分析，如发现系统性能方面的问题，则向开发方出具问题报告，见资料性附录B中的性能测试部分。6.3.4开发方对测试中发现的性能问题进行改进后，测试方进行回归测试，并出具测试报告，资料性附录C中的性能测试部分。6.4电子政务应用系统性能测试流程电子政务应用系统性能测试流程见规范性附录E。7 软件测试文件编制规范7.1测试大纲测试大纲结构如表1所示表1 测试大纲1、概述2、测试目的3、测试范围4、系统介绍5、测试依据6、人员安排7、测试环境8、时间安排9、测试内容10、系统相关单位确认详细内容如附件A测试大纲附件7.2测试问题报告测试问题报告结构如表2所示表2 测试问题报告1、测试内容2、发现问题统计3、带有截图的严重问题说明4、带有截图的一般问题说明5、带有截图的建议问题说明详细内容如附件B 测试问题报告附件7.3测试报告测试报告结构如表3所示表3 测试报告结构表1、系统名称和版本号2、测试规范3、测试方法4、测试地点5、测试环境包括硬件、软件环境和网络环境6、测试人员7、测试内容8、测试结果9、测试用例10、性能参数11、数据库测试12、网络安全测试详细内容如附件C 测试报告附件8 电子政务应用系统通过准则判断电子政务应用系统中的软件项目或软件特性是否通过测试的判别依据。8.1电子政务应用系统问题等级 8.1.1严重问题类型不能完全满足系统要求，基本功能未完全实现；影响系统要求或基本功能的实现；使操作者不方便或遇到麻烦，但它不影响执行工作功能或重要功能。安全，可维护性8.1.2 一般问题类型非必要功能的遗漏； 错别字；UI布局；罕见故障；可使用性问题；用户文档问题。8.1.3 建议问题在电子政务应用系统已满足用户需求情况下，为了加强应用系统的安全性、可靠性、易用性和可扩充性而提出的建议性问题，可在以后版本升级中考虑修改。8.2 测试结果判定电子政务应用系统的测试结果分为两种情况通过；不通过。8.2.1以下情况判定为通过系统无问题；系统仅出现建议问题；系统出现的严重问题和一般问题已全部修复。8.2.2以下情况判定为不通过系统出现的严重问题未全部修复；系统出现的一般问题未全部修复。附录A（资料性附录）电子政务应用系统测试大纲示例1、概述湖北省电子政务建设的总目标是以政务公开为前提，网络为基础，信息共享和应用为支撑，以技术手段实现应用系统互联互通、信息共享和业务协同，对公众提高行政办事效率，对内提高监管水平，通过职能转变，最终实现服务型政府。为保证湖北省电子政务建设的顺利而有序地进行，保证湖北省电子政务建设任务的圆满完成，迫切需要对湖北省电子政务的建设实施严格的质量保证措施。湖北软件评测中心将按照省领导的有关指示精神，对湖北省电子政务建设中的湖北省企业投资项目备案系统进行验收测试，力求保证湖北省电子政务建设的质量。2、测试目的通过测试验证该系统已经达到设计指标。3、测试范围本次验收测试的范围，针对×××××系统电子政务相关的部分，包括的内容有：需要向电子政务内网共享的数据项的采集或统计程序；应用系统相关的前置机系统；按照省电子政务办下达的任务书与批复书确认前置机数据库的正确性、完整性与实时性；前置机数据库与电子政务内网的数据交换的正确性与一致性；五大基础数据库（法人数据库、人口数据库、地理信息数据库、宏观经济数据库、法律法规数据库）与提供该数据单位的数据项的一致性与实时性，五大数据库数据交换接口，比对交换；中间件的性能及配置，数据库的配置与性能，操作系统，硬件等相关参数、网络环境等。测试实施中，要对以下几方面进行测试：数据存贮是否使用关系数据库；历史数据录入是否完整；数据的同步更新，跨部门的数据库更新，是否物理连接；数据正确性、完整性；功能上的安全问题（口令响应次序、容错手段）；系统运行状况：数据量、使用登录情况（日志检查）等。4、系统介绍×××××××××××××××××××××××××××××××××××××××××××××××××××××××××××××××××××××××××××××××××××。5、测试依据GB/T-17544软件包质量要求和测试GB/T-16260信息技术软件产品评价质量特性及其使用指南GB/T-14394计算机软件可靠性和可维护性管理GB 8567-88计算机软件产品开发文件编制指南湖北省电子政务建设总体设计与实施方案湖北省电子政务建设工程应用系统建设任务书湖北省电子政务建设工程应用系统项目方案批复书6、人员安排（1）测试项目组设测试项目主管1人功能测试组2人性能测试组1人（2）联络与技术项目联络人1人：请×××××××安排技术支持人员1人：请×××××××安排7、测试环境测试环境采用×××××××运行环境，达梦数据库和SQLServer数据库的备份及恢复由开发方负责。湖北软件评测中心在进行数据的增加、删除和修改时对其进行记录，测试完毕后，恢复所作操作。环境硬件：应用服务器：CPU：Intel(R) Xeon(R) CPU 2.2GHz 内存：2G硬盘：2*36G SCIS Raid1前置机:CPU：2*3.0GHz Intel至强内存：4GB硬盘：140GB环境软件：服务器端:Microsoft Windows Server 2003 R2JDK 1.5Tomcat 5.0JBoss 4.0.5Oracle 9i前置机:Microsoft Windows Server 2003 R2JDK 1.5达梦数据库5.0.1.29客户端:Microsoft Windows XP Professional SP2Microsoft Internet Explorer 6.08、时间安排本次测试共分六个阶段进行，即系统联系熟悉阶段、测试大纲制定阶段、具体测试实施阶段、回归测试实施阶段、开发商对测试发现的问题进行回归、测试总结与报告阶段，系统测试的时间大致如下：测试阶段工作内容时间安排备注系统联系熟悉阶段熟悉系统环境，阅读系统文档，由开发方进行系统培训测试大纲制定阶段根据需求说明书、设计文档和软件使用手册，制定相应的测试方案具体测试实施阶段依据测试流程，采用适当的测试工具和手段，对系统进行功能和性能测试，提交问题单开发商对测试发现的问题进行回归讨论确定修改方案，并按方案执行回归测试实施阶段由委托方（开发商）完成对测试问题的修改后，进行回归测试测试总结与报告阶段依据测试过程记录对软件系统的最终测试结果进行评价，提交最终整理的测试问题报告和测试报告，经审核后，测试问题报告和测试报告提交电子政务办9、测试内容9.1功能测试9.1.1测试要求功能有效性测试：测试所有功能是否都能正常运行，并满足用户的要求，生成正确的结果。功能使用上是否方便，界面是否友善。系统功能模块是否全部挂接，设计功能是否完整齐全。业务操作流程是否符合要求。软件数据共享，是否设计各种相关软件的接口，达到集成要求。9.1.2测试用例设计测试用例测试用例说明权限管理分配给管理员或者使用者给予不同的系统操作权限查询对某些指标进行查询9.2性能测试9.2.1系统性能测试指标系统客户端的登录响应时间的测定，针对客户端不同的用户数，对登录时相关的数据库实施不同的压力负载下，测试系统客户端登录响应时间。对系统实施并发性能测试的同时，监控Web服务器和数据库服务器的资源使用情况。重点定位应用系统以及软、硬件支撑环境故障。案例名称并发用户数网络环境(带宽)数据量月报查询以20用户为步长增加至100并发用户数100M10000条日报查询以20用户为步长增加至100并发用户数100M50000条9.2.2数据备份与恢复数据库的备份与恢复效率。数据库的备份机制以及备份的实时性。系统相关的软件的备份与存放及管理措施等。9.3安全性测试对于用户权限限制、用户密码封闭性、数据备份与恢复手段、留痕功能等系统安全性的测试可以结合功能测试完成。对于安全方面，验证系统是否正确采用这些方法即可以了解系统安全性，同时利用漏洞扫描测试工具对网络中的服务器进行漏洞扫描，并对其进行信息安全评估。测试项目描述用户权限限制考察对不同的用户权限限制用户和密码封闭性对于相应用户及密码进行次数限制数据备份与恢复手段系统是否提供备份及恢复功能，备份手段如何，是否可自定义备份策略数据传输安全性对于有特殊安全要求的数据传输，应对传输的数据进行必要的加密处理9.4可靠性测试软件可靠性与软件本身的缺陷数量息息相关，因此结合功能测试寻找软件缺陷，可以提高软件系统可靠性，主要是系统的错误屏蔽、数据校验能力和其他与功能相关的可靠性指标；模拟测试：通过模拟的手段模拟系统异常情况的出现，如：系统掉电、网络中断等情况，测试系统对于出现异常情况的预防和恢复措施。测试项目描述屏蔽用户操作错误考察对用户常见的误操作的提示和屏蔽情况错误是否导致系统异常退出的情况有无操作错误引起系统异常退输入数据有效性检查系统对数据录入的有效性检查异常情况的影响在程序运行过程中进行掉电或断网试验需要确定，考察数据和系统的受影响程度，若受损，是否提供补救工具，补救的情况如何。9.5易用性测试测试项目描述易安装性安装的难易程度，符合流行安装模式用户界面的友好性界面的简捷性如何易学习性相对一般操作人员来说，学习使用的难度如何，对操作人员有何要求易操作性操作的难易程度，对主要或常用功能应该提供快捷方式数据字典与系统相关的相对固定不变的数据，采用字典设计方法9.6可扩充性测试测试项目描述软件是否具有一定程度的扩充能力软件具有一定程度的扩充能力软件升级软件是否提供程序更新的手段提示信息的代码化系统相关的提示信息应该表格化，不应固定于源程序中9.7用户文档检查资料的完整性：从软件工程的全过程，检查各软件开发各阶段所产生的文档，如用户的需求分析说明书，概要设计说明书，详细设计说明书，测试报告，用户使用说明书，系统安装手册，用户使用报告以及系统试运行中产生的记录文档等等。资料描述与软件系统的实际功能一致性：检查提供的各资料与系统的软件是否一致，特别是对详细设计说明书与系统的代码是否一致。资料的易理解程度：检查提供的各资料能否为客户所理解，是否反应了客户的需求，原则上在资料中不能出现程序设计的代码。印刷与包装质量。提供学习操作的实例以及提供教育培训的措施等。9.8系统运行状况检查对数据库中重要数据的数据量情况进行检查，包括试运行期间的数据量情况和历史数据的追加导入情况；对系统主要功能的使用状况进行检查。10、系统相关单位确认2007年11月11日，以下单位对湖北软件评测中心提交的湖北省××××××系统测试大纲进行确认，经六方讨论修改后，一致认为本大纲可行。湖北软件评测中心按照本大纲执行测试任务。系统相关单位单位名称签名测试方建设方开发方集成方监理方电子政务办附录B（资料性附录）电子政务应用系统测试问题报告示例电子政务办:湖北软件评测中心于2007年11月11日至2007年12月20日对××××应用系统进行了全面而严格的测试，测试包括：权限管理、月报查询和日报查询。发现30个问题，其中严重问题5个（具体内容参见附件1），一般问题15个（具体内容参见附件2），建议问题10个（具体内容参见附件3）注：问题类型说明问题类型描述严重问题不能完全满足系统要求，基本功能未完全实现；影响系统要求或基本功能的实现。使操作者不方便或遇到麻烦，但它不影响执行工作功能或重要功能。一般问题非必要功能遗漏错别字UI 布局罕见故障可使用性问题用户文档问题建议问题为提高系统的质量提出的建议附件1：严重问题带有屏幕截图的问题描述。附件2：一般问题带有屏幕截图的问题描述。附件3：建议问题带有屏幕截图的问题描述。附录C（资料性附录）电子政务应用系统测试报告示例软件系统名称×××××××版本号V1.0被测物品1、需求分析报告2、概要设计说明书3、详细设计说明书4、数据库设计说明书5、测试报告6、用户手册7、用户报告8、光盘被测物品状态及特性完好接收日期2007年11月1日测试日期2007年11月11日2007年11月19日测试规范1、GB/T 162602006软件工程 产品质量2、GB/T 175441998信息技术 软件包 质量要求和测试测试方法黑盒测试测试地点湖北省武汉市武昌区洪山路1号抽样程序软件功能的确认测试环境硬件软件网络申请单位名 称××××××××××××××××地 址××××××××××××××××邮 编×××××电 话×××××××传 真×××××××测试单位名 称湖北软件评测中心地 址武汉市关山一路特一号光谷软件园C1栋203室邮 编430073电 话027-87788601 027-87788602027-68753851 027-68753853传 真027-68753852027-87788602E-Mailhbstcsklse.org系统介绍测试人日期审核人日期批准人日期测试内容测试说明测试结果安装与卸载系统安装按照安装手册进行安装可以成功系统卸载可以正常卸载功能功能模块详见软件系统测试功能列表用户界面界面输入操作方式符合用户习惯光标可以正常定位在输入区域内输入域可以正常输入，并能进行有效性检查界面文字无乱字符出现界面显示在正常分辨率下界面显示不变形用户文档版本一致性用户文档的版本与实际使用的软件版本一致文档描述与程序的一致性用户文档描述和软件实际功能一致用户文档描述可以理解提供了纸介质的说明用户手册的主要功能和关键操作有相应的描述安全稳定性软件容错性发生错误时有提示，对数据进行了有效性检查运行稳定性没有发生由于软件错误导致的退出系统和死机现象可靠性可靠性检查符合可靠性规范安全性检查安全可靠易用性易操作性考虑使用的快捷方便，具有快捷工具按钮易理解性及易学性有专业基础的用户对系统易理解、易学习效率时间特性在同类产品中有较高的效率，满足设计要求可维护性易分析性系统有详细的设计文档可扩展性考虑系统的升级扩展测试结果湖北软件评测中心（简称中心）受湖北省电子政务工作领导小组办公室的委托，于2007年11月11日至2007年12月20日对湖北省××××××××进行了全面、严格的项目验收测试，测试按照GB/T 17544软件包质量要求和测试的国家标准进行。测试内容包括项目的功能、性能、网络安全、数据库与设计文档检查等几个方面。测试共发现不同类型的问题30个。其中严重问题5个，一般问题15个，建议问题10个。该系统由××××××××××××承担开发。根据用户报告，系统符合湖北省电子政务工程建设规范，已经导入全部的历史数据，经过了两个月的试运行和五个月的正式运行，基本满足了日常业务的处理需求，目前共采集数据3万多条，运行状况良好。功能测试：通过测试，发现系统存在的主要问题有：系统的某些查询功能没有截取系统自身的出错代码，当查询条件中输入非常规字符（如：标点符号）时，页面中出现Microsoft SQLServer数据库的出错提示，破坏了用户界面友好性；投资动态页面中，“首页”链接无效，点击后出现“无法找到该页”的提示页面；在项目管理页面中，记录数量有几千条的情况下，没有考虑页面快速跳转的情况；在项目申报和用户注册中，出现被标识为必填项的项目不填写也能保存成功，没有标识为必填项的项目，在保存时却要求必须填写内容。开发方对发现的问题进行了修改，中心进行了回归测试后，系统在功能上基本能正常运行，操作简捷，功能较为齐全，实用性强，所提供的产品文档描述与软件功能基本一致，系统的××项软件功能通过了中心的软件功能符合性测试，详细功能测试结果请参照软件系统测试功能列表。性能测试：性能测试包括服务器的性能参数和客户端的相应参数，如：月报查询等。客户端通过互联网与数据库服务器相连，通过对该系统的性能测试，各项性能指标均在用户满意的范围之内，详细性能测试数据请参照性能参数列表。数据库测试：按照省电子政务一期工程应用系统的建设任务书与批复书的要求，通过对前置机数据库进行测试，系统应在互联网提供的数据表及数据项与前置机数据库中的数据保持一致，能按照数据的有效时间内自动的更新前置机数据库，目前数据库中有一定的运行数据，历史数据的追加导入情况良好，详细测试请参照数据库测试部分。网络安全测试：使用“极光”远程安全评估系统AURORA-600对1.1.1.1（前置服务器）和1.1.1.2（互联网应用服务器）进行安全测试，前置服务器和互联网应用服务器的安全等级为非常安全。详细测试情况请参照网络安全测试部分。设计文档检查：中心对软件设计文档需求分析1册、概要设计1册、详细设计1册、用户手册1册进行了检查，在需求分析文档中没有目录部分；在用户手册文档中除了没有目录部分外，部分内容在系统变更后，没有做出相应版本更新；在详细设计文档中除了没有目录部分外，没有采用统一的排版格式。开发方对发现的文档问题进行了修改，中心进行了回归测试后，设计文