中国软件评测中心测试中心主任相春雷：网游的测试和工作重点

　　中国第二届网络游戏年会于2004年9月8日在北京新世纪饭店举行，相关部门领导及行业领头人在年会上分别发表了精彩演讲。以下是中国软件评测中心测试中心主任相春雷发表的主题演讲――网络游戏的测试和工作重点：
　　
　　各位领导、各位来宾，下午好，我是中国软件评测中心相春雷，非常荣幸有机会参加本次论坛，我今天就网络游戏测试的一些基本问题跟大家做一个简单的探讨。网络游戏我们认为它是软件的一个重要的组成部分，并且它具有互动娱乐的一些特定的功能，同时网络游戏在所有我见过的软件里是最具有文化内涵和艺术内涵的软件产品。既然网络游戏是软件的一个重要组成部分，网络游戏在它公布以前、产品化以前需要对软件进行完整的测试，现在网络游戏行业内部有两个名词，一个叫内测和公测，这是网络游戏行业特有的名词，比较类似于在软件工程化过程中的α测试和β测试。在我们对网络游戏测试类型理解上应该分成两个部分，第一个是内部测试，主要是网络游戏在开发过程中的测试，包括了单元测试、集成测试、确认测试，还有对于网络游戏产品来说，现在有一种测试叫验证测试，实际上它是游戏运营商对引进的网络游戏进行的测试。主要是为了保证引进网络游戏产品的质量、保证用户的投资。这种测试也可以由第三方测试完成。还有是系统一级的测试，是基于特定的游戏环境进行的，可以作为内测一个重要的组成部分。除了企业的内部测试以外我们将会对第三方测试做一个比较详细的介绍。第三方测试一方面可以协助企业进行内部测试、验证测试，另一方面也可以通过确认测试的方法和对软件产品质量做一个认证，同时通过媒体的测试也可以对优秀网络游戏产品做一个推广的活动。同时作为第三方组织的用户体验的测试无论是在公正还是公平来看都具有更公正、更加合理的一面。它也可以是公测一个非常重要的组成部分。
　　
　　下面我想简单介绍一下参与这些测试主要人员对象，首先企业内部测试人员、媒体记者、编辑、最终用户，通常可以把最终用户按照相应的地域、年龄、性别、文化程度、职业等进行组织，还有第三方专业测试工程师，主要是完成技术性较强的测试任务。对于第三方测试来说我们认为有以下几个目的，首先就是要能够保证网络游戏产品的质量，第二是对引进的国外一些游戏，现在知道引进的韩国游戏、美国游戏是比较多的，对他们因为测试。在保护网络运营商的投资，并且可以做到维护运营商公众形象的目的。第三点是维护最终用户的合法权益。实际上就是把我们的游戏产品在投入运行之前可以做到提高软件的稳定性。还有是与广大媒体一起合作，共同向社会推荐一些优秀的、积极向上的网络游戏产品给最终用户。同时还有为**主管部门提供有效的支持和决策依据。
　　
　　在网络游戏测试方面，有以下几个内容。左边是从软件工程化的角度来定义的，包括软件的功能度、兼容性、安全性、可靠性等几个方面，对网络游戏软件的测试做了一些改动，为了适应网络游戏的特点做了一些修改，提出了几个新的东西，第一个是可玩性，可玩性对我们来说是软件、功能、运营性以及功能文档的集合，同时还有艺术方面的特点、吸引最终用户的特点。还有运行配置的测试，我们认为是兼容性的扩充。还有是游戏的可扩展性测试、安全性、可靠性、性能测试，这跟软件测试基本相同。
　　
　　下面我会分别对这几个内容做一个简单的介绍。可玩性测试主要的测试内容是游戏的情节测试、游戏界面、游戏操作以及游戏的音效还有游戏文档的测试内容，最好的测试方法是与我们以前的测试方法结合，在推出第三方测试之上加上用户测试以及专家评审。第二项测试的内容是运行的配置测试，现在因为计算机IT技术的发展，配置都在极具增高，网络游戏客户端采用了大量3D引擎的技术，到底什么样的配制最是小的配置、标准的配置，显卡和声卡的要求是什么样的，都需要进行测试的。第三是应用软件的测试，对网络产品来说浏览器的测试是一个比较重要的组成部分，对于浏览器使用的一些技术和兼容性如何是做重点认证的。第三点是网络类型的兼容性测试，现在中国不同的网络类型对网络游戏的影响到底是怎么样的，这也是需要通过测试来解决的。最后一点是IDC中间软硬件平台的测试。我们网络游戏的厂商通常一方面自己会搭建一个IDC的中心或者是租用电信其他平台来部署网络产品，在这个过程中需要首先对IDC软硬件平台做一些测试，包括它的服务器、存储系统、网络系统、安全系统是不是能够满足当前游戏的需要，这是一个比较重要的部分。还有游戏的扩展性测试，我们也做了一个简单的调研，了解到网络游戏的生命周期到目前为止像其他软件产品一样有一个生命周期的时效的。如何保证我们国有网络游戏产品在比较长的时间内可以做到投资的有效性，这样就需要提高它的扩展性来达到延缓生命周期的目的。我们对网络游戏是不是按照故事设计、情节和场景是不是根据需要进行扩充，网络游戏的服务器架构是不是采用了分布式架构、分布式服务器的方式，在运行平台上能不能支持主流的UNIX、Linux、Windows的平台，最好是能够支持国产的Linux平台，这样可以使网络游戏产品真正实现全套解决方案的国产化。
　　
　　下一个测试内容是安全性的测试，刚才我听到飞天诚信公司经理介绍到安全认证机制，我们认为这是比较好的解决方案。这也是安全性测试的一个部分。首先是用户认证的测试，现在网络游戏产品中的一些装备、经验值法律上会承认，是一种私有财产，这样对于私有财产的保护只有通过用户认证的方式来解决。用户认证的强度到底达到什么样的程度测试也是一个主要的手段。同时也会对数据存储加密做一个评审，对于数据的一些审计手段主要是为了防止黑客的入侵，还有内部人员入侵的问题，也分为主动审计和被动审计两个组成部分。
　　
　　最后我们也希望对我们管理上的漏洞做一些评估，主要是像内部信息安全的管理，它的体系是不是合理、是不是从制度上就杜绝了黑客入侵以及偷一些信息装备的手段。还有可靠性的测试，因为网络游戏产品通常情况下我们认为它应该是7乘24小时不间断运行的环境，应该达到电信级或者是金融级信息安全的手段。在我们测试时会对以下几个部分做重点认证，包括网络游戏容错的处理，容错处理包括以下几个部分，网络攻击、病毒攻击、用户错误操作、管理人员错误操作、网络的延时、中断、服务器荡机等等，还有会进行N乘24小时可靠性运行试验。第三是任何完善的措施都不可能保证异常情况的出现，所以应急策略的制定、评估也是一个重要的部分。最后一点是网络游戏性能的测试，这一块提了几个概念，第一个是负载测试，第二是压力测试，压力测试实际上是我们一个系统最大的承载能力的测试，还有是数据量的测试、故障的定位等等。我们有如下几个指标需要重点提出，第一个是在线用户数，在线用户数一天可能能够达到10万或者是20万的量，在线用户数的测试也是一个比较重要的性能指标。在线用户和并发用户不是同一个概念，并发用户是同时对服务器进行操作和响应的，它的压力通常情况下会比我们预想的要低得多，大概是几百到上千的数量级，但是它对我们的服务器、系统能够造成巨大的危害，所以系统能够承受多大的并发用户也是很大的指标。最后是响应时间，这是关系到网络游戏在公众心目中的形象问题。还有一些性能资源监控的一些问题，包括服务器资源CPU的历用率、内存的利用率、丢包率、包转法率的测试等等，我们可以找出服务器的最佳配置。测试工具方面采用两种方式，一种是现有的国外引进的，另外是自行开发一些工具。为什么提到自行开发呢？因为网络游戏应用了大量新的技术，包括3D技术、网络框架的技术，还有用了一些私有协议，一些非标协议，这样就需要自行开发一些工具来完成这样的测试。以上基本上是我的测试内容，下面简单对中国软件评测中心做一个简单的介绍。
　　
　　我们成立于1990年国家级权威第三方服务结构，接受信息产业部和质检**的领导，我们也是中国电子信息产业发展研究院CCID的一个成员，我们的业务体系基本上是测试、认证、监理、咨询和培训，希望通过我们的测试服务能够推动网络游戏的发展，能够协助中国的网络游戏走向世界，谢谢大家。（赛迪网提供）