特邀嘉宾
神州数码信息服务集团集成服务战略本部质量测试部高级咨询顾问刘培臣
江西移动网络部网管中心 梅 辉
主持
舒文琼黄海峰
编者按
当前我国3G网络建设正在如火如荼地进行中，继2009年投资1609亿元建网后，运营商在2010年仍把3G网络建设作为重点方向。
在3G建设过程中，测试的重要性日益凸现，只有做好3G测试，才能给用户带来良好的业务体验，测试已经成为3G建设的关键步骤。值得注意的是，3G网络与2G网络存在很大的不同，而全业务以及三网融合又为3G测试带来了新的挑战。为此，本刊邀请三位业界专家，对如何通过全面测试提升3G用户体验进行深入探讨。
业务性能测试将成重点
记者：从3G网络开始建设到现在，国内3G测试经历了哪些阶段？目前运营商3G测试进入了哪个阶段，在过去的测试中发现了哪些较突出的问题？
李波：在我国，3G发展大致经历了最初的概念性验证、规模性网络试验、个别城市的试商用和正式商用、全国大范围的网络建设等阶段，3G发展的不同阶段对于测试的重点也不尽相同，我国3G测试大致可以分为以下几个阶段。
第一，概念性验证（PoC）阶段，POC是小范围应用新技术的试验，主要验证3G性能，例如数据速率、系统延时等是否满足系统需求。第二，互操作测试（IOT），IOT是多厂商运营环境形成的技术基础，一直贯穿于规模试验后的各个阶段。第三，一致性测试（CON），CON是指在商用前验证网络和手机的行为规范是否与核心规范所规定的行为相一致，主要实施于3G系统大规模商用阶段。第四，外场测试，通常用以进行3G网络覆盖和网络优化，还可以作为一致性和互操作测试的补充，发现终端和网络的一些问题。第五，运营商针对特殊需求进行的测试，运营商会根据自身需求以及网络的实际情况，要求不同终端支持不同的业务功能，为了确保这些业务功能的质量，就需要对终端进行业务应用测试和软件功能测试。
刘培臣：网络测试层面，国内3G测试主要经历了实验室内测试、外场测试、商用实验网测试三个测试阶段。尽管各家运营商技术不同，采用的标准有差异，某些问题仍未解决，然而3G在技术可行性和标准成熟性上已经基本达到了商用标准，技术上已经不存在大的障碍，当前三大运营商都已开始商用，但网络的覆盖范围、网络带宽、网络的稳定性等方面还都不同程度存在一些问题，距离终端用户理想的体验还有一定距离。
3G技术在不断进步，3G标准也在不断完善，3G不只是网络技术问题，还涉及3G业务问题。大量新的以海量数据为中心的应用是否能在3G网络上顺畅运行并达到最终用户的预期，成为运营商3G业务能否在市场上取得成功的关键。
2009年是各大运营商3G商用激烈争夺市场的一年，但争夺战刚刚开始，网络技术支撑的差异会越来越小，3G业务的服务质量必然成为建立竞争优势的重点，3G测试的重点已由网络技术测试转换为业务应用软件测试。当前各大运营商及其下属省级子公司在软件测试方面的重视程度和相应能力差异较大，据我们市场调研的情况来看，不少运营商的软件测试及测试管理能力与运营的实际需要还有较大差距。
梅辉：测试中主要发现的问题集中在商用终端方面，主要包括以下方面：手机终端无法做主、被叫，掉换问题，通话质量差，手机“脱网”和待机时间短等问题。
这些问题既有网络方面的原因，如网络覆盖、干扰等，也有终端方面的问题，如由于频繁重选诱发的终端死机、“假活”（界面可操作，但终端底层与网络失去交互）、脱网问题，还包括网络和终端间的配合问题，如正在重选过程中，无法主叫/被叫，且无法驻留原小区，导致无法主叫/被叫。
记者：运营商对3G系统的测试目前主要集中在哪些方面？目前3G通信系统测试的主要方法有哪些？它们分别有着怎样的特点？
刘培臣：之所以要上3G，就是因为3G能比2G、2.5G提供更多的业务，能提供宽带网络的3G服务，使手机和电脑的功能逐渐合二为一，手机电脑化的趋势越来越明显。在完成3G网络部署后，运营商的建设重点已经放在业务应用服务建设上，在保证原有的优质语音服务基础上，其它更多有3G特色的业务，包括数据、多媒体、WAP、Web等是各家运营商的持续建设重点，后台的业务支撑系统不断升级也成为必需。相应的3G测试工作，一方面继续QoS测试，帮助运营商确保市场竞争力，另一方面主要的精力应该集中在这些新的大量基于软件的应用测试上，这些业务应用质量的优劣将是决定运营商市场竞争力的关键。
3G测试的主要方法可以分为手工测试和自动化测试两大类。手工测试主要集中在业务应用的功能测试方面，由测试人员按照测试案例一步一步验证相应功能及预期运行结果的差异，测试过程中测试人员必须认真细致地追踪每一步骤，并在测试过程中进行分析并最终负责如实填写测试结果。手工测试对测试人员的依赖程度高，测试成本将随功能复杂度、规模及测试轮次呈现线形递增，但测试效率仅能由测试人员测试熟练后有小幅度提升。
功能测试也可采用自动化测试来进行，最明显的优势就是对于大量需要重复的功能测试，自动化测试将能提高测试效率，有效降低成本。对于业务应用的性能、可靠性、安全性及负载能力的测试，几乎都必须依赖软硬件工具进行自动化或半自动化测试。
梅辉：目前TD系统的测试主要集中在以下两个方面。第一，全网拉网测试，通过覆盖、干扰、邻区、频点优化及新技术引入达到TD网络指标和GSM网络测试KPI指标在同一水平。第二，各类商用终端和业务测试，具体包含两个方面：定点CQT拨打测试，多场景全终端重点业务性能测试，如2G/3G网络覆盖均很好和2G/3G网络覆盖均较好的测试；重点业务DT测试，如可视电话、短信、彩信、WAP上网业务性能测试及异常事件处理优化解决等。
主要方法包括网络层面的传统DT/CQT测试，以及针对典型商用终端、芯片，联合厂家进行的故障重现、信令抓包分析。第一种测试方法重点倾向于网络层面的问题发现和问题解决，基本通过网络优化等手段可以解决；第二种测试方法则需要终端、芯片、设备厂家及运用商联合优化解决问题，问题定位比较深入。
3G新形势下的新需求
记者：与2G时代相比，3G测试存在哪些不同点？这些不同点为运营商提出了哪些新的要求？
李波：与2G相比，3G终端的技术更加复杂，功能更强，支持的业务更多，这就需要进行更全面的测试来对性能予以保障。
3G和2G在业务上有非常大的区别。2G的主要业务是语音业务，数据业务非常少；3G将发生很大变化，更多地加入了一些附加业务，比如可视电话和流媒体等。针对这些新业务的测试必不可少，既要保证终端对于这些业务和功能的支持，又要符合网络的要求。
刘培臣：在2G时代，测试的重点一方面是保证语音业务的服务质量，另一方面是保证应用支撑系统由于新业务而不断升级改造后的正常运营。3G与2G的重要区别在于业务的丰富程度，3G时代的业务包括3G-324M视频电话、语音质量评估、MMS、WAP、KJAVA、Streaming、Browsing、POC等，大量的基于软件的业务应用是测试的重点。由于应用服务种类和服务内容会不断创新，并且服务与服务之间的相互关联也不可避免，如何做好软件开发及测试过程管理，做好软件的版本管理，以及如何组织好众多有复杂关联关系的子项目组成的项目群管理都将是运营商面临的挑战。如果没有良好的组织级测试管理体系，将很难适应运营的实际测试需要。另外，在市场的激烈竞争中，节省成本和提高效率将成为必然的双重要求，在这样的情况下如何进行测试，都将是运营商面临的挑战。
梅辉：与2G网络相比，TD等3G网络具有与2G完全不同的特点，集中体现在以下方面。
第一，3G网络能提供视频电话等多种高速数据业务，而2G网络基本以话音、低速率数据业务为主，这导致在进行测试时，尤其是业务遍历性测试时，测试的业务非常多，因此出现的问题也比较多。
第二，3G产业链相对于2G还不完善，尤其是商用终端方面，导致2G网络测试的一个最大问题是，TD测试中经常出现掉话、脱网等问题有很大可能是终端问题导致的，而在2G网络测试中这种情况出现非常少，优化人员可将时间精力集中于解决网络层面问题上。
第三，3G网络由于本身技术特点，如在2000MHz频段采用了智能天线、多用户联合检测、上行同步等关键技术，因此对于这些技术的运用场景、效果等需要不断进行测试，包括提出新的解决方案，如双通道覆盖等进行测试。
记者：在3G业务推出的同时，三大运营商也纷纷进入了全业务时代，这种多业务相互融合的形势为网络测试带来了哪些挑战？
李波：三网融合是大势所趋，在融合的过程中，IMS将在其中扮演极为重要的角色。IMS将是未来统一的网络结构，随着IMS的发展，移动、固定网将会在控制层面进行深度融合。IMS也将对新技术的应用产生深远的影响，如NGN、IPv6等，对测试也提出了许多新要求。作为固定和移动网络融合的标准，IMS所处的网络环境更为复杂，由于网络环境中有各种不同的协议、标准和技术，所以在IMS测试中，就需要全面和灵活的测试工具。
刘培臣：挑战的难度当前来看取决于各运营商最终采用什么样的技术来实现固定移动业务融合，当前已经有运营商直接将“移动电话固话用”。如果运营商从策略上在完全的3G时代完全取消了当前技术的“固话”业务，均采用“移动电话固话用”，这样的融合是无缝融合，测试的重点就只需完全关注移动业务的3G测试。如果运营商还想在3G时代保留当前的固话技术，实现固定移动业务融合，计费系统和相关的经营分析管理系统将是测试的重点和难点，最大的挑战将集中在测试管理上。
组织级体系 控制测试成本
记者：现在运营商纷纷采取了2G、3G混合组网的方式，同时也在紧密跟踪下一代通信技术，可以预见，未来多种代际的移动通信技术将在并存中更迭替换，应对这一现象，测试技术如何实现平滑升级，以最大可能地降低测试成本？
李波：随着技术的发展，以后组网必然采用多种制式混合组网的方式。相应的，终端也要支持多种模式。反映到测试中，测试系统除了完成2G、3G本身固有的测试项目外，还要能够完全模拟和仿真这些网间漫游切换，这无疑增加了测试系统的复杂度。
刘培臣：由于在此过程中各大运营商要保持服务的连续性，因此相应的应用软件的版本频繁更新不可避免，新需求的增加难免对原有系统造成影响，频繁的回归测试不可避免，完全依靠人工测试从效率上很难达到现实需要，即使能够投入大量的人员进行并行测试，缩短测试工期，也必然在成本上有较大浪费，采用自动化测试是最好的选择。
但在此过程中，3G时代丰富的应用服务种类必然使应用服务软件极其复杂，复杂耦合的关联应用再加上频繁的版本升级，测试任务多、时间紧必然成为运营商面临的挑战，单一的测试人员或小型测试团队在这样的情况下已不可能完成实际所需的测试任务，只有建立完善的组织级测试管理体系才能符合实际要求，才能有效控制测试成本。
梅辉：目前各运用商都在开展2G/3G融合组网，优化测试等，这些都给组网，尤其是网络安全、性能等方面提出了更高的要求。这样对网络性能的测试也提出了更高的要求，包括今后终端也支持多模方式，支持多种接入技术，对网络终端的测试评估就显得尤其复杂。测试技术要实现平滑升级，关键就是在测试仪器仪表、芯片设计等方面需多方考虑，避免出现每个系统一个测试模块，否则将来在测试中分析和发现问题会非常复杂。 
