五大痛点待解NFV测试亟须形成完整指标体系

徐姗姗

2016年，NFV正在经历从试验网到部署发展的关键阶段。NFV作为整个领域的重大变革，在网络接入、控制、核心网、业务等层面都有相应的应用出现，NFV已经逐步融入到电信业中，进入了网络部署的快车道。

当人们热议NFV技术、标准、产品的发展现状以及畅想其未来发展策略的时候，却很少着重讨论另外一个非常重要的话题，那就是NFV技術相关测试。

在2016GNTC全球网络技术大会上，中国联通网络技术研究院NFV解决方案经理童俊杰表示：“随着NFV技术、标准，厂商的解决方案以及运营商部署策略、方案进一步落实的形势下，运营商要保证在NFV商用部署后能够提供更好的网络和服务，能够更加完善地满足业务与用户的需求，NFV测试作为一项重要手段必不可少。”

自上而下分三个阶段

“NFV测试的一个典型的思路就是自上而下的思路。”童俊杰表示，“就是从业务或应用的需求出发，去逐步向下推断相应的功能和性能的要求，来进行测试验证。”

从这样的需求出发，中国联通认为，NFV测试进程分为三个阶段。在部署初期，网元业务的标准并不成熟，因此这一阶段主要是实验室测试，对各厂商的产品和解决方案在实验室进行测试，主要包括功能性的验证以及可用性的保证。后续在部署过程中，这一阶段是在运营商进行试点或商用的情况下，可能涉及到多厂家互操作等问题，因此，这一阶段测试中包括功能集成、接口集成等多厂商协同等问题的测试。在部署后，多个系统将共同提供服务，组件间会不断进行升级，那么这一阶段的测试就要保证升级前后整个系统提供一致性的功能服务。

定义测试指标差异较大

基于上面的思路，目前中国联通网络研究院在实验室正在针对NFV进行测试，主要包括硬件、虚拟化层和软件方面，以验证性能和功能是否能够满足上层网元或业务的需求。“在这些测试的进展中，实验室发现NFV测试中仍然存在很多问题尚待解决。”童俊杰表示。

例如参考NFV，在测试中实验室希望能够验证底层的基础设施能否满足上层的性能和功能的需求，而对性能方面来说，业界却没有一个功能的参考或者基准来进行测试。

另外，在开源和商业NFV选择方面也存在较大分歧：选择开源NFV对厂商来说并不方便，对测试的进度会造成拖延，同时开源产品与商业产品设计优化方面存在的差异性，也难以搭建起端到端的整体环境，而商业NFV在测试使用中又会受到时间、费用、工具等多方面的限制。

特别是在NFV引入初期，测试的复杂性大幅增加。中国移动研究院网络总体研究室主任张昊表示：“对运营商来说，包括对整个技术引入路径、效果的掌握，特别对测试工具的把握复杂性极大增加。”

“我们发现在虚拟化的测试中，在继承传统业务的过程中，功能方面是一个测试重点，同时NFV引入之后，对业务层面带来很大的变化，特别是端到端的测试、性能优化等方面会造成不同的结果。”张昊表示，“这对于运营商来说，在制定业务KPI时带来很大的影响，在KPI指标要求的提升还是下降、具体指标变化值等的确定，这些工作都需要长期的努力才能完成。”

亟须形成完整测试体系

“对于NFV整个体系，如今并没有一个完整的测试指标体系去指导整个测试工作，这使得测试工作在指标、配置的设定和对测试结果的判断和分析都变得非常复杂。”童俊杰表示，“就像现在的测试中，我们建立了很多指标，根据不同的方案选择不同的重点。”

结合中国联通的NFV测试工作进展，童俊杰提出了目前NFV测试中的五大痛点。

一是测试环境的选择。童俊杰提出，这一问题集中在网元虚拟化以后带来变化并不确定。例如在内部结构发生的变化和形态的变化，现在各个厂家在实现虚拟化以后，一个网元分成多个VNFC，而形态上虚拟化以后会带来移动性，这就需要考虑软硬结合以后的部署规则，以及在发生失败或者维护的情况下可能要进行的迁移和扩容等问题。

二是异常诊断问题。“在测试过程中，我们会发现一些测试结果跟本来预期或理论指标范围存在一定的差距，但是现在并没有比较好的自动化诊断工具来判断测试中的问题所在。”童俊杰表示。

例如在网络性能测试中出现性能大幅下降时，通过定位发现背板交换机存在性能瓶颈和丢包情况，通过对交换机进行配置来改进测试结果；在测试出现磁盘IO性能和磁盘实际能力出现较大差距时，最后发现是测试方法需要进行优化。由于自动化诊断工具的缺失，这些测试到的异常问题无法迅速得到定位和解决，大大降低了测试的效率。

三是NFV系统整体性能评估手段的匮乏。童俊杰表示，现在，无论是标准组织提出的规范还是运营商自己制定的测试标准，对具体的硬件、中间件都有相应的功能和接口要求，但对于整体性的评估还比较匮乏。可能运营商实际部署会存在多个不同的网元，或顶层存在多个厂家不同的硬件，那么资源池部署以后，到底在哪些资源上可能会存在瓶颈导致上层的业务受到影响？对这样整体系统性能的评估现在还缺乏相应的工具和方法。

四是端到端的评估。“NFV技术应用到网络部署后，最终将以业务的形态展现给用户使用。那么对端到端服务的QoS的保证、可靠性保证等目前还无法进行有效的评估和验证。”童俊杰表示。

五是安全性。“对安全性的测试不仅是评估的问题，还有包括部署中、部署后的安全技术和要求，如今仍在不断完善以及演进之中。”童俊杰表示。

开源组织OPNFV最新调研结果显示，如今，业界在引入NFV技术的过程中最关心的、也是最担忧的问题集中在安全方面。中国电信北京研究院IP与未来研究网研究中心主任解冲锋表示：“网络层面CT与IT技术的融合，首先可能就会带来安全的隐患。”不可否认，NFV的确可以帮助网络运营商编排安全策略，但是NFV也带来了新的安全漏洞，需要运营商在测试中进行更加复杂的入侵检测、评估未来可能面临的安全问题，以及迅速对威胁做出反应以及修复漏洞。对于这些问题，在测试过程中都需要进行完整的评估。

无论是对虚拟化技术实现的探讨，还是对未来业务引入之后KPI的定义，要实现未来网络的可管、可控、可运营，这些测试中的问题都不容规避。