采用QC因果分析法查找大型IDC数据机楼疑难故障案例

［慕家骁 罗森文 宗凌 黄建华 马波］

1 引言

某运营商在西北某省公司大型IDC数据机房内的IP数据设备、电源设备先后发生200多台次以上的大面积重启、瞬断、宕机等故障，该运营商集团公司汇集了国内顶尖的数个通信设备制造商、集团级技术权威专家数十人，历时超过大半年时间均未能找到造成这些设备发生故障的任何原因，后通过采用QC因果分析法，终于找到了造成这些故障的原因，并予以排除这些故障。

2 QC因果图解分析法

全面质量管理产品质量控制因果分析法简称QC（Quality Control），QC因果分析法在我国制造业推广应用较多，但在运营商行业维护工作中应用较少，QC的因果分析法如图1所示。

图1 产品质量控制因果图

3 利用QC因果分析法查找大型IDC数据机房疑难故障案例

3.1 IDC设备故障情况

某大型IDC数据机楼内共发生电源、IP数据设备重启、宕机、误码等故障逾数百台次以上，其中大量交、直流电源和IP数据设备每次重启的设备在时间、厂家、型号等方面都不完全一样，具有明显的离散性；其中数据设备共发生重起22次，涉及设备重起事件104次，涉及的设备有某设备供应商163网国家骨干设备2台12 008，163网省网核心设备1台12 816，省网汇聚设备1台12 416以及省网接入设备2台6 509、2台3 750、1台3 550、2台7 513、2台4 500、2台7 513；某设备厂家的1台窄带接入服务器A8010、1台接入交换机A8016、2台BRAS 5200G、1台接入交换机6506R、1台接入交换机3 528；某设备厂家的接入交换机1台T64G、6台3 952；某公司BRAS设备ERX 705一台。部分设备故障发生如图2所示。

图2 部分设备频繁启动记

3.2 利用QC因果法分析IDC数据机房的故障

根据IDC数据机房电源和IP数据设备维护管理实际情况，我们可以做出如下排除疑难故障的分析方法和思路，如图3所示。……