数据质量核查工具的设计与实现

陆俊 李葵 周明 辛永 陆鑫

摘 要：本项目研究旨在解决一体化电量与线损管理系统的数据集成和实施过程中遇到的数据传输路线繁琐、传输时间过长、传输过程缺乏有效的监控和问题处理机制以及数据准确性和及时性不能满足线损计算要求的问题。通过建设数据质量核查工具，实现各专业数据到线损系统传输过程监控，完成线损系统中各类数据的合理性校验，完善的线损数据质量管控机制能够确保数据的准确、及时和有效。

关键词：线损应用；传输监控；数据校验；质量管控

中图分类号：TP311.52 文献标识码：A 文章编号：2096-4706（2018）08-0047-03

Abstract：The purpose of this project is to solve the problem of complicated data transmission line，long transmission time，lack of effective monitoring and problem handling mechanism in the process of data integration and implementation of integrated electricity and line loss management system，and the problem of data accuracy and timeliness can not meet the requirement of line loss calculation. Through the construction of data quality verification tools，we can monitor the transmission process of various professional data to line loss system，complete the verification of all kinds of data in the line loss system，and improve the quality control mechanism of the line loss data，which ensures the accuracy，timely and effective data.

Keywords：line loss application；transmission monitoring；data validation；quality control

0 引 言

随着国家电网公司“十二五”信息化系统的建设，线损管理相关业务支撑系统得到了長足的发展。一体化电量与线损管理系统（简称同期线损系统）全面推广应用，系统建设所覆盖的管理层级、电压层级、电网设备、用电客户、计量装置和采集数据呈几何级急速增长，系统已经面向各层级、各专业、各基层班组全面开放，实施工作量越来越大，数据治理范围越来越广，管控工作越来越困难。在同期线损系统建设过程中，发现多系统间关联、数据传输过程及线损管控治理不及时等各类问题。当数据质量出现异常时，能够及时预警，通知相关专业或部门进行数据消缺，确保数据质量可靠、传输稳定、消缺及时，并满足同期线损系统数据接入要求。同时为进一步加强公司基础管理，扎实做好同期线损管理系统建设和基础数据治理工作，确保源端数据从中间平台到线损数据库过程中数据传输的准确性和效率，通过对传输完成的数据进行合理性校验分析，实现对线损数据质量的管控，促进线损数据治理和同期线损系统建设快速有效进行。……