新旧信息系统的数据核对

电力18讯：    摘要：在电力营销管理信息系统的上线运行前，新旧系统的数据转换，需要进行严格的数据质量校验。由于数据核对工作具有极为繁杂琐碎、工作量大、耗时长、差异问题找出困难等特点，采用合理的数据核对策略，掌握一些数据核对的关键技术要点，以及科学的实施方法十分重要。该文提出了数据核对实施策略，阐述了数据核对的关键技术，包括转换数据的选择、转换计划、如何保证转换方案的有效性、转换后的数据校验，生成电量电费档案，以及数据核对分析等多个方面。

关键词：管理信息系统；数据核对；数据转换；数据校验

中图分类号：TP315 文献标志码：B 文章编号:1003-0867(2007)05-00-02

目前，大部分供电企业的电力营销管理信息系统是在原有系统基础上进行升级改造的，原有系统基本上都具备基础的电费抄核收功能，同时也积累了大量的营销电费数据。

由于电量电费计算是电力营销管理中最为核心的工作之一，它提供一套电费的基础数据，直接关系到供电企业的经营效益和客户服务质量的好坏。在新系统上线前，将旧系统数据转换到新系统中，并进行数据质量检验是十分重要的和必要的。在众多的数据质量校验方法中，针对新旧系统电量电费数据核对（以下简称数据核对）是采用的最普遍、最有效的方法之一，新旧系统电量电费数据的一致性如何直接作为新系统能否上线运行的重要标尺。

数据核对是对旧系统数据质量、新旧系统数据转换、新系统数据质量和新旧系统电费算法差异、业务变更等多个方面的核对和验证。然而，由于数据核对工作具有极为繁杂琐碎、工作量大、耗时长、差异问题找出困难等特点，专变户需要逐户核对，要核对多个电费结算周期，给日常工作本身就十分繁忙的营销核算人员又增加了新的工作负荷。

所以，采用合理的数据核对策略，掌握一些数据核对的关键技术要点，以及科学的实施方法是十分重要和必要的。

1 总体实施策略

数据核对可以分数据转换、生成电费档案、电量电费数据核对三个主要步骤。整个数据流程如图1所示。



图1　数据核对数据流程示意图
图1　数据核对数据流程示意图

针对某一版本旧系统数据结构和新系统数据结构，分别形成数据转换方案，拟定转换步骤、转换脚本、转换说明等内容。将不同版本的旧系统的基础客户档案数据、历史电费数据以及核对结算周期内的抄表数据、电量电费数据统一转换到中间数据库，再根据转换程序汇总转入数据核对数据库。数据转换总体结构如图2所示。

数据转换后，按照实体完整性、引用完整性、业务规则约束，对转换中间数据库、数据核对数据库的数据进行校验、分析。如果是旧系统数据质量问题，尽可能在旧系统中进行数据补录。

利用新系统计算电量电费功能，形成电量电费档案。

利用电量电费核对工具，辅助进行电量电费核对。核对手段包括各类别的电量电费差异显示、通过业务规则进行差异分析、逐户的电费结算单排查。针对差异结果，分析原因，编写差异分析报告。根据形成差异的不同情况，包括数据质量问题、数据转换问题、新旧系统电费算法差异、用电业务变更等，分别处理：属于旧系统数据质量问题，则需要更正旧系统数据；属于数据转换问题，则需要修改数据转换脚本；属于算法差异问题，需要进行确认，统一算法。其中，前两条都需要重新进行数据转换，重新核对。

2 关键技术分析

2.1 数据转换

数据的选择，需要转换的数据分为样本数据、比对数据两种类型，如图2所示。样本数据包括基础档案数据、历史电费数据（至少上次结算周期的，否则没有上次表码）、结算周期内的抄表数据。转换抄表数据，可以减少在新系统中表码录入的工作量。比对数据主要是指核对结算周期内的电量电费数据。



图2　数据转换总体结构示意图
图2　数据转换总体结构示意图

数据转换计划，一般地抄表、核算周期具有时段性，在这段时间内，旧系统每天都不断地增加抄表数据、电量电费数据。所以，要考虑供电企业规定的抄表、核算时间要求，拟定符合实际情况的数据转换实施计划。当然，也可以在周期结束点，一次性转换，但此种转换方式不能保证新旧系统核对的同步，只能等旧系统全部核算完毕，再进行新系统中核算，所以，时效性较差。

数据转换方案的有效性，由于新旧系统的数据结构不同，在语法和语义上不一致，分类编码规范不一样，而且不同数据库的数据类型也是有差异的，以及在客户档案、电费档案等业务模型、数据模型都不同，必须经过多次试转换之后，确保数据转换脚本的正确性，才实施数据核对工作。否则，事倍功半。所以，数据转换<