久其数据质量管控方案应用实践

在大数据时代，数据是财富，是资源，更是竞争力。随着政府及企业信息化建设的全面展开，各种业务系统在企业运营和管理等方面扮演着越来越重要的角色。系统中存储的大量数据已经成为企业继“人、财、物”后较具价值的企业资源。

Gartner调查显示，导致如商业智能（BI）和客户关系管理系统（CRM）这些大型的、高成本的管理信息系统方案失败的主要原因，就在于企业是根据不准确或者不完整的数据进行决策。可以看出，数据质量的好坏直接关系到信息的准确程度，也影响了企业的生存和竞争能力。

当前，许多企业在长期系统维护和使用中，各系统中的数据因存储分散，时常导致共享困难，并且在各系统数据展现时也容易出现不一致的情况，“数”出多门；系统功能重复建设，数据多头管理、职责分散、权责不清；系统间数据无法互联互通，出现数据冗余存储；数据多处使用，术语和规则不同，数据出现不一致或二义性，造成内部使用混乱；业务流程严重隔裂，反映了数据处理过程中存在的问题；缺少统一的元数据和主数据规范等，都会造成数据质量低下，数据可用性差等问题。这些数据不仅严重影响了目前对企业经营质量分析等工作的开展，而且对今后各业务的市场拓展产生潜在的影响。

因此，建立科学有效的数据质量管控系统，将数据质量管理以制度化、规范化的方式落实到数据生成、传递和使用的各个过程、方面和人员之中，将会成为当前企业信息系统建设中的一项重要工作。

中国电信集中MSS系统是在全国范围内建立一个集中、规范、统一的管理支撑系统平台，久其软件承建了分析层的数据分析平台、合并报表平台、统计报表平台、ABC作业成本管理平台和数据稽核平台。其中数据稽核平台的数据管控范围，包括核心SAP ERP系统以及二十多个业务系统，并组织全国二线、一线运维团队在该平台开展数据质量管控工作。

中国电信集中MSS数据稽核平台采用了久其数据稽核工具，其技术架构如下图所示：

中国电信集中MSS数据稽核平台，从业务数据的内在结构或者业务数据之间的关系出发，通过信息化手段对业务数据的完整性、准确性、合理性等进行检查和评估，揭示数据存在的问题和潜在风险，平台功能如下：

灵活的稽核规则自定义管理；
可配置的数据范围管理；
成熟的稽核模型管理和执行；
及时有效的在线推送待办和预警；
数据质量考核评价体系；
标准的稽核结果报告；
强大的统计、分析、展现能力。

应用价值

电信集团MSS数据稽核平台结合电信企业组织机构和管理办法，促进数据管控执行体系落地，消除数据的不一致性，建立规范的数据应用标准，提高组织数据质量，实现数据广泛共享，并能够将数据作为企业的宝贵资产应用于业务、管理、战略决策中，发挥数据资产的商业价值。

1. 全周期数据稽核，支持主数据、业务数据的事前、事中及事后稽核。

2. 执行有效，以标准规则实时监控数据质量，将数据生产者、使用者、管理者关联起来联动响应，以绩效手段保障数据管控体系有效执行。

3. 快速响应，可以准确、快速的定位问题数据源，及时通知数据负责人进行处理，减少并避免损失。

4. 标准统一，以核心业务为主线，提供统一的数据标准，规范数据管理流程，建立数据监控规则、应用规范。

5. 决策准确，以高质量的数据，保障决策信息的准确有效。

久其数据质量管控方案主要采用久其大数据领域技术产品体系中数据稽核工具，结合企业组织机构和管理办法，形成数据管控运营体系落地执行。

久其数据稽核工具是一个强大的数据质量检查与控制工具，可实现数据的完整性、一致性和合理性检查；其内置的公式引擎技术，可以零编码实现各种复杂数据稽核规则和处理逻辑的定义；分布式稽核执行引擎解决大数据处理效率问题；自动化调度引擎技术实现计划任务执行和待办触发，并能自动生成标准化的数据质量检查报告，形成闭环的数据质量管控。