企业经营数据的质量及其八个指标

摘要：随着大数据技术逐步在企业端应用，越来越多的企业在利用数据技术提升管理效率和决策的科学性。企业对数据分析人才的需求也越来越旺盛，对管理者的数据分析能力也提出了新的要求。

数据的质量直接影响着数据的价值，并且还影响着数据分析的结果以及我们依此做出的决策的质量。质量不高的数据会影响企业的经营管理决策；如果数据是错误的，那么还不如没有数据，因为没有数据时，我们会基于经验和常识做出不见得是错误的决策，而错误的数据会引导我们做出错误的决策。因此，数据质量是治理企业经营管理数据的关键所在。

数据的质量可以通过八个指标进行衡量，每一个指标都从一个侧面反映了数据的品相。这八个指标分别是：准确性、及时性、即时性、真实性、精确性、完整性、全面性和关联性。

我们在比较两个数据集的品相时往往采用如下图所示的这种图形表示。例如常规来讲，内部数据集的准确性、真实性、完整性高，而全面性、及时性、即时性、精确性和关联性方面取决于企业内部对数据的重视程度以及采集数据的技术手段；

而外部数据集（如微博数据、互联网媒体数据等）的全面性、及时性和即时性都可以通过技术手段如网络爬虫等得到提高，但在准确性、真实性、精确性上难以保证，也难以控制，而关联性取决于数据采集和挖掘的相关技术。

数据的准确性

数据的准确性（Accuracy）是指数据的采集值或者观测值与真实值之间的接近程度，也叫误差值，误差值越大，数据的准确度越低。数据的准确性由数据的采集方法决定的。

数据的精确性

数据的精确性（Precision）是指对同一对象在重复测量时所得到的不同观测数据之间的接近程度。精确性，也叫精准性，它与数据采集的精度有关系。精度越高，要求数据采集的粒度越细，误差的容忍程度也越低。

例如在测量人的身高时，可以精确到厘米，多次测量结果之间的误差只会在厘米级别；在测量北京到上海的距离时，可以精确到千米，多次测量结果之间的误差会在千米级别；用游标卡尺测量一个零件的厚度时，可以精确到 1/50 毫米，多次测量结果之间的误差也只会在 1/50 毫米级别。因此，可以说采用的测量方法和手段直接影响着数据的精确性。

数据的真实性

数据的真实性，也叫数据的正确性（Rightness）。数据的正确性取决于数据采集过程的可控程度。数据采集过程可控程度高，可追溯情况好，数据的真实性就容易得到保证，而可控程度低或者无法追溯，则数据的真实性就难以得到保证。

为了提高数据的真实性，采用无人进行过程干涉的智能终端直接采集数据，能够更好地保证所采集的数据的真实性，减少人为干预，减少数据造假，从而让数据更加准确地反映客观事物。

数据的及时性

数据的及时性（In-time）是指能否在需要的时候获到数据。例如企业在月初会对上个月的经营和管理数据进行统计和汇总，此时的数据及时性是指这些数据能否及时处理完成，财务能否在月度关账后及时核算。数据的及时性是数据分析和挖掘及时性的保障。如果企业的财务核算流程复杂，核算速度缓慢，上个月的数据在本月月中才能统计汇总完成，那么等需要调整财务策略的时候，已经到月底了，一个月已经快过完了。特别是当企业做大了之后，业务覆盖多个市场、多个国家，如果数据不能及时汇总，则会影响到高层决策的及时性。数据的及时性与企业的数据处理速度及效率有直接的关系，为了提高数据的及时性，越来越多的企业采用管理信息系统，并在管理信息系统中附加各种自动数据处理功能，在数据上传到系统中之后自动完成绝大部分报表，从而提高了数据处理的效率。使用计算机自动处理中间层数据是提高企业数据处理效率的有效手段。

企业除要保证数据采集的及时性和数据处理的效率外，还需要从制度和流程上保证数据传输的及时性。数据报表制作完成后，要及时或者在要求的时间范围内发送到指定的部门，或者上传到指定的存储空间中。

数据的即时性

数据的即时性包括数据采集的时间节点和数据传输的时间节点，在数据源头采集数据后立即存储并立即加工呈现，就是即时数据，而经过一段时间之后再传输到信息系统中，则数据的即时性就稍差。例如一个生产设备的仪表即时地反映了设备的温度、电压、电流、气压等数据，这些数据生成数据流，随时监控设备的运行状况，这个数据可以看作即时数据。而

当将设备的即时运行数据存储下来，用来分析设备的运行状况与设备寿命的关系时，这些数据就成了历史数据。

数据的完整性

数据的完整性是指数据采集的程度，即应采集的数据和实际采集到的数据之间的比例。例如在采集员工信息数据时，要求员工填写姓名、出生日期、性别、民族、籍贯、身高、血型、婚姻状况、最高学历、最高学历专业、最高学历毕业院校、最高学历毕业时间共 12 项信息，而某个员工仅仅填写了部分信息，例如只填写了其中的 6 项，则该员工所填写数据的完整性只有一半。

一家企业中的数据的完整性体现着这家企业对数据的重视程度。要求采集的数据在实际中并未完整采集，这就是不完整的数据，这往往是企业对数据采集质量要求不到位导致的。

另外，对于动态数据，可以从时间轴去衡量数据的完整性。比如，企业要求每小时采集一次数据，每天应该形成 24 个数据点，记录为 24 条数据，但是如果只记录了 20 条数据，那么这个数据也是不完整的。

数据的全面性

数据的全面性和完整性不同，完整性衡量的是应采集的数据和实际采集到的数据之间的比例。而数据全面性指的是数据采集点的遗漏情况。例如，我们要采集员工行为数据，而实际中只采集了员工上班打卡和下班打卡的数据，上班时间员工的行为数据并未采集，或者没有找到合适的方法来采集，那么这个数据集就是不全面的。

再例如，我们记录一个客户的交易数据，如果只采集了订单中的产品、订单中产品的价格和数量，而没有采集客户的收货地址、采购时间，则这个数据采集就是不全面的。

腾讯 QQ 和微信的用户数据记录了客户的交流沟通数据；阿里巴巴和京东的用户数据记录了用户的交易数据；百度地图记录了用户的出行数据；大众点评和美团记录了客户的餐饮娱乐数据。对全面描述一个人的生活来说，这些公司的数据都是不全面的，而如果把他们的数据整合起来，则会形成更加全面的数据。所以说，数据的全面性是一个相对的概念。过度追求数据的全面性是不现实的。

数据的关联性

数据的关联性是指各个数据集之间的关联关系。例如员工的工资数据和绩效考核数据是通过员工关联在一起来的，而且绩效数据直接关系到工资数据。采购订单数据与生产订单数据之间通过物料的追溯机制进行关联，而生产订单又是由员工完成的，即通过员工作业数据与员工信息数据关联起来的。

本书探讨的企业经营数据，每个数据集都是相互关联的，有的是直接关联的，如员工工资数据和员工绩效数据；有的是间接关联的，如物料采购订单数据与员工工资数据。这些数据是由公司的资源，包括人、财、物和信息等关联起来的。如果有任何的数据集不能关联到其他的数据集，就会存在数据割裂或者数据孤岛。数据割裂和数据孤岛是企业经营数据关联性不足导致的。而数据的关联性直接影响到企业经营数据集的价值。

——本文摘自《企业经营数据分析 : 思路、方法、应用与工具》，作者：赵兴峰著

内容提要

本书为从事企业经营数据分析工作的人员以及企业中的高层管理者提供数据分析的思路和方法。本书的内容来自笔者长期从业经验的总结，所有的内容都是从企业的实际应用出发，涵盖了多个行业，其中包括生产制造业、零售服务业、电商行业等，读者可以将其中的思路和方法轻松地应用到实践工作中。

本书主要内容包括企业中的大数据介绍、数据分析的目的、数据分析的思路、对比与对标、分类、聚类、逻辑关系、预测、结构、各职能部门的具体数据分析、常用的数据分析工具介绍。

本书适合企业的管理者与数据分析人员，以及对大数据感兴趣的读者。另外，本书还可以作为企业内部的数据分析培训教材。

作者简介

赵兴峰

北京大学、新加坡国立大学MBA双硕士，西安交通大学工学学士，北京信宜明悦咨询有限公司创始人。
具有20年跨国公司经营数据分析实战经验，曾就职于宝洁、惠氏、摩立特、LG电子等国际知名企业，从事市场研究、商业智能、战略研究等。
目前专注于大数据时代下政府和企业的数据治理、数据统筹、数据分析和数据挖掘应用推广，致力于推动企业和政府利用数据实现战略转型与升级，构建智慧企业、智慧政府、智慧城市和智慧生态。