ISO38505数据治理的内容及实施步骤

从技术实施角度看，数据治理包含“理”“采”“存”“管”“用”这五个步骤，即业务和数据资源梳理、 数据采集清洗、数据库设计和存储、数据管理、数据使用。

数据资源梳理:数据治理的第一个步骤是从业务的视角厘清组织的数据资源环境和数据资源清单，包含组织 机构、业务事项、信息系统，以及以数据库、网页、文件和API接口形式存在的数据项资源，本步骤的输出物为 分门别类的数据资速请单。

数据采集清洗:通过可视化的ETL工具（例如阿里的DataX,Pentaho Data Integration）将数据从来源 端经过抽取(extract)、转换(transform)、加载(Iload)至目的端的过程，目的是将散落和零乱的数据集中存储起来。

基础库主题库建设:一般情况下，可以将数据分为基础数据、业务主题数据和分析数据。基础数据一般指的 是核心实体数据，或称主数据，例如智慧城市中的人口、法人、地理信息、信用、电子证照等数据。主题数据— 般指的是某个业务主题数据，例如市场监督管理局的食品监管、质量监督检查、企业综合监管等数据。而分析数 据指的是基于业务主题数据综合分析而得的分析结果数据，例如市场监督管理局的企业综合评价、产业区域分 布、高危企业分布等。那么基础库和主题库的建设就是在对业务理解的基础上，基于易存储、易管理、易使用的 原则抽像数据存储结构，说白了，就是基于一定的原则设计数据库表结构，然后再根据数据资源清单设计数据采 集清洗流程，将整洁干净的数据存储到数据库或数据仓库中。

元数据管理:元数据管理是对基础库和主题库中的数据项属性的管理，同时，将数据项的业务含义与数据项 进行了关联，便于业务人员也能够理解数据库中的数据字段含义，并且，元数据是后面提到的自动化数据共享、 数据交换和商业智能《Bl）的基础。需要注意的是，元数据管理一般是对基础库和主题库中(即核心数据资产) 的教据项属性的管理，而数据资源清单是对各类数据来源的数据项的管理。

血缘追踪:数据被业务场景使用时，发现数据错误，数据治理团队需要快速定位数据来源，修复数据错误。 那么数据治理团队需要知道业务团队的数据来自于哪个核心库，核心库的数据又来自于哪个数据源头。我们的实 践是在元数据和数据资源清单之间建立关联关系，且业务团队使用的数据项由元数据组合配置而来，这样，就建 立了数据使用场景与数据源头之间的血缘关系。数据资源目录:数据资源目录一般应用于数据共享的场景，例 如政府部门之间的数据共享，数据资源目录是基于业务场景和行业规范而创建，同时依托于元数据和基础库主题 而实现自动化的数据申请和使用。

质量管理:数据价值的成功发掘必须依托于高质量的数据，唯有准确、完整、一致的数据才有使用价值。因 此，需要从多维度来分析数据的质量，例如:偏移量、非空检查、值域检查、规范性检查、重复性检查、关联关 系检查、离群值检查、波动检查等等。需要注意的是，优秀的数据质量模型的设计必须依赖于对业务的深刻理 解，在技术上也推荐使用大数据相关技术来保障检测性能和降低对业务系统的性能影响，例女Hadoop, MapReduce，HBase等。