📊 数据质控体系 · 项目看板

公司数据资产全量 61 张表的数据质量评估与管理体系。双系统架构:系统一(表设计质量,现在可评)→ 系统二(数据值质量,连库后启用)。
📁 C:\Users\admin\Desktop\合作重要项目\公司数据资产\数据质控\ 📅 最后更新:2026-06-23 🏷 v2.0 双系统架构
61
评估表总数
47.3
系统一平均得分(D级)
3
P0 严重问题 · 无主键
55
缺字段明细 · 占 90%

🏗 双系统架构总览

📐 系统一

表设计质量评估

评估 Schema/DDL
✅ 现在就能做

📊 系统二

数据值质量评估

评估实际 Row 数据
⏳ 连库后启用

🔄 整改闭环

修设计 → 洗数据 → 设规则防复发

📄 方案与报告
核心方案

数据质量标准方案 v2.0

双系统质量体系的顶层设计文档,含维度定义、权重逻辑、实施路径、考核标准。
  • 系统一:6 维度(主键/约束/类型/命名/关联/冗余)
  • 系统二:6 维度(完整性/准确性/唯一性/及时性/一致性/有效性)
  • 三层责任制(生产者/治理者/消费者)+ 核心 KPI
  • 三阶段实施路径(当前→第8周→第9周起)
  • 六大关键原则(先评设计再查值 / 先量后治 / 分级管理…)
系统一 · 分析报告

表设计质量分析报告

基于 61 张表、307 字段的真实元数据逐表评估,含 127 条问题和改进路径。
  • 🔴 3 张表无主键(bp_articleproject / md_drugbidsourcehc_zb / dt_drugbidsourcehc)
  • 🟠 55 张表缺字段明细(90% 数据资产处于盲检状态)
  • 🟡 24 个布尔字段用错类型(smallint/integer 代替 boolean)
  • 🟡 6 个日期字段存为 varchar(无法做范围查询)
  • 🟡 96% 字段可空(仅 4% 有 NOT NULL 约束)
系统二 · 使用指南

数据值质量评估体系说明

连库后的值质量评估框架,含 6 维度 SQL 模板、使用流程、系统一二对比。
  • 📋 完整性 — 空值率检查(COUNT WHERE IS NULL)
  • 准确性 — 格式 / 值域 / 范围校验
  • 🔑 唯一性 — 主键去重检查
  • 及时性 — MAX(update_time) vs SLA 阈值
  • 🔗 一致性 — 跨表 Join + 孤儿记录检查
  • 🔍 有效性 — 枚举 / 状态合法性校验
🛠 Excel 工具集(点击文件名直接打开)

📁 项目文件速览

文件类型操作
📄 数据质量标准方案.html核心方案文档打开 →
📐 系统一_表设计质量分析报告.html系统一分析报告打开 →
📊 系统二_数据值质量评估体系说明.html系统二使用指南打开 →
📐 系统一_表设计质量评估.xlsx系统一 Excel 工具集打开 Excel →
📊 系统二_数据值质量评估.xlsx系统二 Excel 模板打开 Excel →