返回 Skill 列表
extension
分类: 数据与分析无需 API Key

data-quality-frameworks

使用Great Expectations、dbt测试和数据契约实现数据质量验证。在构建数据质量管道、实现验证规则或建立数据契约时使用。

person作者: u_d4b8e350hubenterprise

数据质量框架

  • 唯一标识:hub-data-quality-frameworks
  • 显示名称:数据质量框架
  • 能力摘要:使用 Great Expectations、dbt 测试与数据契约为关键数据集定义完整性、唯一性、及时性、范围和模式约束,并把验证、告警、归属和修复接入生产管道。

案例素材

  1. 财务日报偶尔少了一天交易。该 skill 会为日期连续性、记录数、金额范围和上游到达时间建立测试,在失败时阻止错误报表发布并通知数据负责人。
  2. 事件表字段即将重命名。该 skill 会先发布数据契约和兼容期,要求生产者、消费者在 CI 中验证 schema,避免改名后悄然使多个仪表盘失效。
  3. 管道质量检查可能误阻断关键业务。该 skill 会区分硬性阻断、告警和隔离数据集,为每项检查指定回退与人工处置路径,同时避免在验证日志中泄漏敏感字段。