Qualitis數(shù)據(jù)質(zhì)量管理平臺

Qualitis 是一個支持多種異構(gòu)數(shù)據(jù)源的質(zhì)量校驗、通知、管理服務(wù)的數(shù)據(jù)質(zhì)量管理平臺，用于解決業(yè)務(wù)系統(tǒng)運行、數(shù)據(jù)中心建設(shè)及數(shù)據(jù)治理過程中的各種數(shù)據(jù)質(zhì)量問題。

Qualitis 基于 Spring Boot，依賴于Linkis進行數(shù)據(jù)計算，提供數(shù)據(jù)質(zhì)量模型構(gòu)建，數(shù)據(jù)質(zhì)量模型執(zhí)行，數(shù)據(jù)質(zhì)量任務(wù)管理，異常數(shù)據(jù)發(fā)現(xiàn)保存以及數(shù)據(jù)質(zhì)量報表生成等功能。并提供了金融級數(shù)據(jù)質(zhì)量模型資源隔離，資源管控，權(quán)限隔離等企業(yè)特性，具備高并發(fā)，高性能，高可用的大數(shù)據(jù)質(zhì)量管理能力。

核心特點

• 數(shù)據(jù)質(zhì)量模型定義
  支持以下數(shù)據(jù)模型定義：
  1.單表校驗數(shù)據(jù)模型。
  2.跨表校驗數(shù)據(jù)模型。
  3.自定義校驗數(shù)據(jù)模型。

同時，系統(tǒng)預(yù)置了多個數(shù)據(jù)質(zhì)量校驗?zāi)０?，包括空值校驗，枚舉校驗等常用校驗，并且支持自定義規(guī)則生成數(shù)據(jù)質(zhì)量模版，單表數(shù)據(jù)質(zhì)量模板以及跨表數(shù)據(jù)質(zhì)量模板的定義。

• 數(shù)據(jù)質(zhì)量模型調(diào)度
  支持數(shù)據(jù)質(zhì)量模型調(diào)度。

• 數(shù)據(jù)質(zhì)量報表
  支持生成數(shù)據(jù)質(zhì)量報表

• 日志管理 日志聚合管理，方便排查數(shù)據(jù)質(zhì)量任務(wù)

• 異常數(shù)據(jù)管理 支持異常數(shù)據(jù)提取和存儲，快速定位問題

• 支持工作流 支持在工作流當中進行數(shù)據(jù)質(zhì)量校驗
  工作流必裝DataSphereStudio.

• 管理員控制臺
  提供管理員控制臺界面，支持人員管理，權(quán)限管理，元數(shù)據(jù)管理，系統(tǒng)參數(shù)配置等管理功能。

架構(gòu)