Schwellenwerte für die Datenqualität (Vorschau)

Ein Datenqualitätsschwellenwert ist ein vordefinierter Grenzwert, der bestimmt, ob Daten ein akzeptables Qualitätsniveau erreichen. In einfachen Worten beantwortet es die Frage: Wie gut ist gut genug?

Wenn Sie beispielsweise eine Vollständigkeitsregel für eine Spalte ausführen:

  • Datensätze insgesamt: 1.000
  • Datensätze mit Werten: 920
  • Vollständigkeitsbewertung: 92 %

Wenn Ihr Schwellenwert 90 % beträgt, erfüllen die Daten die Erwartungen.

Wenn Ihr Schwellenwert 95 % beträgt, erfüllen die Daten nicht die Erwartungen.

Der Schwellenwert ist der Cutoff-Punkt, der definiert, ob die Daten die Erwartungen für bestimmte Anwendungsfälle erfüllen.

Warum Schwellenwerte wichtig sind

Unterschiedliche Datentypen erfordern unterschiedliche Qualitätserwartungen. Zum Beispiel:

  • Email Adressspalte: Erfordert möglicherweise eine Vollständigkeit von 99 bis 100 %.
  • Beschreibungsspalte: Vielleicht sind 80 bis 90 % akzeptabel.
  • Finanztransaktionen: Möglicherweise ist eine Genauigkeit von 100 % erforderlich.

Die Verwendung eines festen Schwellenwerts, z. B. 80 % für alles, kann irreführend sein, insbesondere für kritische oder regulierte Daten.

Typen von Schwellenwerten

  • Schwellenwert auf Regelebene: Wird für jede Regel festgelegt (z. B. muss die Vollständigkeit ≥ 95 %).
  • Schwellenwert auf Datenressourcenebene: Unterschiedliche Erwartungen für verschiedene Spalten.
  • Schwellenwert auf Datenproduktebene: Gesamtbewertungsanforderung.

Konfigurierbare Schwellenwerte für die Datenqualität

Sie können Data Quality-Schwellenwerte konfigurieren, um mindestens akzeptable Qualitätsbewertungen auf Regel- und Datenressourcenebene festzulegen. Definieren Sie den Schwellenwert, um die Qualitätsauswertung an der Geschäftlichen Wichtigkeit auszurichten.

Konfigurieren oder Bearbeiten des Standardschwellenwerts für eine Datenressource

  1. Wählen Sie in Microsoft Purview Unified Catalog die Option Integritätsverwaltung und dann Datenqualität aus.

  2. Wählen Sie eine Governancedomäne, ein Datenprodukt und dann eine Datenressource aus.

  3. Wählen Sie auf der Seite Übersicht die Option Bewertungsschwellenwert festlegen aus.

  4. Ändern Sie den Standardschwellenwert.

  5. Klicken Sie auf Speichern.

    Schwellenwert auf Ressourcenebene

Konfigurieren des Schwellenwerts für eine Datenqualitätsregel

  1. Wählen Sie Unified Catalog die Option Integritätsverwaltung und dann Datenqualität aus.
  2. Wählen Sie eine Governancedomäne, ein Datenprodukt und dann eine Datenressource aus.
  3. Wählen Sie auf der Seite Regeln die Option Neue Regel aus.
  4. Wählen Sie die vordefinierte Regel oder die benutzerdefinierte Regel aus, und wählen Sie Weiter aus.
  5. Wählen Sie Schwellenwert score aus, und ändern Sie den Standardwert.
  6. Klicken Sie auf Speichern.

Schwellenwert für datenqualitätsregelebene

Bearbeiten eines Schwellenwerts für eine Datenqualitätsregel

  1. Wählen Sie auf der Seite Regeln einer Datenressource das Bearbeitungssymbol für eine Regel aus.
  2. Wählen Sie in der Übersicht Score threshold (Schwellenwert für Bewertung) aus.
  3. Bearbeiten Sie den Schwellenwert.
  4. Klicken Sie auf Speichern.

Konfigurieren von Benachrichtigungen

Legen Sie eine Warnung fest, um Sie zu benachrichtigen, wenn die Datenqualitätsbewertung einer Datenressource oder -regel unter einen definierten Schwellenwert fällt. Wenn Sie einen Regelschwellenwert einrichten oder bearbeiten, führen Sie die folgenden Schritte aus:

  • Legen Sie die Umschaltfläche Warnung auf Ein fest.
  • Fügen Sie unter Empfänger einen oder mehrere Benutzer hinzu.
  • Klicken Sie auf Speichern.

Warnung für Schwellenwert festlegen

Hinweis

Wenn Sie keinen Schwellenwert konfigurieren, werden die Standardschwellenwerte und -farben verwendet. Die Standardwerte für die Schwellenwertbewertung sind:

  • Niedrig (rot): 0-40
  • Mittel (orange): 40-80
  • Hoch (grün): 80-100

Die Vorteile, die ein organization aus dem konfigurierbaren Feature für Den Datenqualitätsschwellenwert erhält, sind:

  • Ermöglicht es dem Unternehmen, seine organization an der Qualitätsgovernance auszurichten.
  • Verbessert das Vertrauen in die von Microsoft Purview Data Quality erstellten Datenqualitätsbewertungen, sodass Teams im gesamten Unternehmen sicher bestimmen können, ob die Daten für ihre spezifischen Anwendungsfälle geeignet sind.
  • Unterstützt Organisationen dabei, über generische Qualitätsprüfungen hinaus in Richtung geschäftsorientiertes Datenqualitätsmanagement zu wechseln.
  • Unterstützt regulatorische und entscheidungskritische Anwendungsfälle.
  • Verringert die Benutzer- oder Organisationsverwechslung, die durch eine einheitliche Schwellenwertauswertung verursacht wird.

Durch das Festlegen von Schwellenwerten auf Regelebene wird ein klarer Standard dafür erstellt, wie "gut" aussieht. Warnungen stellen sicher, dass Sie in dem Moment reagieren, in dem Daten unter diesem Standard liegen. Dies hat mehrere praktische Vorteile:

  • Frühzeitige Erkennung von Problemen: Erfassen Sie Dinge wie fehlende, inkonsistente oder falsche Daten, bevor sie sich auf Berichte, Pipelines oder Modelle auswirken.
  • Geringeres Geschäftsrisiko: Verhindert, dass fehlerhafte Daten falsche Entscheidungen, Finanzfehler oder Complianceprobleme verursachen.
  • Schnellere Behebung: Warnungen ermöglichen Es Teams, sofort zu reagieren, anstatt Probleme Tage oder Wochen später zu erkennen.
  • Verantwortlichkeit und Governance: Klare Schwellenwerte definieren Besitz und Erwartungen an die Datenqualität.
  • Betriebliche Effizienz: Beseitigt die manuelle Überwachung und verringert die Abhängigkeit von Ad-hoc-Überprüfungen.
  • Vertrauen in Daten: Die konsequente Durchsetzung von Qualitätsstandards erhöht das Vertrauen in Analysen und KI-Ausgaben.

Kurz gesagt, Schwellenwerte definieren eine akzeptable Qualität, und Warnungen machen diesen Standard umsetzbar.

Nächste Schritte