Foto zum Beitrag Datenqualität prüfen: Dimensionen, Regeln und Zielwerte
Foto von RDNE Stock project auf Pexels

Datenqualität

Datenqualität prüfen: Dimensionen, Regeln und Zielwerte

Datenqualität prüfen mit sechs Dimensionen, Zielwerten und Toleranzen, einer Regelvorlage, Profiling-Checkliste und einem Beispiel aus dem Kundenstamm.

Dies ist ein redaktionelles Pseudonym der Publikation und keine Behauptung einer unabhängig verifizierten persönlichen Identität. Ursprüngliche redaktionelle Zuordnung: Ressort Datengrundlagen.

Das Wichtigste auf einen Blick

  • Sechs Dimensionen haben sich als Prüfrahmen etabliert, von Vollständigkeit bis Aktualität.
  • Jede Dimension braucht Leitfrage, Kennzahl, Zielwert und Toleranz, festgelegt vor der ersten Messung.
  • Eine Regel nennt Attribut, Bedingung, Schwellenwert und Fehlerzählung.
  • Profiling zeigt den Ist-Zustand, Regeln und Kennzahlen machen Abweichungen steuerbar.
  • Nicht jede Dimension wiegt gleich, die Gewichte gehören vor die erste Messung.
  • Personenbezogene Attribute im Prüfumfang brauchen Rechtsgrundlage, Zweck und Löschfrist.

Sechs Dimensionen als Prüfrahmen

Wer Datenqualität prüfen will, braucht zuerst eine gemeinsame Sprache. In der deutschen Praxis haben sich sechs Dimensionen als Prüfrahmen etabliert, und sie tragen jede Berichterstattung über Datenqualität. Sonst diskutiert jeder Bereich über andere Kennzahlen.

Sechs Dimensionen der Datenqualität

Dimension

Vollständigkeit
Pflichtfelder befüllt?
Konsistenz
Werte widersprüchlich?
Genauigkeit
Wert stimmt mit Realität?
Aktualität
Wert noch gültig?
Eindeutigkeit
Datensatz identifizierbar?
Gültigkeit
Format entspricht Vorgabe?

Leitfrage

Vollständigkeit
Anteil leerer Pflichtfelder
Konsistenz
Anteil Regelverstöße
Genauigkeit
Abweichungsquote
Aktualität
Alter seit Änderung
Eindeutigkeit
Anteil Duplikate
Gültigkeit
Anteil Formatfehler

Typische Kennzahl

Vollständigkeit
Konsistenz
Genauigkeit
Aktualität
Eindeutigkeit
Gültigkeit

Sechs Dimensionen als Prüfrahmen

DimensionLeitfrageTypische KennzahlZielwert und Toleranz (typisch)
VollständigkeitSind alle Pflichtfelder befüllt?Anteil leerer Pflichtfeldermindestens 98 Prozent befüllt, Toleranz bis 95 Prozent
KonsistenzWidersprechen sich Werte?Anteil Regelverstöße je Satzunter 2 Prozent, Toleranz bis 5 Prozent
GenauigkeitStimmt der Wert mit der Realität überein?Abweichungsquote zum Referenzsystemunter 1 Prozent, Toleranz bis 3 Prozent
AktualitätIst der Wert noch gültig?Alter seit letzter Änderungunter 90 Tagen, Toleranz bis 180 Tage
EindeutigkeitIst der Datensatz identifizierbar?Anteil Duplikateunter 0,5 Prozent, Toleranz bis 2 Prozent
GültigkeitEntspricht der Wert dem Format?Anteil Formatfehlerunter 1 Prozent, Toleranz bis 3 Prozent

Die Zielwerte sind Erfahrungswerte aus der Praxis, keine Vorgaben einer Norm. Welcher Wert tragfähig ist, hängt von der Datenentscheidung ab: Für ein Adressregister ist ein anderes Niveau vertretbar als für eine Meldung an die Aufsicht. Legen Sie Ziel und Toleranz vor der ersten Messung fest.

Die Dimensionen überschneiden sich bewusst. Ein fehlendes Geburtsdatum ist ein Vollständigkeitsproblem und kann zugleich die Genauigkeit einer Altersauswertung verzerren. Deshalb gehört zu jeder Dimension eine klare Definition, welcher Fehler wie gezählt wird.

Regeln formulieren: Attribut, Bedingung, Schwellenwert, Fehlerzählung

Eine Regel besteht aus vier Angaben, die jeder Prüfer gleich versteht. Ohne sie zählt jeder anders, und die Kennzahl lässt sich nicht vergleichen. Die Tabelle zeigt eine vollständig ausformulierte Regel am Beispiel der Umsatzsteuer-Identifikationsnummer.

AngabeInhalt im Beispiel
AttributUmsatzsteuer-Identifikationsnummer im Kundenstamm
BedingungDas Feld ist befüllt und entspricht dem Muster zwei Buchstaben plus neun Ziffern
SchwellenwertHöchstens 2 Prozent der geprüften Sätze dürfen die Bedingung verletzen
FehlerzählungJeder Satz mit leerem oder falsch formatiertem Feld zählt als ein Fehler, gezählt je Attribut und Lauf

Ziel und Toleranz geben dem Ergebnis eines Laufs eine Lesart. Liegt der Fehleranteil innerhalb des Zielwerts, gilt die Regel als erfüllt. Liegt er zwischen Zielwert und Toleranz, beobachten Sie die Entwicklung. Liegt er darüber, leiten Sie eine Maßnahme ab und benennen einen Verantwortlichen, der sie bis zum nächsten Lauf umsetzt.

Schreiben Sie auf, was als Fehler gilt, bevor der erste Lauf startet. Eine Regel, die nur im Kopf eines Prüfers existiert, lässt sich weder wiederholen noch begründen. Wie sich Prüfungen und Regelstände festhalten lassen, beschreibt der Beitrag zur Versionierung von Prüfungen.

Dimensionen gewichten

Nicht jede Dimension wiegt gleich viel. Für eine Lieferantenstammdatenprüfung zählt Vollständigkeit mehr als Aktualität, für ein Adressregister umgekehrt. Legen Sie die Gewichte vor der ersten Messung fest, sonst wird die Bewertung beliebig.

Beginnen Sie mit drei bis vier Dimensionen, die für Ihre Entscheidungen kritisch sind. Weitere Dimensionen ergänzen Sie, sobald die ersten Regeln stabil laufen. Die Leitfrage dazu lautet: Welche Datenentscheidung hängt an welchem Datensatz? Wer sie beantwortet, kann den Prüfumfang begrenzen und muss nicht den gesamten Datenhaushalt auf einmal messen.

Wie die Methode in einer bestimmten Branche aussieht, zeigt der Beitrag zum Kennzahlen in der Automobilindustrie.

Profiling und Prüfprozess in sieben Schritten

Profiling zeigt den Ist-Zustand, Regeln und Kennzahlen machen Abweichungen steuerbar. Das Verfahren lässt sich auf einzelne Tabellen oder auf ganze Domänen anwenden. Es folgt dem Grundgedanken: erst verstehen, dann messen, dann handeln.

Prüfprozess in sieben Schritten

  1. Prüfumfang festlegen
  2. Datenprofiling durchführen
  3. Datenqualitätsregeln formulieren
  4. Regeln technisch umsetzen
  5. Kennzahlen berechnen und bewerten
  6. Ursachen klären
  7. Maßnahmen ableiten und nachmessen

Vor dem Start steht eine Checkliste, die verhindert, dass die Prüfung im ersten Durchlauf entgleist.

  • Prüfumfang und kritische Attribute schriftlich fixiert
  • Rechtsgrundlage für personenbezogene Attribute geprüft
  • Rollen und Berechtigungen für Profiling-Zugriffe geklärt
  • Dimensionen definiert und gewichtet
  • Regeln versioniert und im Repository abgelegt
  • Zielwerte je Kennzahl vereinbart
  • Berichtsweg an Fachbereich und Revision festgelegt

Sobald Namen, Adressen, Geburtsdaten oder Beschäftigtendaten im Prüfumfang liegen, greift die DSGVO. Jeder Profiling-Lauf braucht dann eine Rechtsgrundlage, einen Zweck und eine Löschfrist, und Testdaten sollten anonymisiert oder pseudonymisiert sein. Die Aufsichtsbehörden stellen Muster bereit, etwa die Hinweise und Muster zur DS-GVO des Hessischen Beauftragten für Datenschutz und Informationsfreiheit.

Messen, bewerten und nachsteuern

Eine Prüfung ist ein Kreislauf, kein Einzelereignis: Merkmale festlegen, messen, bewerten, Maßnahmen ableiten und die Wirkung erneut messen. Wie sich Definition und Bezugszeitraum einer Kennzahl sauber festlegen lassen, beschreiben die vier Prüfschritte für Kennzahlen.

Der Abstimmungsaufwand wächst, wenn Stammdaten in ERP, CRM und Data Warehouse unterschiedlich gepflegt werden. Dann liefert dieselbe Regel je System ein anderes Ergebnis. Vergleichen Sie deshalb immer gegen dasselbe Referenzsystem und halten Sie fest, welches System als führend gilt.

Aufsichtsbehörden und Wirtschaftsprüfer verlangen nachvollziehbare Datenbestände, etwa bei der BaFin oder im Rahmen der GoBD. Wie Unterlagen elektronisch aufbewahrt werden, erklärt der Leitfaden zur Datenarchivierung. Für Ihre Prüfung heißt das: Regeln versionieren, Messläufe mit Zeitstempel speichern und festhalten, wer wann welche Korrektur ausgelöst hat.

Ein Prüfbericht ohne Versionsstand ist im Streitfall wertlos. Wiederkehrende Fehler lassen sich nur belegen, wenn jeder Fall mit Datum, Quelle und Korrektur festgehalten ist, wie der Beitrag zu wiederkehrenden Datenfehlern zeigt.

Beispiel: Kundenstammdaten im Maschinenbau

Ein Maschinenbauer in Baden-Württemberg prüft seine Kundenstammdaten. Das Profiling zeigt 12 Prozent fehlende Umsatzsteuer-Identifikationsnummern und 4 Prozent Dubletten. Die Regeln werden in der Stammdatenpflege verankert, die Dubletten zusammengeführt.

Befund aus dem ProfilingAnteilMaßnahme
Fehlende Umsatzsteuer-Identifikationsnummer12 ProzentRegel in der Stammdatenpflege verankern
Dubletten im Kundenstamm4 ProzentDatensätze zusammenführen

Beide Befunde lassen sich einer Dimension zuordnen: Die fehlenden Nummern sind ein Vollständigkeitsproblem, die Dubletten ein Problem der Eindeutigkeit. Diese Zuordnung entscheidet, mit welchem Zielwert aus der Tabelle oben der Befund verglichen wird und welche Gewichtung gilt.

Nach zwei Quartalen sinkt die Fehlerquote messbar, weil die Eingabeprüfung greift. Wie inkonsistente Zuordnungen Kennzahlen verfälschen, behandelt der Beitrag zu Stammdatenfehlern.

Typische Fehler beim Prüfen der Datenqualität

  • Zu großer Umfang.Wer alle Tabellen gleichzeitig prüft, verliert die Aussagekraft und das Team. Schneiden Sie die erste Runde auf wenige kritische Attribute. Wie unterschiedlich Unternehmen dabei starten, zeigt der Beitrag zur Datenreife in Bayern und Sachsen.
  • Fehlende Definition.Ohne klare Regel zählt jeder Prüfer anders.
  • Einmalmessung.Ein einzelner Kennzahlenwert sagt wenig, erst der Verlauf über Quartale zeigt, ob Maßnahmen wirken.
  • Fehlende Zuständigkeit.Kennzahlen ohne Verantwortlichen bleiben Zahlen. Verbinden Sie jede Dimension mit einer Rolle und einem Zielwert.

Rollen und Werkzeuge

Datenqualität prüfen ist keine Aufgabe für eine Abteilung allein. In deutschen Unternehmen haben sich drei Rollen bewährt: der Datenverantwortliche im Fachbereich, der Data Steward als Vermittler und die IT als Betreiber der Regeln.

Der Data Steward definiert Regeln und Kennzahlen, der Fachbereich kennt die Bedeutung der Daten, die IT setzt die Prüfungen in der Pipeline um. Der Datenschutzbeauftragte prüft die Rechtsgrundlage, die Revision kontrolliert die Dokumentation.

Bei den Werkzeugen gibt es kein einheitliches Bild. Data-Profiling-Funktionen stecken heute in Datenkatalogen, ETL-Plattformen und spezialisierten Qualitätslösungen. Entscheidend ist nicht die Marke, sondern ob Regeln versionierbar, Läufe wiederholbar und Ergebnisse exportierbar sind.

Auch die amtliche Statistik arbeitet mit einem festen Qualitätsbegriff: Den Qualitätsberichten des Statistischen Bundesamts liegt der Qualitätsbegriff des Europäischen Statistischen Systems zugrunde.

Häufige Fragen

Wie viele Dimensionen sollte ich messen?
Beginnen Sie mit drei bis vier Dimensionen, die für Ihre Entscheidungen kritisch sind. Weitere Dimensionen ergänzen Sie, sobald die ersten Regeln stabil laufen.
Wer entscheidet über Zielwerte für Kennzahlen?
Der Fachbereich gemeinsam mit dem Data Steward. Zielwerte ohne fachliche Grundlage führen zu Maßnahmen, die niemand mitträgt.
Darf ich für Profiling echte Personendaten verwenden?
Nur mit Rechtsgrundlage, definiertem Zweck und Löschfrist. Besser sind anonymisierte oder pseudonymisierte Testdaten, die denselben Prüfzweck erfüllen.
Reicht eine Excel-Datei für die Prüfung?
Für einen ersten Überblick ja, für den Dauerbetrieb nein. Wiederholbare Läufe, Versionierung und Berechtigungen lassen sich in einer Pipeline sauberer abbilden.

Mehr aus Datenqualität