Daten-Governance1 / 5
Ein Unternehmen möchte die Datenqualität in seiner ETL-Pipeline in Echtzeit überwachen. Welcher Ansatz ist für eine automatisierte Überwachung der Datenqualität am EFFEKTIVSTEN?
RichtigFalsch
Alex
Automatisierte Validierungsregeln, die in die ETL-Pipeline eingebettet sind, können Qualitätsprobleme schon während der Verarbeitung erkennen, bevor fehlerhafte Daten in Berichten landen. Dazu gehören Null-Prüfungen, Typvalidierung, Bereichsprüfungen, Eindeutigkeitsbedingungen, statistische Anomalieerkennung (Veränderungen der Zeilenanzahl, Verteilungsdrift) und die Durchsetzung von Geschäftsregeln. Tools wie Great Expectations, dbt tests, AWS Glue Data Quality und Monte Carlo automatisieren diese Prüfungen und lösen bei Schwellenwertüberschreitungen Alarme aus (CompTIA Data+, Domäne Data Governance; DAMA DMBOK Kap. 13). Warum nicht die anderen? Vollständige Backups schützen vor Datenverlust, nicht vor Qualitätsproblemen, und sie sichern auch fehlerhafte Daten mit. Nur dann zu kontrollieren, wenn Benutzer Probleme melden, ist reaktiv, daher ist der Schaden oft schon entstanden. Monatliche manuelle Stichproben können Probleme zwischen den Kontrollen übersehen und skalieren nicht. Prüfungstipp: proaktiv = automatisierte Regeln + Echtzeit-Alarme; reaktiv = Benutzerbeschwerden + seltene manuelle Kontrollen.
Quelledocs.aws.amazon.com
Antworten auf Rückfragen bekommst du in der App. Erstelle ein kostenloses Konto — ohne Kreditkarte.
Frage 1 von 5
Kostenloses Konto erstellen