Data Lineage, auf Deutsch oft als „Datenherkunft“ oder „Datenherkunftsnachweis“ bezeichnet, beschreibt die lückenlose Rückverfolgbarkeit von Daten innerhalb einer IT-Landschaft. In Integrationsplattformen bedeutet das: Woher stammen die Daten? Wie wurden sie verändert? Wohin wurden sie weitergeleitet?
Gerade in komplexen, vernetzten Systemen – etwa mit ERP-Systemen, DMS, Fachverfahren, IoT-Komponenten oder Cloud-Diensten – ist Data Lineage essenziell, um Vertrauen, Nachvollziehbarkeit und Compliance zu gewährleisten.
Warum ist Data Lineage wichtig?
- Transparenz: Jede Datenbewegung wird sichtbar – auch systemübergreifend
- Fehleranalyse: Rückverfolgung bei fehlerhaften Prozessen oder unerwarteten Werten
- Compliance: Nachweis gegenüber Aufsichtsbehörden (z. B. DSGVO, KRITIS, XRechnung)
- Optimierung: Erkennen von redundanten Transformationen oder ineffizienten Flows
- Verantwortung: Klare Zuständigkeiten für Datenqualität, Zugriff und Sicherheit
Was wird bei der Data Lineage dokumentiert?
- Ursprung der Daten (z. B. REST-API, MQTT-Sensor, FTP-Import, Legacy-System)
- Transformationen (z. B.Mapping, Datenanreicherung, Formatkonvertierung von JSON nach XML oder CSV)
- Zielsysteme (z. B. ERP, DMS, Fachverfahren, E-Akte, Cloud-Speicher)
- Verwendete Protokolle (z. B. SOAP, REST, OAuth2, TLS, Token-Handling)
- Zeitpunkte jeder Änderung oder Weiterleitung
- Technische Flows und Nutzer:innen, die die Daten beeinflusst haben
Wie wird Data Lineage technisch umgesetzt?
1. Versionierte Integrationsflows
- Jeder Schritt wird mit Zeitstempel, Systembezug und Benutzerkennung gespeichert
- Änderungen in Mappings, Konnektoren oder Konfigurationen werden historisiert
2. Audit-Trail und strukturierte Logs
- Speicherung aller Transformationen und Flows in maschinenlesbarer Form (JSON, XML)
- Verknüpfung mit Message-ID oder Transaktions-Hash für durchgehende Rückverfolgung
3. Visualisierung in Dashboards
- Darstellung von Herkunft, Flussrichtung und Verzweigungen einzelner Daten
- Darstellung als interaktive Flow-Grafik oder Tabellenansicht
- Drill-down bis auf Nachrichtenebene möglich
4. Self-Service für Fachbereiche
- Lesender Zugriff auf die Herkunft und Verarbeitung ihrer Daten
- Hilfreich zur Klärung von Fehlern, Dubletten oder nicht angekommenen Informationen
Welche Best Practices gibt es?
- Verknüpfung von Data Lineage mit Monitoring, Logging und Rollenmanagement
- Sicherstellung der DSGVO-Konformität durch gezielte Datenmaskierung
- Integration in CI/CD-Prozesse zur lückenlosen Änderungshistorie
- Nutzung strukturierter Datenformate (z. B. XRechnung, HL7, XÖV) zur standardisierten Nachvollziehbarkeit
- Schulung von IT und Fachbereich zum Verständnis von Datenflüssen
Fazit
Data Lineage ist das Navigationssystem moderner Datenintegration. Es zeigt, woher Daten kommen, wie sie verarbeitet wurden und wohin sie gehen – nachvollziehbar, sicher und transparent. Das schafft Vertrauen, Sicherheit und klare Verantwortlichkeit.
Sie möchten wissen, wie Sie vollständige Data Lineage für Ihre Integrationen aufbauen?
Lassen Sie uns gemeinsam Ihre Datenflüsse analysieren und ein Lineage-Konzept entwickeln, das sowohl technische Tiefe als auch fachliche Klarheit bietet.