Datensynchronisation

Um Daten in unterschiedlichen Applikationen, Datenbanken und Systemen konsistent abzubilden ist eine Synchronisierung notwendig.

Was bedeutet Datensynchronisation?

Es existieren zahlreiche Anwendungsfälle, in denen Bestandsdaten in unterschiedlichen Datenbanken und von diversen Applikationen verwaltet werden, aber jetzt konsistent über das ganze Unternehmen abgebildet werden müssen. Der Bedarf nach einem synchronisierten Datenbestand kann von sowohl permanenter (Synchronisation operativer Systeme) als auch temporärer Natur sein, z.B. während einer Migration. Des Weiteren kann die Synchronisation sowohl monodirektional als auch bidirektional sein.

Datensynchronisation umfasst alle notwendigen Prozesse, um die Daten zwischen Applikationen und Datenbanken einheitlich zu speichern.

Ziele der Datensynchronisation

Um einen effizienten und glaubwürdigen Synchronisationsprozess zu entwickeln, müssen zahlreiche Abhängigkeiten berücksichtig werden.

• Datensynchronisation benötigt oft Prozesse mit geringer Latenz, die in Richtung Real-time tendieren. Um solche Daten überhaupt verarbeiten zu können, ist eine reduzierte Bearbeitungszeit notwendig.
• In heterogenen Systemlandschaften sind oft Legacy-Systeme, vorkonfigurierte Applikationen, diverse Datenbanken(RDBMS), Mainframes, Dateien usw. mit stark unterschiedlichen Datenstrukturen existent, welche zu erhalten und zu synchronisieren sind. Diese Unterschiede benötigen komplexe Mappings zwischen den Quell- und Zielsystemen, aber auch Verdichtungen und Berechnungen.
• Wenn Konflikte zwischen einzelnen Datensätzen auftreten, so müssen diese abgefangen und in Abhängigkeit vom “Record-Eigentümer” aufgelöst werden.

Open Source Datenintegrationslösungen für die Datensynchronisation

Talends Datenintegrations-Lösungen wurden für eine unternehmensweite Datensynchronisation optimiert. Folgende Aspekte sind im Hinblick auf Design, Entwicklung und Verarbeitung der Datensynchronisationsprozesse besonders wichtig:

• Geschäftsorientierte Prozessmodellierung, um Fachanwender mit in den Integrationsprozess einzubeziehen und einen richtigen Ablauf sicherstellen zu können.
• Graphische Entwicklungsumgebung, die die Produktivität steigert, die Wartung vereinfacht und die Wiederverwendung von Daten-Mappings und Transformationen erlaubt.
• Hoch skalierbar und schnelle Verarbeitung mit einem Grid-Ansatz, der die Ausführung nahe dem Datenursprung im Quell- und Zielsystem ermöglicht.
• Umfangreiche Konnektivität, um alle Quell- und Zielsysteme unterstützen zu können.