Startseite > Netzwerke & IT-Infrastruktur > Data Gateways: Dolmetscher für Logs und Analysen

Gastbeitrag von LC Systems

Data Gateways: Dolmetscher für Logs und Analysen

19. Juli 2021, 7:00 Uhr | Christoph Dittmann/am

Fortsetzung des Artikels von Teil 2

Übersetzungs- und Transferaufgaben erledigen

Eine Möglichkeit, Übersetzungs- und Transferaufgaben der beschriebenen Art effizienter zu erledigen, ist der Einsatz eines auf solche Dinge spezialisierten Data Gateways. In diesem Fall leitet ein zentraler Dienst die Daten weiter und nimmt die jeweils nötigen formalen und inhaltlichen Änderungen für die Zielsysteme vor. Folgende Funktionen stellt beispielsweise das System des Herstellers Cribl zur Verfügung:

Reduktion des Datenvolumens: Das Data Gateway übernimmt Aggregation, Filterung und Transformation und entfernt gegebenenfalls leere und optionale oder vom Zielsystem nicht benötigte Felder. Die Systeme und das Netz werden entlastet und der Durchsatz bei der Verarbeitung erhöht.
Zentrales und Event-basiertes Routing: Events lassen sich regelgesteuert zum Beispiel anhand inhaltlicher Merkmale an unterschiedliche Zielsysteme verteilen (zum Beispiel an Splunk, Elastic Search, InfluxDB), wobei gegebenenfalls auch eine Duplizierung möglich ist. Diese Funktion würde unter anderem das Problem aus dem Beispielfall lösen, Störungsmeldungen je nach Art an die Security oder den Werksleitstand weiterzugeben. Bereits vorhandene Agenten (Splunk Universal Forwarder, Beats Agent) können parallel weiter in Verwendung sein. Ziel ist es allerdings, zur Reduktion Schritt für Schritt möglichst viele Aufgaben an das Data Gateway als potenziell einzigen Vermittlungsagenten zu übergeben.
Verschlüsselung: Enthalten Log-Dateien personenbezogene Daten, lassen sich diese während des Transfers automatisch verschlüsseln, um Anforderungen etwa der DSGVO oder von Normen wie PCI DSS zu erfüllen. Erst im Verdachtsfall lässt sich ein Zugriff auf die Entschlüsselung gewähren.
Anreicherung: Wie im Beispielfall angedeutet, kann das Gateway anstelle der Zielsysteme fehlende Informationen ergänzen. Dies trägt zusätzlich dazu bei, Fehler und Abweichungen in den Auswertungen durch unterschiedliche Stände von Lookups in den Zielsystemen zu vermeiden.

Data Gateways haben das Potenzial, in digitalisierten Unternehmen automatisierte Analysen um einiges zu erleichtern und die Komplexität der Kommunikationsströme zwischen Anwendungen und Maschinen deutlich zu verringern. Sie werden mit hoher Wahrscheinlichkeit in naher Zukunft ein wichtiges Infrastrukturelement hoch automatisierter, IT-gestützter Business-Umgebungen sein.

Christoph Dittmann ist Head of Data Solution Services bei LC Systems.