Seminar Tenzir – Integrationen, Routing und Streaming Fabric

Eine Streaming Fabric verteilt Telemetrie nicht blind, sondern entscheidet anhand von Inhalt, Qualität, Schutzbedarf, Priorität und Betriebszustand. Im Mittelpunkt stehen die Verbindung heterogener Quellen und Ziele durch Datenverträge, Routingmuster, sichere Transporte, Laststeuerung und kontrollierte Wiederanläufe.

Seminarziel

Nach dem Seminar können mehrstufige Integrations- und Routingarchitekturen entworfen, getestet, abgesichert und im Störungsfall kontrolliert betrieben werden.

Inhaltsübersicht

1. Kapitel 1: Integrationslandschaft und Datenverträge
2. Kapitel 2: Routing, Fan-out, Split und Merge
3. Kapitel 3: Sichere Übergabe und Zielanbindung
4. Kapitel 4: Backpressure, Lastverteilung und Skalierung
5. Kapitel 5: Betrieb und Störungsszenarien
6. Praxisübungen
7. Zielgruppe und Voraussetzungen

Kapitel 1: Integrationslandschaft und Datenverträge

1. Schritt 1: Quellen, Zwischenstationen, Zielsysteme, Protokolle, Authentisierung und Verantwortlichkeiten inventarisieren.
2. Schritt 2: Datenklassen, Latenzanforderungen, Liefergarantien und erlaubte Ausfallzeiten je Pfad festlegen.
3. Schritt 3: Direkte Kopplung, Broker, Data Lake und Edge-Puffer anhand der Betriebsanforderungen auswählen.
4. Schritt 4: Vertragsgrenzen für Format, Schema, Qualität und Fehlerbehandlung definieren.

Kapitel 2: Routing, Fan-out, Split und Merge

1. Schritt 1: Inhalts-, schema-, mandanten-, prioritäts- und zielabhängige Routingregeln erstellen.
2. Schritt 2: Fan-out für parallele Ziele sowie Split- und Merge-Muster kontrolliert einsetzen.
3. Schritt 3: Standardpfade, Ausnahmen und unbekannte Datenklassen vollständig abdecken.
4. Schritt 4: Routingentscheidungen mit Kennzeichen, Gründen und Zählerständen nachvollziehbar machen.

Kapitel 3: Sichere Übergabe und Zielanbindung

1. Schritt 1: Datei-, Netzwerk-, HTTP-, Broker- und Speicherübergaben passend zum Zielsystem konfigurieren.
2. Schritt 2: TLS, Zertifikate, Token, Secrets und Netzwerkgrenzen mit minimalen Berechtigungen umsetzen.
3. Schritt 3: Zeitüberschreitungen, Wiederverbindung, Wiederholung und Zielüberlastung kontrollieren.
4. Schritt 4: Teilweise erfolgreiche Ausgaben und nicht eindeutige Zustände ohne stillen Datenverlust behandeln.

Kapitel 4: Backpressure, Lastverteilung und Skalierung

1. Schritt 1: Engpässe anhand von Durchsatz, Warteschlange, Latenz und Ressourcenverbrauch lokalisieren.
2. Schritt 2: Puffer, Parallelität, Batch-Größe und Lastverteilung anhand belastbarer Messungen abstimmen.
3. Schritt 3: Priorisierte Daten bei Überlastung schützen und weniger kritische Pfade gezielt begrenzen.
4. Schritt 4: Skalierungsgrenzen und Kapazitätsreserven für Normal- und Spitzenlast dokumentieren.

Kapitel 5: Betrieb und Störungsszenarien

1. Schritt 1: End-to-End-Kennzahlen, Zielbestätigungen, Fehlerquoten und Datenlücken überwachen.
2. Schritt 2: Ausfall von Quelle, Netzwerk, Node, Broker und Zielsystem systematisch simulieren.
3. Schritt 3: Wiederanlauf, Nachlieferung und Duplikatkontrolle mit klaren Betriebsanweisungen absichern.
4. Schritt 4: Änderungen an Routingregeln mit Testdaten und kontrollierter Aktivierung freigeben.

Praxisübungen

1. Übung 1: Inhaltsabhängigen Fan-out auf mehrere Ziele aufbauen.
2. Übung 2: Sicheren HTTP- oder Broker-Pfad konfigurieren.
3. Übung 3: Lasttest mit Backpressure durchführen.
4. Übung 4: Zielausfall mit Wiederanlauf und Duplikatkontrolle simulieren.

Zielgruppe

Security Data Engineers, Integratoren, Platform Engineers, SOC-Plattformteams sowie Cloud- und Netzwerkarchitekten.

Voraussetzungen

Sichere TQL-Grundlagen, Kenntnisse zu Netzwerk, TLS, APIs und mindestens einem Messaging- oder Streaming-Konzept.