Seminar Lobster_data – Intensivseminar Integration Engineering

Das Intensivseminar bündelt die entwicklungsorientierten Einzelseminare in einem fünftägigen Gesamtprogramm. Datenformate, Mapping, vollständige Integrationsprofile, APIs, Datenbanken, SAP- und ERP-Anbindungen, Event-Integration sowie KI-Readiness werden an einer modularen Integrationsarchitektur zusammengeführt. Die Stoffdichte erfordert sichere technische Grundlagen und konsequente praktische Arbeit.

Inhaltsverzeichnis

1. Lernziele
2. Seminarinhalte
3. Praxisübungen
4. Einordnung in den Lernpfad

Lernziele

• Datenformate und komplexe Mappings methodisch entwickeln und testen.
• Produktionsreife Integrationsprofile mit Fehlerbehandlung, Routing und Deployment bauen.
• APIs, Datenbanken, ERP- und Eventquellen in einer konsistenten Architektur verbinden.
• Modularität, Performance, Beobachtbarkeit, Sicherheit und KI-Readiness gemeinsam berücksichtigen.

Seminarinhalte

Tag 1: Plattformgrundlagen, Datenformate und Parser

1. Schritt 1: Lobster_data-Objektarten, Arbeitsbereiche und den Lebenszyklus einer Integration in einer Referenzarchitektur einordnen.
2. Schritt 2: CSV-, Festlängen-, XML-, JSON- und hierarchische Formate nach Syntax, Struktur, Datentyp und Kardinalität analysieren.
3. Schritt 3: Parser- und Schemaobjekte mit Pflichtfeldern, Wiederholungen, Zeichensätzen und Validierungsregeln aufbauen.
4. Schritt 4: Versionen und Varianten so strukturieren, dass gemeinsame Bestandteile wiederverwendbar bleiben.
5. Schritt 5: Positive und negative Parsertests mit Grenzfällen und fehlerhaften Zeichenfolgen ausführen.
6. Schritt 6: Eine versionierte Formatbibliothek als Grundlage des Seminarprojekts erstellen.

Tag 2: Mapping von Grundlagen bis Advanced

1. Schritt 1: Quell-Ziel-Feldmatrix erstellen und direkte, abgeleitete sowie bedingte Zuordnungen definieren.
2. Schritt 2: Datentypen, Standardwerte, Berechnungen, Wiederholungen und einfache Hierarchien sicher transformieren.
3. Schritt 3: Komplexe Kontexte, Gruppierungen, Aggregationen und mehrstufige Zielstrukturen umsetzen.
4. Schritt 4: Referenzdaten, Codelisten und wiederverwendbare Teilmappings modular einbinden.
5. Schritt 5: Fehlerpfade, Regressionstests und Diagnoseverfahren für Mappingänderungen aufbauen.
6. Schritt 6: Performance mit realistischen Datenmengen messen und ein komplexes Mapping gezielt optimieren.

Tag 3: End-to-End-Profile, APIs und Datenbanken

1. Schritt 1: Eingang, Parser, Validierung, Mapping, Routing und Ausgang zu einem vollständigen Integrationsprofil verbinden.
2. Schritt 2: REST-, SOAP- und Webhook-Schnittstellen mit Authentifizierung, Headern, Statuscodes und Idempotenz integrieren.
3. Schritt 3: Datenbankzugriffe für Voll-, Delta- und parametrisierte Läufe mit Batching und Transaktionen konfigurieren.
4. Schritt 4: Timeouts, Wiederholung, Backoff, Quarantäne und manuelle Klärung zu einer abgestuften Fehlerstrategie verbinden.
5. Schritt 5: Korrelation und Protokollierung über synchrone und asynchrone Teilschritte hinweg aufbauen.
6. Schritt 6: Ein kombiniertes API- und Datenbankprofil mit Negativtests und kontrolliertem Wiederanlauf fertigstellen.

Tag 4: SAP, ERP, IoT und Event-Integration

1. Schritt 1: IDoc-, RFC-, Datei-, Datenbank- und API-Muster für SAP- und ERP-Prozesse vergleichen und auswählen.
2. Schritt 2: ERP-Belegstrukturen, Status und kundenspezifische Erweiterungen in ein kanonisches Modell überführen.
3. Schritt 3: MQTT-, Kafka- und OPC-UA-Quellen nach Topics, Partitionen, QoS, Knoten und Qualitätsinformationen einordnen.
4. Schritt 4: Ereignisse normalisieren, anreichern, filtern, routen und mit Batching vor Lastspitzen schützen.
5. Schritt 5: Dubletten, Reihenfolge, verspätete Ereignisse und Zielausfälle kontrolliert behandeln.
6. Schritt 6: Eine Ereignisstrecke von Broker oder Anlage über Lobster_data zu ERP, API oder Datenbank integrieren.

Tag 5: Qualität, Deployment und KI-Readiness

1. Schritt 1: Testkatalog, Namenskonventionen, Modularitätsregeln und technische Dokumentation für das Gesamtprojekt vervollständigen.
2. Schritt 2: Objektabhängigkeiten und Umgebungsparameter für einen kontrollierten Transport und Smoke Test vorbereiten.
3. Schritt 3: Monitoringkennzahlen, Alarmierung, Datenschutz und Betriebsrunbook für die Integrationsarchitektur definieren.
4. Schritt 4: Integrationsdaten nach Qualität, Aktualität, Metadaten und Schutzbedarf auf KI-Eignung bewerten.
5. Schritt 5: Pathfinder und MCP-orientierte Werkzeuge mit minimalen Rechten, Protokollierung und menschlicher Freigabe einordnen.
6. Schritt 6: Das Seminarprojekt transportieren, unter Störung testen und mit einer kontrollierten KI-Pilotidee dokumentiert abschließen.

Praxisübungen

Modulares End-to-End-Projekt mit mehreren Datenformaten, Advanced Mapping, REST oder SOAP, Datenbank, ERP- oder Eventquelle, Routing, Fehlerpfaden, Tests, Performanceprüfung, Deployment und KI-Readiness-Bewertung.

Einordnung in den Lernpfad

Das Intensivseminar verdichtet Grundlagen, Datenformate, Mapping Grundlagen und Advanced, Integrationsprofile, API-, Datenbank-, SAP-/ERP-, IoT-/Event-Integration sowie KI-Readiness. Für Plattformbetrieb oder B2B-Partnerprozesse stehen die beiden anderen Intensivpfade bereit.