MLflow Evaluation, Monitoring und Governance
Seminarprofil
Dieses Seminar fokussiert die kontrollierte Bewertung und Überwachung produktiver AI-Workflows. Behandelt werden Metriken, Evaluationsdesign, Qualitätsschwellen, Feedback-Schleifen, Freigaberegeln und betriebliche Überwachung. Neben klassischen Modellmetriken werden auch aktuelle Verfahren für GenAI- und Agent-Szenarien eingeordnet.
Inhaltsschwerpunkte
- Planung belastbarer Evaluationsstrecken für Training, Validierung und Freigabe
- Vergleich von Runs, Modellen, Datensätzen und Versionen mit nachvollziehbaren Kriterien
- Aufbau von Monitoring-Konzepten für Qualität, Drift, Nutzung, Kosten und Fehlersignale
- Dokumentation von Annahmen, Freigabegrenzen und Governance-Regeln
- Integration manueller Reviews, Feedbackzyklen und Prüfschritte in Teamprozesse
- Ableitung von Eskalations- und Verbesserungsmaßnahmen aus Monitoring- und Evaluationsdaten
Praxisanteil
Im praktischen Teil werden Evaluations- und Monitoring-Schemata für reale Anwendungsfälle entworfen, Runs strukturiert verglichen und Governance-Regeln in nachvollziehbare Freigabepfade überführt. Das Ergebnis ist ein umsetzbares Qualitätsmodell für operative Teams und Revisionsanforderungen.
Seminardetails
| Dauer: | 3 Tage ca. 6 h/Tag, Beginn 1. Tag: 10:00 Uhr, weitere Tage 09:00 Uhr |
| Preis: |
Öffentlich und Webinar: € 1.797 zzgl. MwSt. Inhaus: € 5.100 zzgl. MwSt. |
| Teilnehmeranzahl: | min. 2 - max. 8 |
| Teilnehmer: | ML Engineers, Data Scientists, MLOps-Verantwortliche, QA-Teams, Responsible-AI- und Governance-Rollen |
| Voraussetzungen: | Grundkenntnisse in MLflow oder vergleichbare Erfahrung mit Trainings-, Modell- oder GenAI-Workflows |
| Standorte: | Bregenz, Graz, Innsbruck, Klagenfurt, Linz, Salzburg, Wien |
| Methoden: | Vortrag, Demonstrationen, praktische Übungen am System |
| Seminararten: | Öffentlich, Webinar, Inhaus, Workshop - Alle Seminare mit Trainer vor Ort, Webinar nur wenn ausdrücklich gewünscht |
| Durchführungsgarantie: | ja, ab 2 Teilnehmern |
| Sprache: | Deutsch - bei Firmenseminaren ist auch Englisch möglich |
| Seminarunterlage: | Dokumentation auf Datenträger oder als Download |
| Teilnahmezertifikat: | ja, selbstverständlich |
| Verpflegung: | Kalt- / Warmgetränke, Mittagessen (wahlweise vegetarisch) |
| Support: | 3 Anrufe im Seminarpreis enthalten |
| Barrierefreier Zugang: | an den meisten Standorten verfügbar |
| Weitere Informationen unter + 43 (720) 022000 |
Seminartermine
Die Ergebnissliste kann durch Anklicken der Überschrift neu sortiert werden.
