Seminar Weaviate Architektur und Grundlagen

Dieses praxisorientierte Seminar behandelt Architektur, Collections, Properties, Objekte, Vektoren, invertierte Indizes, Embeddings, Datenimport, grundlegende Sucharten und erste Deployment-Entscheidungen. Alle Arbeitsschritte werden an einer durchgängigen Referenzumgebung ausgeführt, geprüft und in wiederverwendbaren Arbeitsvorlagen dokumentiert.

Inhaltsübersicht

• Anwendungsfälle und Architektur
• Collections und Objekte
• Vektoren und Embeddings
• Datenaufnahme
• Grundlegende Suche
• Deployment-Grundlagen
• Lernziele und Abnahmekriterien
• Praxisübungen und Betriebsdokumentation

Lernziele

• Anforderungen in den Bereichen Anwendungsfälle und Architektur, Datenaufnahme und Deployment-Grundlagen strukturiert analysieren und in eine umsetzbare Weaviate-Konfiguration überführen.
• Collections, Daten, Abfragen oder Betriebsparameter nachvollziehbar konfigurieren und mit reproduzierbaren Prüfungen verifizieren.
• Fehlersituationen systematisch eingrenzen, geeignete Diagnoseinformationen erfassen und belastbare Korrekturmaßnahmen ableiten.
• Qualität, Leistung, Sicherheit und Wartbarkeit anhand definierter Kriterien bewerten und die Lösung für den Regelbetrieb dokumentieren.

Schritt-für-Schritt-Inhalte

1. Anwendungsfälle und Architektur

Schwerpunkt: Abgrenzung von Datenbanksuche, Volltextsuche und Vektorsuche sowie Zusammenspiel von Objektspeicher, Vektorindex und invertiertem Index.

1. Anforderungen für Anwendungsfälle und Architektur erfassen: Abgrenzung von Datenbanksuche, Volltextsuche und Vektorsuche sowie Zusammenspiel von Objektspeicher, Vektorindex und invertiertem Index; Zielzustand, Eingaben, Abhängigkeiten und messbare Prüfkriterien in einer Arbeitsvorlage festhalten.
2. Technische Grundlage konfigurieren: passende Collections, Properties, Clients, Modelle, Indizes oder Infrastrukturparameter auswählen und jede Einstellung mit ihrem Zweck dokumentieren.
3. Vorgehen mit repräsentativen Daten ausführen: Ausgangszustand prüfen, Operation schrittweise durchführen, Rückgaben protokollieren und das erwartete Verhalten gegen die Prüfkriterien vergleichen.
4. Fehler- und Grenzfälle untersuchen: ungültige Eingaben, fehlende Berechtigungen, leere Ergebnisse, Zeitüberschreitungen oder Ressourcenengpässe gezielt auslösen und diagnostizieren.
5. Ergebnis absichern: Qualität, Latenz, Ressourcenbedarf, Sicherheit und Wartbarkeit bewerten; Konfiguration und Wiederholungsablauf als wiederverwendbares Runbook festhalten.

2. Collections und Objekte

Schwerpunkt: Collection-Grenzen, Properties, Datentypen, Pflichtfelder, UUIDs, Metadaten, Denormalisierung und Referenzen.

1. Anforderungen für Collections und Objekte erfassen: Collection-Grenzen, Properties, Datentypen, Pflichtfelder, UUIDs, Metadaten, Denormalisierung und Referenzen; Zielzustand, Eingaben, Abhängigkeiten und messbare Prüfkriterien in einer Arbeitsvorlage festhalten.
2. Technische Grundlage konfigurieren: passende Collections, Properties, Clients, Modelle, Indizes oder Infrastrukturparameter auswählen und jede Einstellung mit ihrem Zweck dokumentieren.
3. Vorgehen mit repräsentativen Daten ausführen: Ausgangszustand prüfen, Operation schrittweise durchführen, Rückgaben protokollieren und das erwartete Verhalten gegen die Prüfkriterien vergleichen.
4. Fehler- und Grenzfälle untersuchen: ungültige Eingaben, fehlende Berechtigungen, leere Ergebnisse, Zeitüberschreitungen oder Ressourcenengpässe gezielt auslösen und diagnostizieren.
5. Ergebnis absichern: Qualität, Latenz, Ressourcenbedarf, Sicherheit und Wartbarkeit bewerten; Konfiguration und Wiederholungsablauf als wiederverwendbares Runbook festhalten.

3. Vektoren und Embeddings

Schwerpunkt: Dimension, Distanz, integrierte Vektorisierung, selbst bereitgestellte Vektoren und Named Vectors.

1. Anforderungen für Vektoren und Embeddings erfassen: Dimension, Distanz, integrierte Vektorisierung, selbst bereitgestellte Vektoren und Named Vectors; Zielzustand, Eingaben, Abhängigkeiten und messbare Prüfkriterien in einer Arbeitsvorlage festhalten.
2. Technische Grundlage konfigurieren: passende Collections, Properties, Clients, Modelle, Indizes oder Infrastrukturparameter auswählen und jede Einstellung mit ihrem Zweck dokumentieren.
3. Vorgehen mit repräsentativen Daten ausführen: Ausgangszustand prüfen, Operation schrittweise durchführen, Rückgaben protokollieren und das erwartete Verhalten gegen die Prüfkriterien vergleichen.
4. Fehler- und Grenzfälle untersuchen: ungültige Eingaben, fehlende Berechtigungen, leere Ergebnisse, Zeitüberschreitungen oder Ressourcenengpässe gezielt auslösen und diagnostizieren.
5. Ergebnis absichern: Qualität, Latenz, Ressourcenbedarf, Sicherheit und Wartbarkeit bewerten; Konfiguration und Wiederholungsablauf als wiederverwendbares Runbook festhalten.

4. Datenaufnahme

Schwerpunkt: Datenbereinigung, Einzeloperationen, Batch-Import, Fehlerlisten, Wiederanlauf und Vollständigkeitsprüfung.

1. Anforderungen für Datenaufnahme erfassen: Datenbereinigung, Einzeloperationen, Batch-Import, Fehlerlisten, Wiederanlauf und Vollständigkeitsprüfung; Zielzustand, Eingaben, Abhängigkeiten und messbare Prüfkriterien in einer Arbeitsvorlage festhalten.
2. Technische Grundlage konfigurieren: passende Collections, Properties, Clients, Modelle, Indizes oder Infrastrukturparameter auswählen und jede Einstellung mit ihrem Zweck dokumentieren.
3. Vorgehen mit repräsentativen Daten ausführen: Ausgangszustand prüfen, Operation schrittweise durchführen, Rückgaben protokollieren und das erwartete Verhalten gegen die Prüfkriterien vergleichen.
4. Fehler- und Grenzfälle untersuchen: ungültige Eingaben, fehlende Berechtigungen, leere Ergebnisse, Zeitüberschreitungen oder Ressourcenengpässe gezielt auslösen und diagnostizieren.
5. Ergebnis absichern: Qualität, Latenz, Ressourcenbedarf, Sicherheit und Wartbarkeit bewerten; Konfiguration und Wiederholungsablauf als wiederverwendbares Runbook festhalten.

5. Grundlegende Suche

Schwerpunkt: Objektabruf, Keyword Search, Vektorsuche, Hybrid Search, Filter, Ergebnis-Metadaten und Grenzwerte.

1. Anforderungen für Grundlegende Suche erfassen: Objektabruf, Keyword Search, Vektorsuche, Hybrid Search, Filter, Ergebnis-Metadaten und Grenzwerte; Zielzustand, Eingaben, Abhängigkeiten und messbare Prüfkriterien in einer Arbeitsvorlage festhalten.
2. Technische Grundlage konfigurieren: passende Collections, Properties, Clients, Modelle, Indizes oder Infrastrukturparameter auswählen und jede Einstellung mit ihrem Zweck dokumentieren.
3. Vorgehen mit repräsentativen Daten ausführen: Ausgangszustand prüfen, Operation schrittweise durchführen, Rückgaben protokollieren und das erwartete Verhalten gegen die Prüfkriterien vergleichen.
4. Fehler- und Grenzfälle untersuchen: ungültige Eingaben, fehlende Berechtigungen, leere Ergebnisse, Zeitüberschreitungen oder Ressourcenengpässe gezielt auslösen und diagnostizieren.
5. Ergebnis absichern: Qualität, Latenz, Ressourcenbedarf, Sicherheit und Wartbarkeit bewerten; Konfiguration und Wiederholungsablauf als wiederverwendbares Runbook festhalten.

6. Deployment-Grundlagen

Schwerpunkt: lokale Container-Umgebung, Weaviate Cloud, Persistenz, Authentifizierung, Modellzugang und Umgebungs-Trennung.

1. Anforderungen für Deployment-Grundlagen erfassen: lokale Container-Umgebung, Weaviate Cloud, Persistenz, Authentifizierung, Modellzugang und Umgebungs-Trennung; Zielzustand, Eingaben, Abhängigkeiten und messbare Prüfkriterien in einer Arbeitsvorlage festhalten.
2. Technische Grundlage konfigurieren: passende Collections, Properties, Clients, Modelle, Indizes oder Infrastrukturparameter auswählen und jede Einstellung mit ihrem Zweck dokumentieren.
3. Vorgehen mit repräsentativen Daten ausführen: Ausgangszustand prüfen, Operation schrittweise durchführen, Rückgaben protokollieren und das erwartete Verhalten gegen die Prüfkriterien vergleichen.
4. Fehler- und Grenzfälle untersuchen: ungültige Eingaben, fehlende Berechtigungen, leere Ergebnisse, Zeitüberschreitungen oder Ressourcenengpässe gezielt auslösen und diagnostizieren.
5. Ergebnis absichern: Qualität, Latenz, Ressourcenbedarf, Sicherheit und Wartbarkeit bewerten; Konfiguration und Wiederholungsablauf als wiederverwendbares Runbook festhalten.

Praxisübungen

1. Übung 1: Anwendungsfälle und Architektur – Abgrenzung von Datenbanksuche, Volltextsuche und Vektorsuche sowie Zusammenspiel von Objektspeicher, Vektorindex und invertiertem Index in einer vorbereiteten Referenzumgebung konfigurieren, ausführen, mit Negativtests prüfen und in einem Abnahmeprotokoll dokumentieren.
2. Übung 2: Collections und Objekte – Collection-Grenzen, Properties, Datentypen, Pflichtfelder, UUIDs, Metadaten, Denormalisierung und Referenzen in einer vorbereiteten Referenzumgebung konfigurieren, ausführen, mit Negativtests prüfen und in einem Abnahmeprotokoll dokumentieren.
3. Übung 3: Vektoren und Embeddings – Dimension, Distanz, integrierte Vektorisierung, selbst bereitgestellte Vektoren und Named Vectors in einer vorbereiteten Referenzumgebung konfigurieren, ausführen, mit Negativtests prüfen und in einem Abnahmeprotokoll dokumentieren.
4. Übung 4: Datenaufnahme – Datenbereinigung, Einzeloperationen, Batch-Import, Fehlerlisten, Wiederanlauf und Vollständigkeitsprüfung in einer vorbereiteten Referenzumgebung konfigurieren, ausführen, mit Negativtests prüfen und in einem Abnahmeprotokoll dokumentieren.

Zielgruppe

Softwareentwickler, Data Engineers, Solution Architects, technische Projektleitungen und AI-Teams ohne oder mit geringen Weaviate-Vorkenntnissen.

Voraussetzungen

Allgemeine Kenntnisse in Softwareentwicklung und Datenbanken; Programmiererfahrung ist für die Übungen hilfreich.