Seminar Apache Drill Datenquellen, Storage Plugins und Formate

Apache Drill wird interessant, sobald verschiedene Datenquellen ohne langwierige Vorarbeiten zusammengeführt werden sollen. Genau dort beginnt dieses Seminar. Es zeigt, wie Storage Plugins sauber konfiguriert werden, welche Formate in der Praxis tragfähig sind und wie sich Data-Lake-, Datei- und Quellsysteme in eine brauchbare Abfrageumgebung überführen lassen.

Inhalte im Überblick

• Grundprinzipien von Storage Plugins, Workspaces und Standardformaten
• Dateibasierte Zugriffe auf JSON, Parquet, CSV und weitere Formate
• Anbindung klassischer und moderner Quellen wie Hive, HBase, RDBMS, S3, HTTP und weiteren Plugin-Typen
• Umgang mit komplexen und sich ändernden Schemata in schema-on-read-Szenarien
• Format- und Plugin-Besonderheiten für Iceberg-, Delta-Lake- und weitere aktuelle Datenformate
• Authentifizierungsmodi, Zugangsdaten, Berechtigungen und saubere Trennung technischer Zuständigkeiten
• Typische Stolperstellen bei Pushdown, Typableitung, Formaterkennung und Verzeichnisstrukturen

Praxis und Methoden

Im Seminar werden mehrere Datenquellen konfiguriert, getestet und gegeneinander abgegrenzt. Übungen befassen sich mit Workspace-Definitionen, Formatkonfigurationen, Zugriffspfaden, Berechtigungsproblemen und praxisnahen Fehlersituationen. Ziel ist nicht, jedes Plugin auswendig zu lernen, sondern ein belastbares Muster für neue Anbindungen zu beherrschen.

Zielgruppe

Das Seminar richtet sich an Data Engineers, Integrationsverantwortliche, Administratoren und technisch versierte BI-Teams, die Apache Drill als Abfrageschicht über unterschiedliche Systeme etablieren oder ausbauen wollen.

Vorkenntnisse

Sinnvoll sind Grundlagen in Apache Drill oder vergleichbare Erfahrung mit SQL-Engines, Dateiformaten und Datenplattformen. Wer die Unterschiede zwischen Tabellenromantik und echter Dateisystemwirklichkeit kennt, ist klar im Vorteil.