Im Arbeitsalltag rund um Daten nimmt die Verzahnung von Data Engineering und Cloud-Infrastruktur eine wachsende Rolle ein. Entscheidungen zu Pipelines, Speicher und Verarbeitung prägen, wie belastbar Analysen und KI-Anwendungen im Unternehmen arbeiten.



Kursinhalt




1. Aufgaben des Data Engineerings
  • Bereitstellung zuverlässiger Daten
  • Aufbau und Pflege von Pipelines
  • Zusammenspiel mit Analyse-Teams




2. Cloud-Bausteine für Datenplattformen
  • Speicherdienste und Datenbanken
  • Verarbeitungsdienste für Batch und Stream
  • Orchestrierungs- und Workflow-Dienste




3. Design von Datenpipelines
  • Schichten von Rohdaten bis Analyseschicht
  • Umgang mit Schemaänderungen
  • Wiederholbare Ausführungen




4. Betrieb und Qualität in der Cloud
  • Monitoring von Pipelines
  • Kostenkontrolle und Skalierung
  • Sicherheits- und Berechtigungskonzepte




Berufliche Relevanz




  • Aufbau verlässlicher Datenplattformen in der Cloud
  • Basis für Analytics- und KI-Anwendungen
  • Verzahnung von Entwicklung und Betrieb