Databricks – Spark-Verarbeitung mit Messungen verbessern

Kursüberblick

Untersuchen Sie langsame Datenverarbeitung anhand von Ausführungsplänen und vergleichbaren Messungen. Sie reduzieren unnötige Datenbewegung, prüfen Tabellenlayout und Compute-Wahl und sichern jede Optimierung gegen fachliche Ergebnisänderungen ab.

Dauer: 3 Tage.

Ihre Lernziele

  • Spark-Engpässe anhand von Ausführungsdaten eingrenzen.
  • Optimierungen durch Ergebnis- und Kostenvergleiche absichern.
  • Leistungsgrenzen mit wiederholbaren Messungen dokumentieren.

Inhalte im Detail

  • Vergleichbare Ausgangsmessungen mit Datenvolumen, Runtime, Compute und Ergebnisprüfung aufbauen.
  • Ausführungspläne, Stages und Shuffle anhand einer konkreten langsamen Abfrage lesen.
  • Joins, Datenverteilung und Skew mit gezielten Varianten statt pauschaler Konfigurationsänderungen untersuchen.
  • Delta-Dateigrößen, Clustering und Datenfilterung nach tatsächlichem Abfragemuster bewerten.
  • Photon, adaptive Ausführung und Compute-Optionen mit Kosten und unterstützten Operationen vergleichen.
  • Regressionstests und Messprotokolle für spätere Daten- oder Runtime-Änderungen anlegen.

Praktische Übungen

  • Analysieren Sie eine vorbereitete langsame Transformation und formulieren Sie vor der Änderung eine messbare Hypothese zur Ursache.
  • Vergleichen Sie zwei Join- oder Layoutvarianten auf demselben Datensatz und prüfen Sie Laufzeit, Ressourcenverbrauch und identische Ergebnisse.
  • Erhöhen Sie gezielt Datenmenge und Ungleichverteilung und dokumentieren Sie, ab wann die gewählte Optimierung ihre Wirkung verliert.

Zielgruppe

Erfahrene Data Engineers und Spark-Entwickler.

Voraussetzungen

Praktische Spark-/PySpark- und SQL-Kenntnisse.

Software und Übungsumgebung

Getrennter Databricks-Workspace mit Unity Catalog, synthetischen Datensätzen und begrenztem Cloudbudget. Cloudanbieter, Region, Runtime und benötigte Funktionen werden vorab festgelegt; Vorschaufunktionen sind kein vorausgesetzter Bestandteil. Geeignete Compute-Ressourcen und begrenzte synthetische Last; keine Produktionsmessungen.

Teilnahmebestätigung

Sie erhalten eine Teilnahmebestätigung von SCN.

Einordnung des Seminars

Aufbaukurs für Teilnehmende mit praktischer Erfahrung in den genannten Voraussetzungen.

Ansprechpartner

Ihre Berater für das Training Databricks – Spark-Verarbeitung mit Messungen verbessern

Vorbereitung Ihres Trainings

Besprechen Sie Ihre Lernziele vorab mit dem Trainer. Unsere Ansprechpartner unterstützen Sie bei individuellen Themen und Firmenschulungen.

Buchung

Buchung


Das Seminar wurde auf die Merkliste gesetzt


Das von Ihnen gewählte Seminar wurde bereits auf die Merkliste gesetzt


Bitte wählen Sie einen freien Termin aus


Bitte geben Sie Ihren Wunschtermin im Format tt.mm.jjjj ein


Bitte wählen Sie einen freien Termin aus


Bitte geben Sie den gewünschten Termin im Format tt.mm.jjjj der Schulung ein

Dauer 3 Tage, ca. 6h/Tag
1.Tag: 10:00 Uhr, weitere ab 09:00 Uhr
Preis € 2.670,00 zzgl. MwSt.
pro Teilnehmenden
Leistungen Live Durchführung durch einen bei uns fest angestellten Trainer, Schulungsunterlagen als PDF wahlweise in deutscher oder englischer Sprache, Teilnahmebestätigung, Laborumgebung für die praktischen Übungen, Verpflegung.
Sprache Deutsch - bei Firmenseminaren ist auch Englisch möglich
Seminarunterlagen Ausführliche Schulungs- und Begleitmaterialien in deutscher Sprache oder wahlweise in englischer Sprache als PDF
Teilnahmezertifikat ja, selbstverständlich
Barriere freier Zugang an den meisten Standorten verfügbar
Verpflegung Kalt- / Warmgetränke, Mittagessen (wahlweise vegetarisch) - nicht bei Firmen- und Online Seminaren
Support 3 Anrufe im Seminarpreis enthalten
Methoden Vortrag, Demonstration, praktische Übungen am System
Seminararten Mit Trainer vor Ort: Öffentlich oder Inhaus - Alternativ als Online Training bestellbar
Durchführungsgarantie ja, ab 2 Teilnehmern, max. 8 Teilnehmer, Details

Wählen Sie einen freien Termin für Bregenz aus


























Dauer 3 Tage, ca. 6h/Tag
1.Tag: 10:00 Uhr, weitere ab 09:00 Uhr
Preis € 4.350,00 zzgl. MwSt.
gilt für bis zu 8 Teilnehmende bei einer Online-Durchführung. Ggf. kommen Kosten für die Schulungsumgebung hinzu.
Leistungen Live und online Durchführung durch einen bei uns fest angestellten Trainer, Schulungsunterlagen als PDF wahlweise in deutscher oder englischer Sprache, Teilnahmebestätigung, Optional: Laborumgebung für die praktischen Übungen und Reisespesen.
Sprache Deutsch - bei Firmenseminaren ist auch Englisch möglich
Seminarunterlagen Ausführliche Schulungs- und Begleitmaterialien in deutscher Sprache oder wahlweise in englischer Sprache als PDF
Teilnahmezertifikat ja, selbstverständlich
Barriere freier Zugang an den meisten Standorten verfügbar
Verpflegung Kalt- / Warmgetränke, Mittagessen (wahlweise vegetarisch) - nicht bei Firmen- und Online Seminaren
Support 3 Anrufe im Seminarpreis enthalten
Methoden Vortrag, Demonstration, praktische Übungen am System
Seminararten Mit Trainer vor Ort: Öffentlich oder Inhaus - Alternativ als Online Training bestellbar
Durchführungsgarantie ja, ab 2 Teilnehmern, max. 8 Teilnehmer, Details

Geben Sie hier Ihren Wunschtermin für Bregenz



Dauer 3 Tage, ca. 6h/Tag
1.Tag: 10:00 Uhr, weitere ab 09:00 Uhr
Preis € 2.670,00 zzgl. MwSt.
pro Teilnehmenden
Leistungen Live Durchführung durch einen bei uns fest angestellten Trainer, Schulungsunterlagen als PDF wahlweise in deutscher oder englischer Sprache, Teilnahmebestätigung, Laborumgebung für die praktischen Übungen.
Sprache Deutsch - bei Firmenseminaren ist auch Englisch möglich
Seminarunterlagen Ausführliche Schulungs- und Begleitmaterialien in deutscher Sprache oder wahlweise in englischer Sprache als PDF
Teilnahmezertifikat ja, selbstverständlich
Barriere freier Zugang an den meisten Standorten verfügbar
Verpflegung Kalt- / Warmgetränke, Mittagessen (wahlweise vegetarisch) - nicht bei Firmen- und Online Seminaren
Support 3 Anrufe im Seminarpreis enthalten
Methoden Vortrag, Demonstration, praktische Übungen am System
Seminararten Mit Trainer vor Ort: Öffentlich oder Inhaus - Alternativ als Online Training bestellbar
Durchführungsgarantie ja, ab 2 Teilnehmern, max. 8 Teilnehmer, Details

Wählen Sie bitte einen freien Termin aus


























© 2026 SCN GmbH. All rights reserved.