Datenplattform MS Fabric Databricks — Talan
Diese Position ist nicht mehr aktiv. Nachfolgend finden Sie die Originaldetails und weitere offene Stellen.
Vollständige Beschreibung
Kontext des Auftrags
Im Rahmen der Weiterentwicklung einer Data-Plattform in einem Bankenumfeld suchen wir einen erfahrenen Data Engineer mit Erfahrung in Databricks und Microsoft Fabric .
Der Auftrag besteht hauptsächlich darin, die funktionale Abdeckung einer bestehenden Data-Plattform zu erweitern, indem neue Datasets gemäß bereits definierten Patterns und Standards integriert werden.
Da die Architektur und das Framework bereits vorhanden sind, besteht das Ziel nicht darin, die Lösung neu zu definieren, sondern neue Datenflüsse unter Einhaltung der bestehenden Modelle, Qualitätsregeln und CI/CD-Prozesse bereitzustellen .
Hauptaufgaben
- Neue Datasets in die bestehende Data-Plattform integrieren.
- Die neuen Datenflüsse gemäß den festgelegten Patterns und Standards konfigurieren.
- Die Verarbeitungen mit PySpark und SQL entwickeln und anpassen .
- Die Modellierung der neuen Daten korrekt definieren: Dimensionen, Fakten, Granularität, Geschäftsschlüssel, SCD1/SCD2, Snapshots.
- Die Datasets über einen deklarativen Ansatz konfigurieren, insbesondere über TOML .
- Die Daten gemäß den bestehenden Qualitätsregeln und Datenverträgen validieren.
- Bei der Integration der neuen Quellen auftretende Anomalien analysieren und beheben.
- Die Weiterentwicklungen über die CI/CD-Pipelines von Azure DevOps bereitstellen .
- Fehlschläge im Zusammenhang mit Quality Gates und den verschiedenen Promotion-Schritten diagnostizieren und beheben .
- Die Quelldaten aus dem Bankwesen fachlich verstehen, um ihre ordnungsgemäße Integration in die Plattform sicherzustellen.
Datentechnik
- Fundierte Erfahrung mit Databricks
- Beherrschung von Delta Lake
- Gute Kenntnisse in Unity Catalog
- Kenntnisse im Change Data Feed
- Sehr gute Kenntnisse in PySpark
- Sehr gute Kenntnisse in SQL
Datenmodellierung
Fähigkeit, für jeden neuen Datensatz zu bestimmen
- Dimension vs. Fakt;
- SCD-Typ 1 vs. SCD-Typ 2;
- Snapshot-Logik;
- Granularität;
- Natürliche Geschäftsschlüssel;
- Transformations- und Validierungsregeln.
KI/CD & Dev Ops
- Gute Kenntnisse in Azure DevOps
- Erfahrung mit bestehenden CI/CD-Pipelines
- Verständnis der Gate-Mechanismen und der Promotion über Branches
- Fähigkeit, Bereitstellungsfehler zu diagnostizieren
- Erfahrung mit Databricks Asset Bundles und/oder Terraform ist von Vorteil.
Bankkenntnisse
Erfahrung im Bankensektor, idealerweise im Private Banking / Wealth Management, ist unerlässlich.
Gutes Verständnis von Daten wie
- Positionen;
- Transaktionen;
- Verwaltetes Vermögen (AuM) ;
- Netto-Neuvermögen (NNA) ;
- Buchungszentren ;
- Kundenhierarchien.
Die Fähigkeit, Daten aus einem Core-Banking-System funktional zu verstehen, ist besonders wichtig.
Wünschenswerte Kompetenzen
- Erfahrung mit TOML oder deklarativen/konfigurationsgesteuerten Data-Frameworks
- Erfahrung mit Auto-CDC-Patterns
- SCD1 / SCD2
- DECAILLON
- Deklarative Spark-Pipelines
- Kenntnisse in Microsoft Fabric
- Erfahrung mit dimensionaler Modellierung
- Kenntnisse der Kimball-Methodik
- Terraform
Stellendetails
- Unternehmen: Talan
- Position: Datenplattform MS Fabric Databricks
- Standort: Genève, , Switzerland, Genf
- Gehalt: CHF 63'000 - 107'500 (Quelle ungeprüft)
- Branche: IT / SAP / AI Consulting
- Veröffentlicht am: 2026-10-15
- Abgelaufen am: 2026-11-13
Weitere Stellen bei Talan
- AI Senior Lead Ingenieur — Genève
- Berater(e) M365 Sharepoint — Genève
Stellen suchen im Genf
Durchsuchen Sie unser komplettes Job Board.
Weitere Stellen in der Nähe von Genève, , Switzerland: Jobs im Genf
Finden Sie Ihre nächste Stelle als Grenzgänger in der Schweiz.