Technical Expert Databricks (m/w/d)

Technical Expert Databricks (m/w/d)

Die Perspektiven und Möglichkeiten in der LBBW-IT sind vielfältig und umfassen alle Bereiche einer modern aufgestellten IT. In der Gruppe Data & Analytics Services verantworten wir die Entwicklung und den Betrieb unserer Plattformen und Services rund um die Themen Data, Data Management, Analytics/KI und Generative KI. Unsere Mission ist es den wertschöpfenden Einsatz von Daten in der LBBW zu ermöglichen. Hierfür bauen wir die Plattformen und Services der Zukunft.

Aufgaben:

• Technische Weiterentwicklung der Data Management & Analytics Plattform als Grundlage für moderne Data-, Analytics-, BI- und KI-Anwendungsfälle in der LBBW
• Entwicklung wiederverwendbarer Plattformstandards, Vorlagen und Referenzimplementierungen für die sichere, konsistente und effiziente Bereitstellung von Datenprodukten, Anwendungen und analytischen Lösungen
• Gestaltung technischer Standards für Entwicklung, Deployment, Berechtigungen, Betrieb und Dokumentation mit Fokus auf einfache Nutzbarkeit und Wartbarkeit
• Umsetzung von Best Practices für Automatisierung, CI/CD, Qualitätssicherung und Data Governance sowie kontinuierliche Weiterentwicklung der erforderlichen technischen Bausteine
• Beratung von Data Engineers, BI-Teams, Data Scientists und Fachbereichen zur Nutzung der Plattformstandards und Überführung wiederkehrender Anforderungen in robuste, skalierbare Lösungen
• Sicherstellung des stabilen produktiven Einsatzes der Standards inklusive Monitoring, Fehleranalyse, Automatisierung, Enablement und kontinuierlicher Verbesserung

Profil:

• Abgeschlossenes Studium der Informatik, Wirtschaftsinformatik, Medieninformatik oder einer vergleichbaren Fachrichtung
• Mindestens vier Jahre praktische Erfahrung mit Databricks sowie Erfahrung in der Entwicklung von Plattformstandards, Referenzimplementierungen oder Vorlagen für mehrere Teams
• Sehr gute Kenntnisse in Data Engineering, Data Governance mit Unity Catalog sowie semantischen Datenmodellen und Ontologien auf modernen Datenplattformen
• Fundierte Erfahrung mit datengetriebenen Web-Anwendungen, insbesondere Databricks Apps, sowie deren sicherer und skalierbarer Konzeption, Bereitstellung und Betrieb auf der Plattform
• Mehrjährige Erfahrung mit Azure DevOps, CI/CD, Lakeflow Declarative Pipelines, Infrastructure as Code und Terraform sowie Fähigkeit zur Gestaltung einfach nutzbarer und wartbarer technischer Standards
• Sehr gute Kenntnisse in Python, Spark/PySpark und SQL sowie fundierte Erfahrung mit Delta Lake, Lakehouse-Architekturen und verteiltem Rechnen auf Databricks
• Erfahrung mit Power BI, Databricks Dashboards, Microsoft Fabric oder vergleichbaren Analytics- und Reporting-Werkzeugen sowie Verständnis für das Zusammenspiel von Datenprodukten, Berechtigungen, Deployment-Prozessen und produktionsnahen Nutzungsszenarien
• Hohe Umsetzungskompetenz, ausgeprägte Teamorientierung, Freude an gemeinsamer Gestaltung sowie ein guter Sinn für Humor
• Sehr gute Deutschkenntnisse in Wort und Schrift