Talent.com
expertplace professionals
Senior Data Engineer (m/w/d) Lakehouse, Databricksexpertplace professionals • Köln, Nordrhein-Westfalen, Germany
Senior Data Engineer (m/w/d) Lakehouse, Databricks

Senior Data Engineer (m/w/d) Lakehouse, Databricks

expertplace professionals • Köln, Nordrhein-Westfalen, Germany
Vor 10 Stunden
Stellenbeschreibung

Deine Chance im Herzen von Köln

Für unseren Kunden aus dem Versicherungsumfeld suchen wir einen Senior Data Engineer (m/w/d) am Standort Köln. Nach der Einarbeitungsphase wird eine Vor-Ort-Anwesenheit von 2 aufeinanderfolgenden Tagen aller 2 Wochen gewünscht.
Die Versicherung betreibt mit einer Analytics Plattform eine moderne Data-&-AI-Plattform in der Azure Cloud. Diese wird aktuell für folgende Zwecke genutzt: Entwicklung und Betrieb von KI-Systemen (z. B. RAG-Applikationen), Hosting selbst trainierter KI-Modelle, Durchführung von Ad-hoc-Analysen auf strukturierten und unstrukturierten Daten, Entwicklung von Datenprodukten, Datenintegration und -transformation für ein separates Data Warehouse.
Im Rahmen der IT-Transformations-Roadmap wird Unterstützung für die Weiterentwicklung sowie die spätere Migration der Plattform benötigt.
expertplace professionals bringt seit 2014 Experten und Talente zusammen und begleitet Unternehmen sowie Fachkräfte deutschlandweit in den Bereichen IT, Engineering und kaufmännischen Funktionen. Wir stehen für geprüfte Qualität, individuelle Beratung und flexible Lösungen, die zu den Zielen aller Beteiligten passen.

Deine Benefits:

  • Attraktive Vergütung
  • Modernes, technisches Umfeld mit Fokus auf Innovation
  • Flexible Homeoffice-Regelung für deine Work-Life-Balance
  • Respektvolle und offene Arbeitskultur
  • Weihnachts- und Urlaubsgeld on top

Deine Aufgaben als Senior Data Engineer:

  • Weiterentwicklung der bestehenden Plattform zu einem Lakehouse
  • Unterstützung bei der technischen Anbindung weiterer IT-Systeme
  • Implementierung von Entwicklungsprozessen für Lakehouse-Entwickler unter Beachtung von DABs und Data Contracts
  • Mitarbeit an der Migration von GitLab CI/CD zu GitHub Actions
  • Wiederherstellung und Bewertung vorhandener Assets, Daten und Daten-Pipelines im neuen Azure Tenant
  • Unterstützung bei der automatischen Bereitstellung von Berechtigungsgruppen, Monitoring-Dashboards und Incident-Routing-Mechanismen
  • Vorbereitung der vorhandenen Infrastructure-as-Code-Repositories sowie Bewertung der vorhandenen Assets
  • Wiederherstellen vorhandener Assets, Daten und Daten-Pipelines im neuen Tenant
  • Anbindung an Umsysteme, SIEM und IAM
  • Migration von GitLab CI/CD zu GitHub Actions
  • Abbau der Cloud-Ressourcen, Prozesse und Assets im alten Azure-Tenant

Dein Profil:

  • Tiefes Verständnis von Berechtigungsstrukturen in Databricks mit Unity Catalog
  • Erfahrung im Design und der Administration von Databricks Workspaces
  • Entwicklung von resilienten Data-Pipelines mit PySpark inkl. Testautomatisierung, Packaging und Deployment mit Declarative Automation Bundles (DAB),
  • Kenntnisse von Data Contracts
  • Partitionierung von Daten in Delta Lake
  • Erfahrung mit GitLab CI/CD und/oder GitHub Actions
  • Sehr gute Deutschkenntnisse in Wort und Schrift

Werde Teil von expertplace professionals.

Du willst als Senior Data Engineer am Standort Köln den nächsten Schritt machen und Innovationen aktiv gestalten? Dann bewirb dich jetzt und gestalte mit uns die Zukunft der Datenwelt!
Jobalert für diese Suche erstellen

Senior Data Engineer (m/w/d) Lakehouse, Databricks • Köln, Nordrhein-Westfalen, Germany

Ähnliche Stellen

Snowflake Senior Data Engineer (m/w/d) - In 3 Minuten erfolgreich bewerben

Infomotion GmbHKöln, Köln (Kreis), Nordrhein-Westfalen

Erfolg beginnt dort, wo Erfahrung auf Exzellenz trifft – und Daten echte Wirkung erzeugen.Wir sind die AI & Data Performance Company – mit über 750 Datenenthusiastinnen und -enthusiasten in Deu... Mehr anzeigen

 • Gesponsert

System Engineer Databases im Zentrum für Informations- und Medienverarbeitung

Bergische Universität WuppertalWuppertal, Nordrhein-Westfalen, DE

Die Bergische Universität Wuppertal ist eine dynamische, vernetzte, forschungs-orientierte Campusuniversität.Gemeinsam stellen sich hier mehr als 25.Forschende, Lehrende, Studierende und Mitarbeite... Mehr anzeigen

 • Gesponsert

Master Data Manager (m/w/d) Artikelstamm

Raiffeisen Enterprise Services Köln GmbHKöln, DE

Wir, die Raiffeisen Enterprise Services Köln GmbH, sind eine 100%ige Tochtergesellschaft der RWZ Rhein Main AG mit Sitz im Kölner Süden.Wir bieten verschiedene Dienstleistungen innerhalb des RWZ-Ko... Mehr anzeigen

 • Gesponsert

Senior Consultants (w/m/d) Data & Analytics

drjve AGBonn, Germany

Dir macht es Spa interdisziplinr im Business und IT Bereichen ttig zu sein.Du liebst Herausforderungen und entwickelst daraus intelligente Lsungen.Du hast Spa daran Mitarbeiter und Kunden fr Dich u... Mehr anzeigen

 • Gesponsert

Data Engineer – Schwerpunkt Programmierung & Datenpipelines*

Haeger Consulting GmbHBonn, North Rhine-Westphalia, Germany
Quick Apply

Du liebst es, Daten zum Fließen zu bringen, große Datenmengen performant zu verarbeiten und saubere Pipelines zu bauen? Dein Schwerpunkt liegt klar auf Entwicklung und Datenverarbeitung? Dann bist ... Mehr anzeigen

Teamleiter/-in Data-Warehouse-Entwicklung (m/w/d) bei der Sparkasse KölnBonn

Sparkasse KölnBonnKöln, DE

Starte durch – mit deinem Job bei der Sparkasse KölnBonn.Als Sparkasse arbeiten wir in der Region und für die Region.Wir gehören zu Köln und Bonn, wie die Menschen, die hier leben.Und genau das mac... Mehr anzeigen

 • Gesponsert

Sen. Sachbearb. Steuerung & Schnittstellenmanagement Aufbaulogistik Automation (m/w/d), BN

Deutsche Post AGBonn, DE

Mit unserem nationalen Netz aus rund 17.Automaten (Packstation, Poststation, DeinFach), ~12.Verkaufsstellen sind wir überall erreichbar.Speziell für den boomenden Online-Handel entwickeln wir laufe... Mehr anzeigen

 • Gesponsert

Senior Full Stack Data Engineer

Circonomit GmbHKöln, DE

At Circonomit, we follow the mission to build the strategic twin of organizations.By transforming operational data into clear impact models, we revolutionize how resources are managed.As a Senior D... Mehr anzeigen

 • Gesponsert

(Senior) Data Engineer - Azure Databricks / Lakehouse (m/w/d)

Deichmann SEEssen, DE

Als eigenfinanziertes Familienunternehmen sind wir mehr als nur ein ca.Standorte umspannendes Filialnetz in 34 Ländern, mehr als ca.Euro Jahresumsatz und mehr als einer der erfolgreichsten Online-S... Mehr anzeigen

 • Gesponsert

Senior Data Engineer (m/w/d) - datasolut GmbH

datasolut GmbHCologne, Germany

Unser Team begleitet Kunden auf der gesamten Reise der KI-Transformation und entwickelt die besten Datenlösungen für Hidden Champions und Konzerne in Deutschland.Wir suchen Unterstützung im Bereich... Mehr anzeigen

 • Gesponsert

Azure Data Engineer (m/w/d)

netgo group GmbHKöln, Nordrhein-Westfalen, Deutschland

Werde auch du "part of netgo group" - einem der größten IT-Dienstleister Deutschlands.Mitarbeiter*innen an zahlreichen Standorten in ganz Deutschland erwarten dich als neues Teammitglied.Dein Fokus... Mehr anzeigen

 • Gesponsert

Spezialist Daten & Automatisierung - Einkauf (m/w/d)

Lidl Stiftung & Co KGKöln, DE

Für mehr Effizienz in unseren Lidl Landesgesellschaften.Analyse und Optimierung bestehender Einkaufsprozesse in unseren Landesgesellschaften, mit dem Ziel, manuelle Aufwände zu reduzieren und Effiz... Mehr anzeigen

 • Gesponsert

Datenbankmanager (m/w/d) SQL - arbeit

DISBonn, Nordrhein-Westfalen, DE

Du arbeitest gern mit Datenbanken und fühlst dich in der IT‑Welt zu Hause? Du möchtest dein technisches Know‑how in einem professionellen Umfeld einbringen und weiterentwickeln? Dann bietet sich be... Mehr anzeigen

 • Gesponsert

Data Engineer (m/w/d) Voll- oder Teilzeit

Kliemt ArbeitsrechtKöln, Nordrhein-Westfalen, DE

Arbeitsrecht ist eine der führenden und größten auf Arbeitsrecht spezialisierten Kanzleien Deutschlands mit Büros in Düsseldorf, Frankfurt am Main, Berlin, München, Hamburg und Köln.Mit rund 95 auf... Mehr anzeigen

Datenbankmanager (m/w/d) SQL

DISBonn, Nordrhein-Westfalen, DE

Du arbeitest gern mit Datenbanken und fühlst dich in der IT‑Welt zu Hause? Du möchtest dein technisches Know‑how in einem professionellen Umfeld einbringen und weiterentwickeln? Dann bietet sich be... Mehr anzeigen

 • Gesponsert

(Senior) Solution Engineer (m/w/d)

fulfillmenttoolsKöln, DE

Senior) Solution Engineer (m/w/d).Für unser (h)ausgegründetes Start-up mit Sitz in Köln suchen wir Dich! Sei beim Aufbau unseres Software-as-a Service-Geschäftsmodells dabei und gestalte mit uns di... Mehr anzeigen

 • Gesponsert

Technical Lead (m/w/d)

Tough Training GmbhEssen, DE

Als Technical Lead übernimmst du die technische Gesamtverantwortung für TOUGH.Du führst das gesamte Development-Team und stellst sicher, dass unsere Plattform und unsere Produkte technisch exzellen... Mehr anzeigen

 • Gesponsert

Senior Data Expert - Enterprise Data Platform (m/w/d)

DFMG Deutsche FunkturmLeverkusen, DE

Du möchtest hoch hinaus? Wir auch!.Bei der Deutschen Funkturm akquirieren, planen, bauen, betreiben und vermarkten wir in Deutschland ein Portfolio von mehr als 36.Funkstandorten für Mobilfunk, Ric... Mehr anzeigen