Jobsuche > Potsdam > Senior data engineer

Senior Engineer Data Infrastructure (w/m/d)

ING Deutschland
Potsdam
Diese Stelle ist in deinem Land nicht verfügbar.

Senior Engineer Data Infrastructure (w / m / d) am Standort Berlin Warum zuschauen, wenn man aktiv mitgestalten kann? Dein Motto lautet Besser geht's immer und Dein Herz schlägt für innovative Technologien und gute Teamarbeit?

Du übernimmst gerne Verantwortung und willst nicht nur Datenpipelines, sondern auch den Erfolg Deines agilen Teams maßgeblich mitgestalten?

Und das alles am liebsten in einem Unternehmen, in dem die Mitarbeiter*innen im Mittelpunkt stehen? In unserem IT Chapter ist Dein Platz frei - bewirb Dich ganz einfach mit Deinem Lebenslauf! Deine Aufgaben Als Senior Data Infrastructure Engineer bist Du hands-on und federführend für die Verwaltung, Erstellung, Konzeption und Implementierung von Cloud- und Dateninfrastrukturen verantwortlich.

Ganz konkret : Du integrierst neue Datenquellen nahtlos in Snowflake, stellst die Zuverlässigkeit und Effizienz unserer Datenimporte sicher, verwaltest und optimierst unsere bestehenden Datenquellen.

Du sorgst dabei für eine effiziente Datenverarbeitung und bringst Dein Fachwissen in die Wartung und Optimierung des Kubernetes-Clusters ein.

Kafka, Airflow, Terraform und Helm gehören hier zu Deinem Tech-Stack.Deine Expertise in Python kommt zum Einsatz, wenn Du in Airflow DAGs (Directed Acyclic Graphs) erstellst und aktualisierst.

Außerdem kümmerst Du Dich um die Aktualisierung der Verarbeitungslogik, insbesondere für das Streaming von Change Data Capture, und sorgst so dafür, dass unsere Datenverarbeitung jederzeit up to date ist.

Zu Deinen operativen Aufgaben gehört auch die Verwaltung des Kafka-Clusters für die Verarbeitung von Streaming-Daten und Du stellst sicher, dass es zuverlässig läuft, skalierbar und performant ist.

Wir planen ein Infrastruktur-Migrationsprojekt (Cloud-zu-Cloud), das auch Änderungen am Technologie-Stack beinhaltet - auch hier stehst Du uns mit Rat und Tat zur Seite, sodass wir währenddessen unsere Team-Service-Level-Agreements geschmeidig erfüllen.

Nicht zuletzt überwachst und optimierst Du unsere CI / CD-Pipelines in Azure DevOps und spielst dabei eine entscheidende Rolle in der kontinuierlichen Verbesserung und effizienten Bereitstellung unserer Dateninfrastruktur.

Dein Profil Mehrjährige Erfahrung im Aufbau, in der Pflege und der Überwachung von DatenpipelinesHochschulabschluss in Informatik, Ingenieurwesen oder einem verwandten Bereich ist ein PlusGute Kenntnisse in mindestens einer Programmiersprache, z.

B. Python und SQLSehr gutes Verständnis von Kubernetes und der zugehörigen Cloud-InfrastrukturProaktives und optimierungsorientiertes Vorgehen bezüglich der verwalteten Dienste / Codes und der TeamprozesseErfahrung in der Planung und Durchführung von Cloud-Migrationen von Vorteil, inkl.

Definition von Anforderungen, Abstimmung mit Stakeholdern, Gestaltung eines optimalen Setups, das die Bedürfnisse der Stakeholder erfülltVertraut mit Themen der Data Governance und hoher Qualitätsanspruch hinsichtlich der Sicherheit der InfrastrukturIdealerweise Erfahrung mit verteilten Systemen wie Kafka, Infrastructure as Code (IaC) und CI / CD-Pipelines sowie mit Airflow und SnowflakeNeugierig und lernwilligDeutsch- und Englischkenntnisse in Wort und Schrift Freu Dich auf zahlreiche Benefits Betriebliche Altersvorsorge, Vermögenswirksame Leistungen, kostenloses Deutschlandticket & Bike LeasING, BetriebsrestaurantMobiles Arbeiten je nach Position und Abteilung im Rahmen von betrieblichen, regulatorischen und gesetzlichen Anforderungen, individuelle Arbeitszeitmodelle, Sabbatical, Bezuschussung von Pflege- & KinderbetreuungskostenEigene Budgets für persönliche Entwicklung und Gesundheit plus persönliches Ausstattungsbudget für Deinen mobilen ArbeitsplatzJetzt bewerben : ing.de / karriere

Vor 20 Stunden
Ähnliche Stellenangebote
Gesponsert
Deutsche Bank
Berlin, Berlin

As a Data Engineer (f/m/x) you will be part of product team, responsible for all steps of bringing high-quality data to end users: ETL processes, data analysis and preparation, platform development and evolution. Build the infrastructure required for optimal extraction, transformation and data loadi...

Gesponsert
msg systems ag
Berlin, Berlin

Durch unsere digitalen Lösungen aus den Bereichen MDM, BI, Analytics, Big Data sowie IoT gelingt es Unternehmen aus Daten relevantes Wissen zu generieren, Prozesse auf smarte Weise zu digitalisieren und somit die Welt von Morgen mit neuen Produkten zu begeistern. Unser Geschäftsbereich New Data Solu...

Gesponsert
Deutsche Bank
Berlin, Berlin

As Senior Data Engineer you are the gatekeeper for all data that is used within the function for analytical purposes. Als Senior Data Engineer sind Sie der Gatekeeper für alle Daten, die innerhalb der Funktion für analytische Zwecke verwendet werden. You are defining and building data pipelines and ...

Procure Ai
DE
Homeoffice

Combine data engineering with backend development to transform ingested data into our procurement data graph. Senior Data Engineer (all genders). You are experienced with different Database and Data Warehouse concepts and have good understanding of data modelling approaches. You will join a team of ...

0010 Deutsche Bank Aktiengesellschaft
Berlin, Berlin

As a Senior DevOps Engineer (f/m/x) you'll be part of the team engineering distributed systems and automating clusters management. We have a strong focus on promoting technical excellence – our engineers work at the forefront of financial services innovation using cutting-edge technologies. We are c...

BRL Risk Consulting GmbH & Co. KG
Berlin, Berlin

Du evaluierst verschiedene Methoden und Tools für Data Science und Data-Mining. Du hast mindestens 4-5 Jahre Berufserfahrung im Bereich Data Engineering. Data Science & Artificial Intelligence (DSA). AlsData Scientist mit dem Fokus auf Datenbanken spielst Du eine entscheidendeRolle bei der Gesta...

ClimatePartner
Berlin, Berlin

You collaborate within cross-functional teams, including data analysts, software engineers, and business stakeholders across the company, to gather data requirements and translate them into effective technical solutions. You have at least 7 years of experience in a DevOps/Cloud role (as a Data Engin...

Computacenter
Berlin, Berlin

In der Rolle des Data Engineers bist Du mit Deinem Werkzeugkasten dafür verantwortlich, die Daten von der Quelle bis zum Ziel sicher in die Plattform zu transportieren und sie für den Analyseprozess entsprechend aufzubereiten oder gar mitzugestalten. Bei der Umsetzung im Projekt bist Du im Bereich D...

Deutsche Bank
Berlin, Berlin

Work as a senior developer for developing analytics algorithms against a large data sets residing on data lakes and/or on Google Cloud. Work as a senior developer for various data sourcing in Hadoop and/or Google Cloud. Proficient in Hadoop, Python, Spark, SQL, Unix, Pentaho, Hive, DataFlow, Cloupos...

Bring! Labs AG
Berlin, Berlin

Strong Software Engineering skills and technical expertise with machine learning, data mining, and data analytics. Hi there 👋, we are looking for an Data Science engineer to join us in our Berlin office. You will use various methods to transform raw data into useful data systems. For this position w...