ETL-Entwickler
ADNOVA Software und Services GmbH
Cologne , DE
Hauptaufgaben
- Entwurf, Entwicklung und kontinuierliche Optimierung der Datenarchitektur und Aufbau eines Data Lakes, um eine effiziente Datenverwaltung und -nutzung zu unterstützen.
- Konzeption und Implementierung von robusten ETL- und ELT-Prozessen zur Integration von Daten aus diversen Quellen in eine konsolidierte Datenplattform und den Data Lake.
- Gewährleistung hoher Datenqualität und -integrität in Datenbanken und Data Lakes durch Implementierung von Standards und Verfahren zur Datenvalidierung und -bereinigung.
- Enge Zusammenarbeit mit Data Scientists, Analysten und Geschäftsbereichen, um Daten aus dem Data Lake in nutzbare Formate für Analysen, maschinelles Lernen und BI aufzubereiten.
- Überwachung der Systemleistung, Durchführung von Fehleranalysen und Optimierung der Datenverarbeitungsinfrastruktur für maximale Effizienz und Skalierbarkeit.
Anforderungen
- Abgeschlossene Ausbildung oder abgeschlossenes Studium in Informatik, Ingenieurwesen oder einem verwandten Bereich.
- Praktische Erfahrung in der Arbeit mit relationalen und NoSQL-Datenbanktechnologien sowie fundierte Kenntnisse in der Entwicklung, Implementierung und Verwaltung eines Data Lakes.
- Umfassende Programmierkenntnisse in SQL und Python.
- Praktische Erfahrung mit Big Data-Technologien und -Plattformen (z.B. Hadoop, Spark, Kafka) und mit Cloud-Datenlösungen (z.B. AWS).
- Starke analytische Fähigkeiten und die Fähigkeit, komplexe technische Probleme zu lösen und effektive Lösungsstrategien zu entwickeln.
- Ausgezeichnete Kommunikationsfähigkeiten und die Fähigkeit, technische Konzepte und Lösungen effektiv mit technischen und nicht-technischen Stakeholdern zu kommunizieren.
- Teamorientierte Arbeitsweise, Flexibilität und die Bereitschaft, in einem dynamischen und sich schnell entwickelnden Umfeld zu arbeiten.
- Fließende Deutschkenntnisse werden vorausgesetzt, gute Englischkenntnisse sind wünschenswert.
Vor 30+ Tagen