43148
Die Schwarz IT betreut die gesamte digitale Infrastruktur und alle Softwarelösungen der Unternehmen der Schwarz Gruppe. Sie ist somit für Auswahl, Bereitstellung und Betrieb sowie Weiterentwicklung von IT-Infrastrukturen, IT-Plattformen und Business-Anwendungen zuständig. Um die Fachbereiche durch IT-Lösungen optimal bei deren Geschäftsprozessen zu unterstützen, nimmt die Schwarz IT die Anforderungen der Fachbereiche in Beratungsgesprächen auf und erarbeitet gemeinsam mit diesen professionelle und leistungsfähige IT-Lösungen.
Deine Aufgaben
- Entwickle und betreibe Datenprodukte und Datenflüsse im zentralen Data Lakehouse für Berichte, Analysen und Machine Learning und stelle deren Qualität und Zukunftsfähigkeit sicher
- Optimiere die Performance von Data Engineering Lösungen, garantiere deren Skalierbarkeit und entwickle die Data Lakehouse Architektur weiter
- Nutze deine Fähigkeiten der Softwareentwicklung und setze neue Standards für die Entwicklung und das Deployment
- Stelle Datenqualität und -konsistenz durch Datenvalidierung und -bereinigung sicher
- Überwache und behebe Fehler in der Dateninfrastruktur, um Ausfallzeiten zu minimieren
- Implementiere Datensicherheits- und Datenschutzmaßnahmen
- Arbeite in interdisziplinären agilen Teams mit Data Engineers, Product Ownern und Fachbereichen
Dein Profil
- Mehrjährige Erfahrung in den Bereichen Data Engineering, ETL-Entwicklung, Software Engineering oder Big Data
- Sehr gute Kenntnisse im Softwareentwicklungszyklus und dessen Best Practices (z.B. CI/CD, DevOps, Testing)
- Sehr gute Kenntnisse in Spark und Python
- Begeisterung für das Thema Data Engineering und Softwareentwicklung
- Großes Interesse an Konzepten wie Data Mesh und Data Lakehouses
- Erfahrung im Bereich Cloud, Containerisierung, Big Data und Streaming, idealerweise mit MS Azure, Kubernetes, Spark und Kafka
- Analytische Fähigkeiten, agiles Mindset, Selbständigkeit und Hands-on-Mentalität
- Sehr gute Englischkenntnisse, bevorzugt gute Deutschkenntnisse
- Abgeschlossenes Studium der Informatik oder talentierter Seiteneinsteiger
Senior Data Engineer (m/w/d)