Senior Data Engineer - Bad Friedrichshall (m/w/x)
- Erfahrung: Mehrjährige fundierte Erfahrung im Data Engineering, Big Data Umfeld oder Software Engineering, idealerweise in einer Senior-Rolle.
- Cloud- & Streaming-Expertise: Du bringst fundierte Kenntnisse in Cloud-Infrastrukturen mit (Google Cloud Platform) sowie tiefe Erfahrung in der Verarbeitung von Echtzeitdaten mit Apache Kafka.
- Tech-Stack: Sehr gute Kenntnisse in Python und Spark. Du bist sicher im Umgang mit Containerisierung (Kubernetes/Docker).
- Orchestrierung & Transformation: Erfahrung mit Tools wie Apache Airflow und Transformationen via dbt ist von großem Vorteil.
- Software Best Practices: Du bist sicher im Umgang mit dem Softwareentwicklungszyklus, Versionsverwaltung (Git) sowie DevOps-Prinzipien und automatisierten Tests.
- Konzeptionelle Stärke: Du begeisterst dich für moderne Architektur-Konzepte wie Data Lakehouses und Data Mesh und hast Freude daran, technologische Standards aktiv mitzugestalten.
- Persönlichkeit: Analytisches Denkvermögen, ein agiles Mindset sowie eine eigenverantwortliche und lösungsorientierte Arbeitsweise.
- Sprachen: Sehr gute Englischkenntnisse; Deutschkenntnisse sind bevorzugt.
- Data Product Engineering: Du konzipierst, entwickelst und betreibst hochperformante Batch- und Streaming-Datenflüsse in unserem zentralen Google Cloud Data Lakehouse für Analytics- und Machine-Learning-Anwendungsfälle.
- Architektur & Skalierung: Du optimierst die Cloud-Architektur (GCP), stellst die Skalierbarkeit unserer Lösungen sicher und entwickelst unsere Standards für die Datenverarbeitung in Echtzeit und Batch weiter.
- Software Excellence: Du wendest moderne Software-Engineering-Methoden an und setzt neue Maßstäbe für CI/CD, automatisiertes Testing und Deployment-Prozesse in der Datenorganisation.
- Framework-Mitgestaltung: Du unterstützt die Weiterentwicklung unserer zentralen Orchestrierungs-Tools (auf Basis von Airflow und dbt), um die Effizienz und Qualität der Datenbereitstellung unternehmensweit zu steigern.
- Datenqualität & Governance: Du implementierst automatisierte Validierungsprozesse (z. B. für Streaming-Events) und stellst die Einhaltung von Sicherheits- und Datenschutzstandards sicher.
- Agile Kollaboration: Du arbeitest in interdisziplinären Teams eng mit Product Ownern, Data Scientists und Fachbereichen zusammen, um komplexe Business-Anforderungen in technische Lösungen zu übersetzen.
Einleitungstext
Schwarz Digits schafft das technologische Fundament für digitale Entscheidungsfreiheit in Europa. Als IT- und Digitalsparte der Schwarz Gruppe entwickeln und verantworten wir einerseits die IT-Infrastrukturen für die Handelssparten Lidl und Kaufland sowie die Schwarz Produktion und PreZero. Gleichzeitig agieren wir als unabhängiger Anbieter am externen Markt, um Unternehmen in ganz Europa bei ihrer digitalen Transformation zu unterstützen. Unsere Kernleistungen bündeln wir in den Bereichen Cloud, Cyber Security, Data & AI, Communication und Workspace. Trage auch du zur digitalen Entscheidungsfreiheit in Europa bei.
Bei uns arbeitest du an der Schnittstelle zwischen Agilität und Sicherheit: Du profitierst von den schnellen Entscheidungswegen, genießt echte Gestaltungsspielräume in deinen Projekten und baust dabei auf das stabile Fundament der Schwarz Gruppe.
Deine Aufgaben
Empfohlene Jobs
Assistenz der Logistikleitung (m/w/d) ab jetzt
+++ DIREKTVERMITTLUNG in Festanstellung (keine Zeitarbeit) / Vermittlungsgutscheine (AVGS) werden akzeptiert +++ Bei Fragen einfach unverbindlich anrufen: 03048479484 oder einen Rückruf vereinbaren…
Lagerhelfer (m/w/d)
Mit Überblick und Organisation – Ihre Stärke zählt im Lager! Für unseren renommierten Kunden aus dem Gesundheitswesen suchen wir ab sofort zuverlässige Lagerhelfer (m/w/d) für die Modulversorgun…
IT Product Owner (m/w/d) Cloud Backend Service
Du hast große Ziele und willst etwas Sinnstiftendes machen? Dann bist du bei uns genau richtig! Es ist unsere Vision, dass alle Menschen in Deutschland gesünder leben können! Wir übernehmen eine wic…
Sales Manager (m/w/d) Cyber Security and Cryptography - IT, Technischer Vertrieb
Job ID: R0313878 Ihre Mission als Sales Manager (m/w/d) Cyber Security and Cryptography: Identifikation und Entwicklung neuer Geschäftspotentiale im Bereich Cyber Security und Kryptologie, mit F…
Praktikum ERP (w/m/d)
Vielfältige Mandate, vielfältige Chancen: Tauche ein in die Beratung von Kund:innen aus verschiedenen Branchen und lerne, wie moderne ERP-Systeme Unternehmen dabei unterstützen, ihre Prozesse effizi…
Auslieferungsfahrer/ Flyerverteiler (m/w/d) | befristet do it Logistic & Promotion
Stellenbeschreibung Auslieferungsfahrer (m/w/d) für Flyervertrieb in Stuttgart und Umgebung, Teilzeit oder Vollzeit, befristet. Ihre Aufgaben: Auslieferung und Verteilung von Werbemitteln im…
Manager:in Technology GRC (m/w/d)
Eintrittsdatum nächstmöglicher Zeitpunkt Gestalte deine Zukunft mit uns – Übernimm spannende Aufgaben und wachse an deinen Herausforderungen Du übernimmst und verantwortest Transformationsbe…
Anlagenmechaniker (m/w/d) (Raff Sanitär GmbH)
Über uns 1993 gründete Richard Harpin HomeServe in den UK. Er leitete und prägte das Business mehr als 30 Jahre lang – bis Anfang 2023 – als CEO. Unter seiner Führung entwickelte sich das Unternehmen…
Facharzt für Chirurgie (m/w/d)
Ihre Aufgaben: Tätigkeit auf der chirurgischen Station sowie im OP mit eigenverantwortlicher Patientenversorgung Eigenständige Durchführung operativer Eingriffe im Rahmen des Leistungsspektru…
Referendar (Anwalts-/Wahlstation) (m/w/d) Stuttgart
Jobbeschreibung Perspektiven und Orientierung sind Ihnen wichtig. Sie möchten Unterstützung, um Ihre Ziele zu erreichen und die passenden Signale, um die Richtung zu wählen. Bei Luther können Sie Ih…