INTERIM Data Engineer - PySpark ETL
- Renommiertes Unternehmen in Stuttgart
- pyspark, bash, terraform, freelance, freiberufler
Start: ASAP
Laufzeit: 3 Monate+ Auslastung: 4 Tage pro Woche Einsatzort: Remote Einarbeitung: Die ersten 2 Wochen vor Ort in Stuttgart Anschließend: Remote-Tätigkeit AUFGABENGEBIET:- Entwicklung und Weiterentwicklung von ETL-Prozessen zur Verarbeitung von Daten Umsetzung und Optimierung von Batch-Datenverarbeitungen mit PySpark
- Modernisierung bestehender Datenverarbeitungs- und ETL-Lösungen Entwicklung und Anpassung von Datenmodellen Arbeit mit Apache Spark innerhalb einer AWS EKS on EC2 Infrastruktur
- Optimierung bestehender Datenpipelines hinsichtlich Performance, Stabilität und Wartbarkeit
- Unterstützung bei der Weiterentwicklung der bestehenden Data-Engineering-Landschaft Monitoring und Logging von PySpark-Anwendungen ANFORDERUNGSPROFIL:
- Fundierte praktische Erfahrung mit PySpark, insbesondere im Bereich der Batch-Datenverarbeitung
- Erfahrung mit Apache Spark und Spark-Infrastrukturen auf AWSEKSonEC2
- Sehr gute Kenntnisse in Python
- Sehr gute Kenntnisse in SQL Erfahrung mit Datenmodellen
- Fundierte Erfahrung in der Entwicklung und Umsetzung von ETL-Prozessen
- Erfahrung in der Modernisierung bestehender Datenverarbeitungslösunge VERGÜTUNGSPAKET:
- Frühestmöglicher Starttermin
- Verfügbarkeit pro Woche
- Aktuelle Auslastung
- Stundensatz (Remote / Vor Ort)
- Aktuelles Profil / CV
- Kurze Einschätzung Ihrer Passgenauigkeit
Klingt das Projekt interessant?
Bitte senden Sie mir folgende Informationen:Empfohlene Jobs
Studentische Hilfskräfte für den Bereich Hygrothermik
Die Fraunhofer-Gesellschaft () betreibt in Deutschland derzeit 74 Institute und Forschungseinrichtungen und ist die weltweit führende Organisation für anwendungsorientierte Forschung. Hier sor…
IT Projektmanager Public Sector (all genders)
Das erwartet dich bei uns ~ Mitarbeit bei der Digitalisierung der öffentlichen Verwaltung in abwechslungsreichen Projekten mit IT-Bezug ~ Leitung, Planung, Steuerung und Dokumentation von Projekt…
SAP Project System (PS) Consultant (m/w/d)
Job DescriptionRole - Principal ConsultantTechnology - SAP PSLocation - GermanyCompensation - Competitive (including bonus)Job DescriptionToday, the corporate landscape is dynamic, and the world ahead…
Planer / Projektleiter MSR-Technik (m/w/d)
Über uns Exzellente technische Gebäudeausrüstung – für das Leben und Arbeiten von Morgen. Werte schaffen – für die Ziele von heute und die Ansprüche von morgen. Mit diesem Anspruch entwickeln wi…
Visiting Associate - AI Tech Consulting (all genders) - BCG Platinion - Stuttgart
Visiting Associate IT Consulting (all genders) - BCG Platinion - Stuttgart, Germany As Visiting Associate (allgenders) at BCG Platinion you'll support our consultingteam within up to three month…
Entwicklungsingenieur Fahrwerk (m/w/d)
Diese Herausforderungen übernimmst du * Erarbeiten von konzeptionellen Lösungen für komplexe Baugruppen und komplette Fahrwerksmodule und dessen Komponenten * Umsetzung der konstruktiven Lösungen in C…
Projektleiter MSR (m/w/d) Stuttgart
wettbewerbsfähiges Gehalt von ca. 70.000 € - Firmenwagen inkl. Privatnutzung - Homeoffice-Option - Urlaubs- und Weihnachtsgeld Gebiet: Stuttgart Arbeitgeberbeschreibung: Gebäudeautomation ist …
Cyber Security Expert (m/f/d)
Cyber Security Expert (m/f/d) Stellenbeschreibung CGI ist einer der weltgrößten Hidden Champions unter den IT-Dienstleistern. Von den Standorten Stuttgart und Leinfelden-Echterdingen aus betreu…
Senior Manager Transformation - Data Management & Artikeldatenmodell (m/w/d) in Neckarsulm, Lidl
Deine Aufgaben Du bist der Architekt unseres 'Single Source of Truth' und stellst die methodischen Weichen für unser zukünftiges Artikeldatenmodell im Einkauf. … konkret heißt das: Definition…
Teamleiter Zahlungsverkehr / Payment (m/w/d)
Ihre Aufgaben: Fachliche und organisatorische Verantwortung für den Bereich Zahlungsverkehr einschließlich SEPA-, Auslands- und Instant-Payment-Prozessen Steuerung und Weiterentwicklung beste…