Data Engineer (w/m/d)

Arbeitsort

Baar (Zug)

Ihr Aufgabengebiet

• Entwicklung und Pflege von AWS-basierten Datenpipelines inklusive Lambda-Verarbeitungsjobs und Ingestion-Workflows
• Anpassung bestehender Lambda-Funktionen und Verarbeitungslogik zur Unterstützung neuer Datenverarbeitungsfunktionen
• Refactoring von Pipelines zur zuverlässigen Integration und Verarbeitung externer Datenquellen
• Implementierung automatisierter Validierungsprüfungen zur Sicherstellung von Datenqualität und Vollständigkeit
• Design optimierter Datenmodelle im Iceberg-Format für strukturierte Silver- und Gold-Datenschichten
• Optimierung von SQL-Abfragen und Schemas zur Einhaltung definierter Performance-Vorgaben
• Unterstützung von Data-Governance-Prozessen durch Validierungsregeln und Monitoring
• Dokumentation von Pipelines und Transformationen sowie Pflege von versioniertem Code in Git-Repositories

Was Sie mitbringen

• Fundierte Python-Entwicklungserfahrung mit Test-Driven Development
• Solide SQL-Kenntnisse für effizientes Schema-Design und strukturierte Datensätze
• Praktische Erfahrung mit AWS-Datenplattform-Services wie Athena, Lambda, Aurora, EventBridge, Glue und SageMaker
• Erfahrung im Design, Aufbau und Betrieb skalierbarer Datenpipelines
• Erfahrung mit automatisierter Datenvalidierung und Qualitätssicherung
• Klare Kommunikationsfähigkeit gegenüber Engineering-, Produkt- und Daten-Stakeholdern
• Eigenverantwortliche Umsetzung von Features von der Konzeption bis zur Produktion
• Ausgeprägte analytische und lösungsorientierte Denkweise
• Von Vorteil: Kenntnisse in Softwarearchitektur und Design Patterns
• Von Vorteil: Erfahrung mit Orchestrierungstools wie Airflow
• Von Vorteil: Vertrautheit mit Data-Quality-Frameworks wie Pandera oder Great Expectations
• Von Vorteil: Erfahrung mit komplexen analytischen Datenmodellen

Was Sie erwartet

• Attraktives Gehalt mit leistungsbezogenen Boni
• Weiterbildungs- und Entwicklungsmöglichkeiten
• Dynamisches und kollaboratives Arbeitsumfeld

Zum Klienten

Weitere Informationen zum Klienten und laufend neue Jobchancen erhalten Sie nach Ihrer Anmeldung und dem Onboarding per Mail oder online. Wir freuen uns, Sie persönlich bei unserem Klienten vorstellen zu dürfen!