Für einen unserer Großkunden suchen wir derzeit einen freiberuflichen Mitarbeiter, der die nachfolgenden Anforderungen erfüllt:

Ihre Aufgaben:

Erstellung von Big Data Prototypen für die Datenintegration, Datenhaltung, Daten-Aufbereitung Datenanalyse und Datennutzung im Projekt
Technische Data Lake / DWH Architektur mit dem Schwerpunkt: Analyse großerDatenmengen mit Hilfe von Spark
Erarbeitung der Mehrschicht-Architektur des Data Lakes (landing, structured, export, usecase-Zonen)
Entwicklung und Optimierung von ETL-Routinen im Amazon Redshift und Postsgres Umfeld. Entwicklung komplexer SQL-Statements.
Umang mit AWS Services: S3, DynamoDB, Step Functions, EMR, AWS Glue, Athena, Lambda, RDS…
Softwareentwicklung mit Scala, Python

Ihr Profil:

6 Jahre Architekturverantwortung im Bereich Data-Lake
6 Jahre Erfahrung Erfahrung mit energiewirtschaftlichen Daten
6 Jahre Erfahrung Langjährige Umsetzung von Anforderungen in den Sprachen: Scala, Python, SQL, Java
Mind. 3 Jahre Erfahrung Tiefgehende Kenntnis der AWS-Services rund um Datenhaltung und Daten-management (S3, DynamoDB, Step Functions, EMR, AWS Glue, Athena, Lambda, RDS)
Mind. 6 Jahre Erfahrung Tiefgehende Kenntnisse in Datenbankentwicklung mit großen Datenmengen (BigData)
Mind. 3 Jahre Erfahrung Modellierung- und Entwicklungskompetenz für ETL Strecken
Mind. 3 Jahre Erfahrung im Aufbau von Data-Lake Architekturen
Mind. 3 Jahre Erfahrung Um komplexe Themen und Zusammenhänge proaktiv mit dem Projektteam zur Lösungsfindung zu bringen und bestehende Pro-zesse und Strukturen kritisch zu hinterfragen und zu optimieren.
Mindestens 3 Jahre Erfahrung in der Entwicklung von Infrastructure as Code: Terraform, AWS CDK, CloudFormation
Mindestens 3 Jahre Erfahrung in der Testautomation mit PyTest und ScalaTest

Rahmenparameter:

Einsatzort: Remote und nach absprache in Frankfurt am Main
Laufzeit: 01.01.2026 - 31.12.2026
Auslastung: Vollauslastung

Ihr GECO-Ansprechpartner freut sich auf Ihre Kontaktaufnahme und über die Zusendung Ihrer aussagekräftigen Projekthistorie sowie Ihrer Honorarvorstellung.

Testautomation Jobs

Senior Data Lake Architect (m/w/d) Remote und Frankfurt am Main / ZCTA237415

Testautomation Jobs

Senior Data Lake Architect (m/w/d) Remote und Frankfurt am Main / ZCTA237415