Für einen unserer Kunden suchen wir einen
freiberuflichen AWS Big Data Entwickler (w/m/d):
Projektbeschreibung:
Erweitern der AWS/BigData Umgebung bzgl. neuer BI-Anforderungen sowie Konzeption und Entwicklung spezieller und hoch komplexer Echtzeit-Datenverarbeitungen (Streamprocessing) in der AWS/BigData-Umgebung des zentralen Data Lakes für das Reporting und Echtzeit-Kampagnenmanagement.
Die Leistung umfasst alle Schritte im Entwicklungsprozess:
- Aufnahme und Analyse der Anforderungen an die AWS-Umgebungen (ICT und PROD) sowie der bestehenden Rahmenbedingungen (Netzwerkinfrastruktur, Securityvorgaben) und Software (ETL-Software: Batch und Streaming)
- Konzeption und Anpassen der AWS-Umgebungen (Netzwerkinfrastruktur, EKS, Redshift, Nifi)
- Entwicklung performance-optimierter ETL-Software für das Reporting und Echtzeit-Kampagnenmanagement mit Scala, Spark, Hive
- Test der angepassten AWS-Umgebungen sowie der entwickelten ETL-Software
- Bereitstellung der entwickelten Software (AWS-Umgebung, ETL-Software) auf die produktive BigData Umgebungen.
Kenntnisse:
- Java
- AWS Services
- Cloud Security
- Terraform
- Kafka
- NiFi
- Stream Processing
Projektstart: ASAP
Projektdauer: 2+ Monate
Einsatzort: München/ Remote