View all jobsBig Data Consultant - June 2018
Munich, GermanyFor one of our clients we are looking for a Big Data Developer/Consultant
Tätigkeiten:
- Entwicklung von (Big) Data ETL Pipelines:
- Daten Extraktion (aus Oracle Data Warehouse und Hadoop Cluster)
- Data Cleansing
- Quality Check
- Aggregation
- Visualisierung
- Entwicklung von SQL Statements auf Basis spezifischer Anforderungen und Speicherung der Ergebnisse in SQL Datenbanken
- Prüfung der Ergebnisqualität
- Fachliche Beratung bei der Durchführung von Data Science Projekten
- Fachliche Beratung des Teams bei der Weiterentwicklung der ETL Prozesse
- Fachliche des Teams beim Einstieg in die Nutzung von Amazon Web Services (AWS)
Angeforderte Fähigkeiten:
- Sehr gute Kenntnisse von SQL
- Kenntnisse im Umgang mit Versionierungstools (Git)
- Mindestens 1 Jahr Erfahrung mit Big Data Technologien insb. Spark (Scala + PySpark), Yarn, Hive, Hadoop
- Gute Kenntnisse in der Arbeit mit AWS Services, insb. EMR, EC2, S3
- Vorteilhaft sind Kenntnisse in Scala und Java
- Kenntnisse im Umgang mit DataScience-Frameworks: z. B. Python (pandas, Sci-kit Learn)
- Sicher in Linux und Scripting mit bash und Python
- Vorteilhaft sind Kenntnisse mit ML-frameworks (tensorflow, keras, etc)
- Gute Kommunikationsfähigkeiten in Deutsch und Englisch
Start: ASAP
Location: Munich
Duration: 6 months++