logo

View all jobs

Big Data Developer - October 2018

München, Germany
Für einen unserer Kunden sind wir auf der Suche nach einem Big Data Entwickler (m/w)

Tätigkeiten:
  • Beratung im Bereich der SoftwareEntwicklung
  • Beratung und Entwicklung von POCs in den Bereichen: Lokalisierung in Mobilfunknetzen, Clustering von Bewegungsmustern
  • Inhaltliche Planung und Durchführung von Produktivsetzungen von POCs
  • Beratung bei der Entwicklung und Übertragung von Algorithmen in Produktivsysteme
  • Beratung bei der Entwicklung, Validierung und Produktionalisierung von Data Science Applikationen mit den DataScientists und DevOPS
  • Beratung & Entwicklung von Big Data ETL Pipelines auf Basis gängiger AWS Services & Open Source Frameworks (Hadoop, Hive, Scala, Spark, EMR, Lambda)
    • Skalierbarkeit
    • Performance- und Kosteneffizienz
    • Erstellung von zugehörigen Monitoring & Alerting-Mechanismen
  • Prüfung der Ergebnisqualität anhand von Anwendungsfällen
  • Inhaltliche Planung und Durchführung von Einweisungen, Übergabe und Benutzung der erstellten Anwendungen
Angeforderte Erfahrung:
  • Mindestens 1 Jahr Erfahrung mit Big Data Technologien insb. Apache Spark (Scala + PySpark), Hadoop, AWS
  • Gute Kenntnisse von AWS Services, insb. EMR, EC2, S3, Lambda
  • Sehr gute Kenntnisse mit GIT, Jira, SSH, Confluence
  • Sehr gute Erfahrung in agiler Arbeitsweise (Pair Programming, Code Reviews, Arbeiten in Sprints, Dokumentation)
  • Sehr gute Teamfähigkeit
  • Gute Kenntnisse in Scala, Python (PySpark), SQL
  • Gute Erfahrung im Packaging und Deployment (insbes. Spark Jobs)
  • Erfahrung im Umgang mit großen Datenmengen, Skalierbarkeit
  • Erfahrung in Datenvisualisierung
  • Vorteilhaft sind Kenntnisse in Java, R, Jupyter Notebooks, R-Shiny, Geodaten, Umgang mit Datenbanksystemen
  • Sicherer Umgang in Linux und Scripting mit Bash und Python, REST Interfaces
  • Mehrjährige Berufserfahrung im IT-Bereich 
Srachkentnisse:
  • Englisch - fließend
  • Deutsch - fließend
Anfang: ASAP
Dauer: 2 Monate+
Einsatzort: München

 

Share This Job

Powered by