KommLink

Receive alerts when this company posts new jobs.

Similar Jobs

Job Details

Big Data Consultant - June 2018

at KommLink

Posted: 4/5/2019
Job Reference #: 10985050
Keywords:

Job Description

For one of our clients we are looking for a Big Data Developer/Consultant

Tätigkeiten:
  • Entwicklung von (Big) Data ETL Pipelines:
    • Daten Extraktion (aus Oracle Data Warehouse und Hadoop Cluster)
    • Data Cleansing
    • Quality Check
    • Aggregation
    • Visualisierung
  • Entwicklung von SQL Statements auf Basis spezifischer Anforderungen und Speicherung der Ergebnisse in SQL Datenbanken
  • Prüfung der Ergebnisqualität
  • Fachliche Beratung bei der Durchführung von Data Science Projekten
  • Fachliche Beratung des Teams bei der Weiterentwicklung der ETL Prozesse
  • Fachliche des Teams beim Einstieg in die Nutzung von Amazon Web Services (AWS)
Angeforderte Fähigkeiten:
  • Sehr gute Kenntnisse von SQL
  • Kenntnisse im Umgang mit Versionierungstools (Git)
  • Mindestens 1 Jahr Erfahrung mit Big Data Technologien insb. Spark (Scala + PySpark), Yarn, Hive, Hadoop
  • Gute Kenntnisse in der Arbeit mit AWS Services, insb. EMR, EC2, S3
  • Vorteilhaft sind Kenntnisse in Scala und Java
  • Kenntnisse im Umgang mit DataScience-Frameworks: z. B. Python (pandas, Sci-kit Learn)
  • Sicher in Linux und Scripting mit bash und Python
  • Vorteilhaft sind Kenntnisse mit ML-frameworks (tensorflow, keras, etc)
  • Gute Kommunikationsfähigkeiten in Deutsch und Englisch
Start: ASAP
Location: Munich
Duration: 6 months++