Big Data Engineer

, ,

Vacature ID                         WTS1072

Dienstverband:                  Inhuur

Locatie:                                Den Haag

Aantal uren per week:      40

Duur van de opdracht:     3 maanden met optie tot verlenging

Functieomschrijving:

Voor een toonaangevend bedrijf in de logistieke sector zoeken wij een medior tot senior Big Data Engineer.

Als Big Data Engineer ben je voornamelijk verantwoordelijk voor het ontsluiten van complexe databronnen naar een datalake. Dit met als doel om data beschikbaar te maken voor analytics en machine learning. Hiervoor gebruiken zij de nieuwste AWS technologieën.

Functie eisen:

  • WO-opleiding (bijvoorkeur MSc of meer) in STEM gerelateerde studies;
  • Team-player;
  • Bekend met agile methodiek;
  • Technologie-kennis:
    • 3 jaar + ervaring met data-engineering.
    • Ervaring met automation en CICD tooling (bv github, code-commit & Jenkins).
    • Kennis van container technologien zoals Docker & Kubernetes.
    • Database migratie technologie.
    • Goede beheersing van python en pyspark.
    • Ervaring met het orchestreren van data-pipelines.
  • AWS tooling:
    • Lambda.
    • Glue.
    • Redshift & RDS.
    • ECS.
    • Kinesis.
    • EC2.
    • DMS.
  • Kennis van netwerk infrastructuur en security best practices;
  • Ervaring met autorisatie en access management (bv kerberos, Oauth2, IAM etc.).