Big Data engineer

Voor een toonaangevende opdrachtgever actief in de logistieke sector zoeken wij een big data engineer. Als big data engineer ben je voornamelijk verantwoordelijk voor het ontsluiten van complexe databronnen naar een datalake. Dit met als doel om data beschikbaar te maken voor analytics en machine learning. Hiervoor gebruiken we de nieuwste AWS technologieën.

Waarom zou jij dat willen?

Je werkt in een gemotiveerd team van (Big) data specialisten die elke dag weer tot het uiterste willen gaan in hun zoektocht naar de beste en mooiste oplossing op het gebied van alles wat met date en informatie te maken heeft.
Primair ben je hierbij verantwoordelijk voor de logistieke opdrachtgever, maar is er daarnaast voldoende gelegenheid om (gevraagd en ongevraagd) mee te denken en en te kijken naar vraagstukken die bij andere opdrachtgevers spelen.
Op zoek dus naar een combinatie van gepassioneerde pioniers in jouw vakgebied en een mooie opdrachtgever? Dan is dit de opdracht voor jou

Hoe blijf jij bij?

• WO-opleiding (bij voorkeur MSc of vergelijkbaar) in STEM gerelateerde studies.

• Team-player

• Bekend met agile methodiek

Technologie-kennis

• 5 jaar + ervaring met data-en IT engineering

• Ervaring met automation en CICD tooling (bv github, CodeBuild/CodePipeline, code-commit & Jenkins)

• Kennis van container technologien zoals Docker & Kubernetes (geen pre)

• Ervaring met het industrialiseren van Machine Learning algoritmes

• Goede beheersing van python en pyspark (geen pre)

• Ervaring met het orchestreren van data-pipelines

• Infrastructure as code (IaaC) (CloudFormation, CDK)

AWS tooling

• Lambda

• Glue

• Redshift & RDS

• ECS

• Kinesis

• EC2

• DMS

• EMR

Kennis van netwerk infrastructuur en security best practices
Ervaring met autorisatie en access management (bv kerberos, Oauth2, IAM etc)