Data engineer

Nationale-NederlandenRotterdamHybridFull-time4 days ago

NN zoekt een Data engineer om data pipelines te bouwen en data om te zetten in bruikbare informatie binnen het Life&Pensions Data Platform. Je werkt met Microsoft Azure-technologie zoals Azure Data Factory en Azure Databricks, programmeert in Python/PySpark en SQL en werkt samen met DevOps- en DataOps-engineers. Vereist zijn Azure-kennis, ervaring met data engineering en vloeiend Nederlands.

What you'll do

Continue implementatie en verbetering van (nieuwe) data pipelines
Diverse soorten en formaten data transformeren naar bruikbare informatie
Samenwerken met collega DataOps engineers voor automatiseren van pipelines
Controle frameworks inrichten waarmee de kwaliteit en integriteit van de data aangetoond wordt
Data ophalen, catalogiseren en historiseren
Kwaliteit en integriteit van brondata controleren en borgen
Meedenken hoe gebruikers data zo simpel mogelijk uit het platform halen
Generieke oplossingen bedenken samen met de LPDAP engineering community

What you need

Must-have

AzurePythonPySparkSQLAzure Data FactoryAzure DatabricksAzure DevOpsGit

Nice-to-have

Azure certificering DP203Azure certificering AZ104Software engineering

Soft skills

AnalytischAssertiefCan do mentaliteitAutomation-first mentaliteitKritische blikSamenwerkenKennis delen

Data engineerFinancial ServicesAzurePythonPySparkSQLDatabricksData pipelinesAgileDevOps

/What you'll do

/What you need

Must-have

Nice-to-have

Soft skills

What you'll do

What you need