Data engineer

Wil jij ons helpen bij de verdere doorontwikkeling van ons eigen datawarehouse bij ODC Noord? En wil jij werken in een gedreven, gezellig en warm team? Lees dan snel verder en reageer!

De ontwikkeling van een datawarehouse is een teamsport. Als data engineer werk je samen met data-analisten, data scientists en businessanalisten aan het standaardiseren en optimaliseren van data exchange processen. Dit doe je binnen (een nog in ontwikkeling zijnde) analyse omgeving. Je realiseert data pipelines, gebruik makend van DBT (Data Build Tool) binnen onze PostgreSQL omgeving, waarbij je ook data transformeert en code structureert in repositories (GitLab). We werken veel met open source software, daarom zien we graag dat je niet bang bent om met de command line aan de slag te gaan.

Bij transformaties maak je gebruik van PostgreSQL (via DBT) en Python. Je zorgt dat data beschikbaar komt via nieuwe dataopslag in databases of via API’s. Veel voorkomende transformaties en scripts beheer je gestructureerd, je monitort periodieke scripts en zorgt dat deze up to date blijven zodat de benodigde data continu en stabiel beschikbaar is voor producten, analyses en dashboards.

Als data engineer binnen de afdeling Beleidsinformatie houd jij je daarnaast bezig met het functioneel ontwerp van ons eigen datawarehouse. Je kunt op conceptueel niveau denken en ontwerpen en bent in staat om de performance van onze databases te optimaliseren. Daarnaast weet je hoe je SQL query’s kan maken en beoordelen.

Functie-eisen

Wij bieden een dynamische, uitdagende werkomgeving waarin ruimte is voor vernieuwing, innovatie en verdere professionele ontwikkeling!

We zijn op zoek naar een ervaren data engineer (datawarehouse ontwikkelaar). Je hebt:

• Minimaal een afgeronde HBO-/WO-opleiding;
• Minimaal drie jaar relevante (aantoonbare) werkervaring als data(-base) engineer, datawarehouse ontwikkelaar of vergelijkbare functie;
• Kennis van databasetechnologieën (PostgreSQL);
• Affiniteit met Netwerk & Systeem beheer is een pré
• Een groot analytisch vermogen;
• Ervaring met Python (bij voorkeur m.b.t. data-extractie en laden met relevant Python libraries zoals Pandas/Polars)
• Ervaring met DBT (Data Build Tool) en Apache Airflow is een pré
• Ervaring met Git en goede version-control gewoonten
• Een proactieve en positieve instelling
• Kennis van dataformaten (ex. JSON, CSV, Parquet) en data storage (S3). Kennis van FTP is een pré;
• Goede beheersing van de Nederlandse taal;
• Affiniteit of ervaring in het werken in een beleidsomgeving.