Bouw een evaluatie‑framework voor AI‑modellen (LLM & ASR)

Wil jij bouwen aan AI-tools die de zorg slimmer maken? Tijdens deze opdracht ontwikkel je een framework dat LLM- en ASR-modellen sneller, slimmer en consistenter laat evalueren.

Bouw een evaluatie-framework voor AI-modellen (LLM & ASR)

Je werkt in het AI-team van Topicus, waar we met slimme modellen zorgprocessen sneller, makkelijker en beter maken. Je werkt samen met data scientists, AI-engineers en developers die continu bezig zijn met innovatie.

We vragen

• Python-ervaring
• Affiniteit met generatieve AI
• Analytisch en onderzoekend

We bieden

• Ruime ontwikkelingsmogelijkheden
• Hybride werken
• Onze eigen Topicus University

Daarom Topicus

• Jij mag jezelf zijn
• TopiConf, TopiBorrel, Game Nights
• Plezier én prestatie gaan samen

Wat je gaat doen

Je werkt aan één doel: evaluatie van AI-modellen beter, slimmer en efficiënter maken.

🔹 LLM-evaluatie

We gebruiken Promptfoo om LLM-modellen te vergelijken, maar promptverbetering gebeurt nog veel handmatig. Jij ontwikkelt een uitbreiding bovenop Promptfoo die:

• automatisch analyseert hoe prompts presteren
• een ‘LLM-as-a-Judge’ inzet om fouten te verklaren
• concrete verbeteringen voor nieuwe prompts genereert
• laat zien waarom iets misgaat en hoe het beter kan

Je bouwt hiermee een feedback-loop: testen → analyseren → verbeteren → opnieuw testen. Zo onderzoek je hoe iteratieve prompt engineering de prestaties van modellen versterkt.

🔹 ASR-evaluatie

Voor Automatic Speech Recognition werken we met verschillende modellen en datasets. Jij ontwikkelt:

• één centrale evaluatiemodule waarin modellen uniform worden getest
• een framework waarin transcripties geautomatiseerd worden vergeleken
• duidelijke visualisaties die prestaties transparant maken

Zo help je het AI-team sneller, betrouwbaarder en consistenter evalueren.

Wat breng jij mee

Je krijgt de kans om te werken met Python, LLM-tools, Promptfoo, ASR-evaluaties en moderne AI-frameworks. Daarnaast:

• Stagevergoeding van €600,- per maand
• Kennisdeling via TopiConf en interne AI-sessies
• Persoonlijke begeleiding door AI-specialisten
• Ruimte voor onderzoek, experimenten en eigen ideeën

En natuurlijk: een werksfeer waarin innovatie en plezier samenkomen. Van hackathons tot borrels, bij Topicus bouw je aan AI én aan je netwerk.

Benefits bij Topicus

Thuiswerkplekvergoeding

Je kunt zowel op kantoor als thuis werken, in overleg met je team. Voor een fijne en verantwoorde werkplek thuis krijg je een eenmalige vergoeding voor ergonomische inrichting.

Ontwikkeling & Groei

Jij stuurt je eigen groei, met tools zoals de Topicus University om zelf passende, relevante trainingen te kiezen. Kennisdelen zit in ons DNA, via lunchlezingen, kennissessies of gewoon bij het koffieapparaat.

Samen werken aan jouw vitaliteit

Jouw gezondheid en energie zijn belangrijk. Via ons vitaliteitsprogramma krijg je toegang tot onder meer vitaliteitscoaching, ergonomieworkshops, sportevenementen en een gezonde thuiswerkplek.