Vacature omschrijving
Startdatum: 5 januari 2026
Einddatum: 5 juli 2026
Optie op verlenging: Nee
Sluitingsdatum: 27 november 2025
Functieomschrijving
Als QA Engineer ben je verantwoordelijk voor het valideren van de veiligheid, kwaliteit en compliance van een open-source bouwstenen-framework dat organisaties in staat stelt eigen AI-assistenten, bots of agents te bouwen. Je richt je op risk-based testing van AI-gedrag, waaronder guardrails, hallucination detection en het voorkomen van PII-lekkage. Daarnaast begeleid je pilotorganisaties bij het testen en interpreteer je testresultaten voor het product owner- en developmentteam.
Jouw verantwoordelijkheden
-
AI Quality Testing (50%): Valideren van guardrails, detecteren van hallucinations, evalueren van het evaluation framework en controleren van de kennisbasis.
-
Functionele en Integratietesting (25%): Uitvoeren van end-to-end flows, regressietests en validatie van API’s en integraties.
-
Security & Compliance Testing (15%): Uitvoeren van DPIA-vereisten, security checks en preventie van PII-lekkage.
-
Pilot Support & Rapportage (10%): Begeleiden van pilotorganisaties, bugmanagement en het bijhouden van metrics.
Wat wij vragen
- Zelfstandig kunnen werken met een sterke focus op de hoogste risico’s binnen testing, zoals security, compliance en kernfunctionaliteit.
- Ervaring met handmatige testing, gericht op het vinden van edge cases en het gebruik van adversarial prompts.
- Bereidheid en ruimte om waar mogelijk testautomatisering toe te passen.
- Kennis van AI-gerelateerde testmethoden en frameworks is een pré.
- Beschikbaarheid van circa 8 uur per week.
Technologieën
Je werkt met een framework gebaseerd op Azure OpenAI (EU/AVG-compliant), RAG (Qdrant vectorDB), orchestration frameworks en guardrails.
Eisen:
- Een aantoonbare opleiding op minimaal hbo bachelor niveau
- Aantoonbare werkervaring met AI en/of LLM systemen
- Minimaal 1 jaar aantoonbare werkervaring bij een overheidsinstelling
- Aantoonbare werkervaring met projecten op het gebied van AI
Wensen:
- 6, Een aantoonbare afgeronde technische opleiding op minimaal hbo bachelor niveau
- Minimaal 2 jaar aantoonbare werkervaring met AI/LLM systemen (benoem duidelijk in cv)
- Minimaal 2 jaar aantoonbare werkervaring met projecten op het gebied van AI( 40 punten)
Competenties:
- Probleemoplossend vermogen Analytisch denken Technische kennis Projectmanagement Kwaliteitsbewustzijn
Solliciteren