AI Quality Engineer

Over de functie

Als AI Quality Engineer ben je verantwoordelijk voor het waarborgen van de kwaliteit van AI‑oplossingen (GenAI/LLM, RAG, agents) voordat ze in productie gaan. Je werkt binnen een gespecialiseerd IA‑squad van een toonaangevende financiële instelling.

Belangrijkste verantwoordelijkheden

• Definiëren van de QA‑strategie voor AI, inclusief DoD‑criteria, drempels per criticaliteit en minimale test‑suites.
• Meewerken vanaf de discovery‑fase: stories en acceptatiecriteria reviewen, test‑plannen (happy path, edge cases, fallbacks) ontwerpen.
• Opzetten en uitvoeren van tests voor grounding, consistentie, alucinaties, retrieval en bewijsvoering.
• Uitvoeren van security‑tests zoals prompt‑injection, jailbreak, data‑leakage en misuse.
• Automatiseren van API‑, end‑to‑end‑ en regressietests; integreren in CI/CD‑pipelines.
• Defecten registreren, prioriteren en root‑cause analyses uitvoeren met het squad.
• Definiëren en monitoren van kwaliteits‑metrics (succesratio, fallback, latency) en alerts configureren.
• Documenteren van test‑plannen, resultaten, artefacten en versie‑beheer.

Gewenst profiel

• Universitaire opleiding in Informatica, Computer‑Engineering of een verwante richting.
• Minimaal 4 jaar ervaring als QA‑engineer (functioneel en geautomatiseerd) in digitale producten, bij voorkeur in een gereguleerde/financiële omgeving.
• 2‑3 jaar ervaring met API‑ en end‑to‑end‑automatisering en CI/CD‑integratie.
• Bij voorkeur certificering ISTQB Foundation en/of training in AI‑/GenAI‑testing.
• Basiskennis van ML/GenAI‑concepten en van security‑ en privacy‑eisen (DLP, dataclassificatie).
• Vloeiend Engels (technisch lezen en schrijven).

Vereiste vaardigheden

• Git (GitHub, GitLab)
• CI/CD‑tools: GitHub Actions, Jenkins
• API‑testing: Postman, Karate
• UI‑testing: Playwright, Selenium