Spring naar inhoud

Testplan voor een LLM

Ingevuld

- See english below -

Context van de opdracht

Werk mee aan de digitale overheid van morgen – in het DIT-lab van DUO

Ben jij benieuwd hoe de overheid er in de toekomst uit kan zien? In het DIT-lab (Discover Innovations of Tomorrow) werk je samen met andere studenten én professionals van DUO aan vraagstukken rond digitale identiteit en publieke dienstverlening.

Het DIT-lab is gevestigd in de Digital Society Hub en biedt jou de kans om te leren, experimenteren en bijdragen aan innovaties. Denk bijvoorbeeld aan het digitaal uitgeven van diploma’s, dat grote impact kan hebben op hoe DUO haar diensten inricht. Of het testen van een persoonlijke datakluis die automatisch gegevens deelt met je aanvraag voor studiefinanciering – allemaal projecten die nog volop in ontwikkeling zijn. Je gaat aan de slag met actuele, complexe vraagstukken waarvoor we gebruikmaken van een gestructureerde innovatieaanpak. Samen onderzoeken we wat er technisch mogelijk is én wat gebruikers nodig hebben.

In het DIT-lab werk je:

  • In multidisciplinaire teams met studenten en DUO-medewerkers
  • Met opkomende technologieën zoals Self Sovereign Identity (SSI), verifiable credentials (VC), privacy enhancing technologies, LLM’s en datakluizen
  • In een open en dynamische leeromgeving waar experimenteren en samenwerken centraal staan
  • Kortom: wil jij praktijkervaring opdoen in een innovatief lab waar je meewerkt aan de digitale overheid van de toekomst? Dan is het DIT-lab dé plek voor jou.

Opdracht

Ben jij nieuwsgierig naar AI en wil je weten hoe je een taalmodel écht goed kunt testen? Wij zoeken een enthousiaste student die een testplan opstelt en uitvoert voor een Large Language Model (LLM) — een geavanceerde AI die met natuurlijke taal communiceert en meedenkt met gebruikers.

Wat ga je doen?

Je ontwikkelt en test scenario’s om te beoordelen hoe betrouwbaar, veilig en effectief het LLM werkt in de praktijk. Daarbij kijk je niet alleen naar de techniek, maar ook naar gebruiksvriendelijkheid, foutgevoeligheid en ethische aspecten.

Je werkzaamheden kunnen onder andere bestaan uit:

  • Het opstellen van een teststrategie en testplan voor het LLM
  • Het uitvoeren van functionele en niet-functionele tests
  • Het analyseren van testresultaten en formuleren van verbetervoorstellen
  • Samenwerken met ontwikkelaars en onderzoekers die met AI-toepassingen bezig zijn

Wie ben jij?

  • Je bent een hbo -student, bij voorkeur met een achtergrond in ICT, informatica, software engineering, AI, data science of een verwante opleiding
  • Je hebt ervaring met testen (bijvoorbeeld via TMap, ISTQB of eerdere projecten)
  • Je bent analytisch, zorgvuldig en vindt het leuk om uit te zoeken waar systemen nog beter kunnen
  • Je kunt zelfstandig werken, maar schakelt ook makkelijk met anderen
  • Omdat je werkt met knowledge graphs die gebaseerd zijn op wet- en regelgeving, is het een pre als je juridische teksten kunt lezen en begrijpen.

Wat bieden wij?

  • Een uitdagende opdracht waarin je theorie en praktijk combineert
  • Kansen om ervaring op te doen met AI en LLM-technologie
  • Begeleiding door ervaren professionals
  • Een prettige werkomgeving waar jouw ideeën en initiatief gewaardeerd worden
  • Stage- of afstudeervergoeding

Context of the assignment

Contribute to the digital government of tomorrow – in DUO’s DIT Lab 

Are you curious about what the government of the future could look like? In the DIT Lab (Discover Innovations of Tomorrow), you’ll work together with other students and DUO professionals on challenges surrounding digital identity and public services. The DIT Lab is located in the Digital Society Hub and offers you the chance to learn, experiment, and contribute to innovations. Think, for example, of digitally issuing diplomas, which could have a major impact on how DUO organizes its services. Or testing a personal data vault that automatically shares information with your student finance application – all projects that are still under development. You’ll work on current, complex issues using a structured innovation approach. Together, we explore what is technically possible and what users need. In the DIT Lab, you will work:

  • In multidisciplinary teams with students and DUO employees
  • With emerging technologies such as Self-Sovereign Identity (SSI), verifiable credentials (VC), privacy-enhancing technologies, LLM’s and data vaults
  • In an open and dynamic learning environment where experimentation and collaboration are key 
  • In short: do you want to gain practical experience in an innovative lab where you contribute to the digital government of the future? Then the DIT Lab is the place for you.

Assigment

Are you curious about AI and eager to learn how to properly test a language model? We’re looking for an enthusiastic student to design and execute a test plan for a Large Language Model (LLM) — an advanced AI system that communicates and reasons using natural language.

What you’ll do

You’ll design and perform tests to evaluate how reliable, safe, and effective the LLM is in real-world situations. Your work won’t just focus on technical performance, but also on usability, accuracy, and ethical aspects.

Your tasks may include:

  • Developing a test strategy and detailed test plan for the LLM
  • Performing functional and non-functional tests
  • Analyzing test results and proposing improvements
  • Collaborating with developers and researchers working on AI solutions

Who you are

  • You’re a bachelor’s or master’s student, preferably studying ICT, Computer Science, Software Engineering, AI, or Data Science – but other study backgrounds are welcome if you have experience with testing
  • You have some experience with software testing (for example via TMap, ISTQB, or project work)
  • You’re analytical, detail-oriented, and enjoy finding ways to make systems work better
  • You work independently but communicate easily with others
  • Since you’ll be working with knowledge graphs based on laws and regulations, it’s an advantage if you’re able to read and understand legal texts.

What we offer

  • A challenging and meaningful assignment combining theory and practice
  • Hands-on experience with AI and LLM technologies
  • Guidance from experienced professionals
  • A supportive environment where your ideas and initiative are valued
  • An internship or graduation allowance
Algemene informatie/General information
Eindproduct/Endproduct Een uitgevoerd testplan/A tested LLM
Standplaats/Location Zernikepark 10, Groningen
Betrokken partijen/Involved parties DUO
Contact Remco Tijink: ditlab@duo.nl
Begeleiding/Coaching Je krijgt professionele begeleiding, maar jij bent de expert op het gebeid van testen/You will receive professional guidance, but you are the expert in testing.