Open Atelier
Een multimodale AI-trainingsapplicatie die statische instructiefiches omzet naar interactieve werkplekbegeleiding voor medewerkers in sociale werkplaatsen.
Aanleiding & Doelgroep
Voor mijn individueel project binnen het schakelprogramma Master Informatica aan de Universiteit Hasselt onderzocht ik de inzet van multimodale taalmodellen in maatwerkbedrijven. Werknemers met een cognitieve beperking of taalbarrière lopen regelmatig vast op traditionele, statische instructiefiches. Het doel van dit project was om werkinstructies digitaal tot leven te wekken en zelfstandigheid op de werkplek te vergroten zonder constante fysieke tussenkomst van instructeurs.
Hoe het werkt
- Multimodale Assistent: Medewerkers kunnen vragen stellen via spraak (Whisper) of tekst. Gemini 2.5 Flash analyseert de vraag samen met een foto van de actuele werkpost om in eenvoudige taal contextueel advies te geven.
- Kennisborging via Spaced Repetition: Automatische quizgeneratie op basis van de instructies, gecombineerd met een adaptief SuperMemo-2 herhalingsalgoritme om handelingen langdurig te verankeren in het geheugen.
- Instructeursdashboard: Begeleiders uploaden en beheren modules, volgen retentiestatistieken op en valideren gegenereerde quizvragen voor ze worden aangeboden.
- Veilige RAG-architectuur: Lokale taakdocumenten en instructies worden geïndexeerd in ChromaDB, waardoor antwoorden strikt binnen de context van de taak blijven en hallucinaties worden voorkomen.
Modulebeheer & instructeursinterface
Adaptieve herhalingsquiz voor medewerkers
Voortgangs- en retentiedashboard
Tech Stack & Architectuur
De applicatie combineert een React 19 frontend met een FastAPI backend in Python. Door gebruik te maken van multimodale prompts en gestructureerde JSON-outputs levert Gemini 2.5 consistente data aan zowel de chat- als quizmodule.
Onderzoeksresultaat & Paper
Het volledige onderzoek is gedocumenteerd in de paper “LLM-gestuurde trainingsapplicatie voor sociale werkplaatsen” (10 pagina's). Daarin worden de multimodale latency-benchmarks, prompt engineering strategieën en ethische richtlijnen voor kwetsbare doelgroepen uitgebreid geanalyseerd.