< Terug naar vorige pagina

Project

Automatische tekstanalyse in comparative judgments: Efficiëntere oordelen en kwaliteitsvollere feedback

Comparative judgment (CJ) is een alternatieve en innovatieve beoordelingsmethode die toelaat om schrijfproducten betrouwbaar en valide te beoordelen op basis van herhaaldelijke paarsgewijze vergelijkingen door meerdere assessoren. Er zijn echter nog twee uitdagingen die een efficiënte toepassing van deze beoordelingswijze in de weg staan. Ten eerste is er het cold start-probleem. Bij de start van het beoordelingsproces is er nog geen informatie over de kwaliteit van producten. De samenstelling van paren in selectie-algoritmen verloopt daarom nog willekeurig. De PhD-kandidaat onderzoekt hoe automatische tekstanalyse (of text mining) het cold-start probleem kan verhelpen in het schatten van de scores en de selectie van paren. Een tweede beperking van CJ is de beperkte informatiewaarde van de scores. CJ-scores geven enkel weer hoeveel beter (of slechter) een bepaald product is ten opzichte van de andere producten, niet waarom dat zo is. Het geven van feedback in CJ is zeer tijdsintensief en het doorbreekt de 'flow' van het beoordelingsproces. Het gebruik van automatische tekstanalyse technieken zou feedback binnen CJ kunnen automatiseren. De PhD-kanidaat zal onderzoeken welke tekstkenmerken de uitkomsten van de vergelijkingen zo goed mogelijk kunnen verklaren, en dus gebruikt kunnen worden als automatische feedback in CJ voor studenten en assessoren.

Datum:1 okt 2022 →  Heden
Trefwoorden:Comparative judgments, Text Mining, Automatische tekstanalyse, Natural Language Processing, Computational Linguistics, Educatieve Technologie, Psychometrie, Artificial Intelligence
Disciplines:Psychometrie, Natuurlijke taalverwerking, Educatieve technologie, Computationele linguïstiek
Project type:PhD project