Validiteit van Webcamtest aangetoond

Webcamtest goede voorspeller van praktijkbeoordelingen van professioneel gedrag

Marit Op de Beek (master-student A&O-psychologie EUR) en Janneke Oostrom (AIO A&O-psychologie EUR) deden onderzoek naar de criteriumgerelateerde validiteit van o.a. de Webcamtest, SQ-test en een IQ-test.

Onderzoeksgroep en criteriumgedrag
De onderzoeksgroep bestond uit 106 studenten psychologie van de EUR. Het voorspelde criterium had te maken met het professioneel optreden als gespreksleider in werkcolleges. Student krijgen beurtelings de gespreksleidersrol toegewezen die inhoudt dat hij of zij de stof moeten voorbereiden en ervoor moeten zorgen dat de stof op systematische manier in de groep aan de orde komt, dat groepsleden hun inzicht vergroten en dat de groepsleden bijdragen aan de discussie leveren. De gespreksleider moet boven de stof staan, bijdragen samenvatten en de discussie stimuleren. Deze rol bevat cognitieve componenten (leervermogen, inzicht), motivationele componenten (voorbereiding, concentratie) en leidinggevende componenten (groepsproces sturen, deelnemers stimuleren).

Het professioneel gedrag werd beoordeeld aan de hand van een vragenlijst van 19 gedragsaspecten door één docent (tutor). Gegevens over overeenstemmingsbetrouwbaarheid van de vragenlijst zijn niet bekend. De uitslag over professioneel gedrag werd berekend als de som van beoordelingscijfers op alle 19 aspecten. De beoordelaars waren niet op de hoogte van de uitslagen op de predictoren (zie verderop).

Behalve het criterium professioneel gedrag is ook de gemiddelde score op een bloktoets meegenomen in het onderzoek. De bloktoets is bedoeld als meting van kennis en inzicht van bestudeerde stof op het terrein van A&O-psychologie.

Predictoren
Vanwege de component leidinggeven in het criterium zijn volgende predictoren afgenomen aan dezelfde 106 studenten:

• Webcamtest voor leidinggeven middenkader
• SQ-test leidinggeven

De reacties op de Webcamtest werden door drie onafhankelijke beoordelaars beoordeeld. De intraclass-correlatie is .82. Dat is hoog te noemen. De interne consistentie van de Webcamtest-beoordelingen is .89.

Er werd ook een IQ-test als predictor meegenomen. Gegevens over deze test zijn onbekend.

Resultaten
De Webcamtest had de hoogste correlatie met het criterium professioneel gedrag. De correlatie was .36.

De SQ-test deed het ook goed: .27. De IQ-test kwam op de laatste plaats: .14.

Voor de bloktoets waren de correlaties: WCT .11, SQ .29. IQ .23.

Evaluatie
De correlatie van .36 van de Webcamtest met beoordeling van professioneel gedrag in de groep is verheugend hoog, in aanmerking nemend dat de onderzoeksgroep behoorlijk groot is (en het resultaat stabiel) en het feit dat het criterium gebaseerd is op de input van één beoordelaar (het is bekend dat enkelvoudige beoordeling tamelijk onbetrouwbaar is; gecorrigeerd voor onbetrouwbaarheid zou de validiteit nog aanmerkelijk hoger zijn).