Veelgestelde vragen
van opdrachtgevers
Vragen
- Er is geen interactie mogelijk, meet de test dan wel de bedoelde vaardigheden?
- Kan ik deelnemers aan de Webcamtest van te voren laten oefenen?
- Is het ook mogelijk om met de Webcamtest iets over intelligentie te zeggen?
- Hoeveel situaties heeft een Webcamtest en waarom dat aantal?
- Hoe lang duurt de Webcamtest?
- Hoe worden de beoordelingen op de Webcamtest getransformeerd tot scores op competenties?
- Hoe zijn de situaties van de Webcamtest uitgezocht?
- Zijn er normen en normgroepen voor de Webcamtest?
- Moeten beoordelaars rekening houden met het niveau van de doelgroep?
- Wat zijn de voordelen van de Webcamtest ten opzichte van rollenspelen?
- Hoe moet ik een deelnemer achter PC of laptop opstellen om goede opnames te maken?
Antwoorden
Er is geen interactie mogelijk, meet de test dan wel de bedoelde vaardigheden?
Er is inderdaad geen interactie in de zin van een dialoog, want na de reactie van de deelnemer praat de persoon op het scherm niet terug. Aan de andere kant is het wel mogelijk voor deelnemers aan de Webcamtest om hun interactievaardigheden te laten zien. Je kunt immers in je antwoord laten zien dat je geluisterd hebt naar de wensen van de ander en dat je non-verbale signalen (bijvoorbeeld van teleurstelling) hebt opgemerkt.
Kan ik deelnemers aan de Webcamtest van te voren laten oefenen?
Ja. We bevelen sterk aan dat deelnemers die de Webcamtest gaan doen zich kunnen voorbereiden. De Webcamtest is een nieuwe manier van testen; veel mensen zijn onzeker en onwennig als ze zonder voorbereiding met de test worden geconfronteerd. De deelnemer kan de voorbereiding geheel online, via deze website, doen.
U kunt de deelnemer een login opsturen waarmee die via www.psychecommerce.nl met de webcam kan oefenen. De deelnemer kan dan echt reageren op enkele situaties, zijn reactie opnemen via de webcam en weer afspelen. Dat opnemen en afspelen kan nog twee keer herhaald worden. Op die manier krijgt de deelnemer ervaring met de preciese testomstandigheden die hij ook tijdens de echte test zal meemaken. Een oefenlogin kost € 5.
Is het ook mogelijk om met de Webcamtest iets over intelligentie te zeggen?
Ja, dat is mogelijk. We bieden aan de deelnemer dan vóór de webcamtestsituatie een of meer schermen met extra informatie aan. Dat kan een tabel zijn, een brief, een verslag met informatie over de klant. De bedoeling is dat de deelnemer die informatie goed leest en er eventueel aantekeningen over maakt.
In de reactie op de situatie kan de deelnemer laten zien dat hij gebruik maakt van relevante informatie uit de voorschermen.
Hoeveel situaties heeft een Webcamtest en waarom dat aantal?
Onze ervaring is dat het mogelijk is om met tien situaties een betrouwbaar inzicht te krijgen in twee tot vier competenties van een deelnemer. Verlengen van de test met nog meer situaties zou de scores niet significant veranderen.
Hoe lang duurt de Webcamtest?
Dit hangt af van de aard van de situaties. Het is mogelijk elke situatie te laten voorafgaan door extra informatie, bijvoorbeeld een brief, een krantenbericht, een begroting. De bedoeling is dat de deelnemer die informatie eerst leest en verwerkt voordat de persoon uit de situatie in beeld en geluid op het scherm verschijnt.
Het doen van de Webcamtest met situaties zonder “voorschermen” kost gemiddeld ongeveer 40 minuten. Het doen van de Webcamtest mét (een aantal) “voorschermen” kan aanmerkelijk meer tijd kosten.
Hoe worden de beoordelingen op de Webcamtest getransformeerd tot scores op competenties?
Elke reactie is door één of meer beoordelaars beoordeeld op twee competenties. De beoordelingscategorieën --, -, +/-, +, ++ worden omgezet in cijfers 1, 2, 3, 4 en 5. De beoordelingscijfers worden voor elke competentie gemiddeld. Om een algemene score te verkrijgen worden ook alle beoordelingscijfers bij elkaar opgeteld en gemiddeld. De zo berekende competentiescores en algemene score zijn vaak niet gehele getallen, bijvoorbeeld 3,6. Om scores geheel– en daarmee gemakkelijker hanteerbaar - te maken hebben we ze getransformeerd tot een schaal die loopt van 0 tot 100. In concreto betekent dit dat we gemiddelde scores vermenigvuldigen met 20.
Hoe zijn de situaties van de Webcamtest uitgezocht?
Er zijn twee hoofdprincipes voor de keuze van de samenstelling:
1. Relevantie van situaties. Experts op het betreffende werkterrein hebben de kritieke incidenten voor de situaties aangeleverd en stemmen met elkaar overeen in hun oordeel dat de incidenten relevant zijn. In hun oordeel over relevantie spelen mee: de situaties zijn reëel (komen echt voor), ze zijn moeilijk en ze bergen een afbreukrisico in zich.
2. Heterogeniteit van situaties. Het is wenselijk dat in de test zoveel mogelijk verschillende situaties die aanspraak doen op competenties gerepresenteerd zijn. Bij de Webcamtest Sales komt dit er bijvoorbeeld op neer dat er situaties aanwezig zijn uit de verschillende stadia van de zakelijke relatie met de klant: kennismaking, presentatie, sluiten van de koop, after-sales.
Zijn er normen en normgroepen voor de Webcamtest?
Er worden met standaard-Webcamtests op dit moment geen normen meegeleverd. Met dit soort normen is het mogelijk de relatieve positie van een deelnemer ten opzichte van andere vergelijkbare deelnemers te bepalen. Zo geeft een decielnorm van 1 aan dat de deelnemer qua score bij de onderste 10% zit.
Het is mogelijk om voor versies van de Webcamtest die aan grote groepen deelnemers worden afgenomen normen te bepalen. Ook voor Webcamtests die op maat zijn gemaakt kunnen we op verzoek antwoorden van deelnemers verzamelen en normen genereren. Scoreverschillen tussen groepen kunnen interessante managementinformatie opleveren.
Normen kunnen ook worden gebruikt om een grens tussen slagen en zakken vast te stellen, bijvoorbeeld in geval van certificering van een grote groep van medewerkers. We adviseren om dan als vuistregel het gemiddelde van de algemene score minus één standaarddeviatie te nemen.
Onze ervaring is dat de algemene of totaalscore van tests die op het competentieniveau van de deelnemers zijn toegesneden, op een gemiddeld van 65 punten uitkomt. De standaarddeviatie ligt rond de 5. De slaag-zakgrens ligt via deze methode gewoonlijk dicht bij de 60 punten, wat overeenkomt met een gemiddelde waardering van +/-.
Uitleg: 60/20=3 wat correspondeert met +/-. Zie ook de FAQ “Hoe worden de beoordelingen getransformeerd tot scores op competenties?”
Moeten beoordelaars rekening houden met het niveau van de doelgroep?
Anders gesteld: Moeten beoordelaars het te verwachten competentieniveau meewegen in hun oordeel van de reacties? Moeten ze bijvoorbeeld een ervaren leidinggevende strenger beoordelen dan een beginneling omdat aan de eerste meer eisen kunnen worden gesteld?
Ons advies is om elke reactie in principe op dezelfde manier te beoordelen. Dit is ook goed mogelijk omdat de scoringsinstructies weinig ruimte laten voor eigen interpretaties.
Wanneer het wenselijk is om de norm bij te stellen, bijvoorbeeld omdat de deelnemersgroep als geheel onder het gewenste niveau ligt, dan is het aan te raden om dit niet tijdens het beoordelingsproces te doen, maar juist achteraf op basis van de eindscores. Hierdoor blijft inzichtelijk welke waarde daadwerkelijk kan worden gehecht aan de prestaties.
Wat zijn de voordelen van de Webcamtest ten opzichte van rollenspelen?
Sociale vaardigheden worden nogal eens benaderd met een rollenspel. De rol wordt gespeeld door een acteur en er is een assessor die de reacties van de kandidaat beoordeelt.
De Webcamtest heeft een aantal voordelen:
- de standaardisatie is groter. Elke deelnemer krijgt dezelfde situaties aangeboden. Dit verhoogt de betrouwbaarheid van de uitslagen.
- de flexibiliteit van de methode is groter. De test is op elke PC of laptop met internetverbinding af te nemen. Op het moment dat de Webcamtest wordt afgenomen hoeven geen assessoren ter plaatse te zijn. Beoordelaars kunnen reacties op de Webcamtest vanuit elke PC met internetverbinding beoordelen.
- de variatiebreedte is groter. Er zijn met de Webcamtest in korte tijd meer relevante situaties aan te bieden dan in een rollenspel of in een traditioneel afgenomen arbeidsproef.
- de operationele kosten zijn veel lager. De situaties hoeven éénmalig door acteurs gespeeld te worden.
Hoe moet ik een deelnemer achter PC of laptop opstellen om goede opnames te maken?
Kijk onder Testcondities voor informatie over dit onderwerp.