Viktig forskning och siffror
| Exempel | Antal | Vad det visar |
|---|---|---|
| Woods protokoll för enkel reaktionstid | 20 övningsförsök, 120 testförsök | Ett publicerat protokoll, inte ett universellt minimum |
| Illustrativ beräkning för oberoende försök | 4 gånger så många försök | Halverar standardfelet om variationen förblir densamma |
| Historisk tillförlitlighetsstudie | 18 försök med enkel reaktion, 30 med två val | Tillräckligt under just den studiens förutsättningar |
De historiska antalen kommer från Hamsher och Benton, vars sammanfattning uttryckligen begränsar slutsatsen till studiens förutsättningar. De bör inte användas som en certifieringsregel för ett modernt webbläsarspel. Tillförlitlighet handlar om hur reproducerbart ett definierat resultat är; statistisk styrka handlar om sannolikheten att upptäcka en definierad effekt. Det är relaterade men olika frågor. de S. Hamsher et al., 1977 Miller, 2023
Därför hjälper det att upprepa samma uppgift
Om försöken vore oberoende observationer med oförändrad variation skulle medelvärdets standardfel vara lika med försökens standardavvikelse delad med kvadratroten ur antalet försök. Exemplet med fyra gånger så många försök följer av den formeln. Verkliga försök kan bryta mot de antagandena eftersom människor lär sig, blir trötta eller ändrar strategi. En beräkning av antalet försök är därför en modell, ingen garanti för ett stabilt personligt resultat. Miller, 2023
Den moderna analysen av antalet försök visar också att effekter själva kan förändras med övning. Fler försök ger inte bara fler kopior av ett oföränderligt första försök. En forskningsdesign måste välja ett utfall och ta hänsyn till hur uppgiften utvecklas under testsessionen. Miller, 2023
Vilken sorts tillförlitlighet vill du mäta?
Konsekvens inom en och samma omgång skiljer sig från konsekvens mellan olika dagar eller från hur väl testet rangordnar personer. Forskning om tillförlitlighetsparadoxen visar att uppgifter kan uppvisa robusta gruppeffekter samtidigt som individuella skillnader mäts mindre tillförlitligt. En stor genomsnittlig Stroop- eller reaktionstidseffekt gör inte automatiskt ett kort testresultat lämpligt för att fastställa en persons percentil. Hedge et al., 2017
Vad påverkar det?
Medelvärden, medianer och minimum besvarar olika frågor
Den snabbaste reaktionen speglar en annan aspekt av prestationen än medelvärdet. Den påverkas särskilt mycket av hur många chanser du får. Långsamma extremvärden kan dra upp medelvärdet, medan det kan snedvrida resultatet att ta bort dem utan en regel som bestämts i förväg. Forskning om extremvärden i reaktionstider är ett skäl att hålla poängsättningsreglerna fasta innan du jämför testomgångar. Ratcliff, 1993
Sömnforskningen visar varför valet av utfall spelar roll: forskare som studerar psykomotorisk vaksamhet skiljer mellan långsamma reaktioner och uteblivna svar, å ena sidan, och sammanfattande mått på central reaktionstid, å andra sidan. Man kan inte utgå från att ett kort spel där bästa resultatet räknas fångar samma känslighet för sömnbrist som en längre vaksamhetsuppgift. Basner et al., 2011
Vad påverkar hur många försök som verkar behövas?
Variation i enhetens tidsmätning ökar spridningen, medan en konstant fördröjning i enheten orsakar systematiska fel. Fler försök kan hjälpa mot det förstnämnda, men kalibrerar inte bort det sistnämnda. Både utvärderingar av tidsmätning och laboratoriekalibrering stöder att dessa felkällor bör skiljas åt. Anwyl-Irvine et al., 2020 Bridges et al., 2020 Woods et al., 2015
För informell uppföljning kan du välja ett hanterbart upplägg, göra lika många försök varje gång och registrera alla genomförda omgångar, inte bara personliga rekord. Se det som en metod för jämförelse, inte som en validerad rekommendation om ett visst minimiantal. Om målet är att få fram en vetenskaplig percentil behöver uppgiften ett representativt normurval och uppmätt tillförlitlighet, liksom tillräckligt många försök. Hedge et al., 2017 Miller, 2023
Ålder, förberedelser och sömn kan också påverka prestationen under eller mellan testsessioner. Om förhållandena hålls någorlunda lika blir jämförelsen lättare att tolka, men ingen grad av standardisering gör ett resultat från en webbläsare till en klinisk bedömning. Woods et al., 2015 Basner et al., 2011
Prova det relaterade kostnadsfria testet
Reaktionstidstest
Gör reaktionstidstestet med samma instruktioner och inmatningsmetod varje gång. Det korta resultatet kan hjälpa dig att utforska uppgiften. Forskningsprotokollet med 120 försök ger ett sammanhang för mätningar; det är ingen instruktion att upprepa spelet tills du når ett visst resultat.
Vanliga frågor
Räcker fem försök?
De kan visa hur uppgiften fungerar, men tillförlitligheten för en viss personlig jämförelse måste testas. Det finns ingen regel om fem försök som gäller för alla reaktionstidstest. Hedge et al., 2017
Bör jag använda mitt snabbaste resultat?
Bara om det är det resultat du har bestämt dig för att följa. Om du ökar antalet försök ökar också chansen att få en ovanligt snabb reaktion. Ratcliff, 1993
Betyder mer data alltid ett bättre test?
Inte automatiskt. Antalet försök och deltagare, övning, poängsättning och den studerade effekten spelar alla roll. Miller, 2023
Källor
- Woods et al. (2015). Faktorer som påverkar latensen vid enkel reaktionstid.
- Miller (2023). Hur många deltagare? Hur många försök? Så maximeras den statistiska styrkan i reaktionstidsstudier.
- de S. Hamsher et al. (1977). Tillförlitligheten hos reaktionstidsmätningar.
- Hedge et al. (2017). Tillförlitlighetsparadoxen: Varför robusta kognitiva uppgifter inte ger tillförlitliga individuella skillnader.
- Ratcliff (1993). Metoder för att hantera extremvärden i reaktionstider.
- Basner et al. (2011). Så maximeras psykomotoriska vaksamhetstestets (PVT) känslighet för sömnbrist.
- Anwyl-Irvine et al. (2020). Realistisk precision och noggrannhet hos plattformar för onlinestudier, webbläsare och enheter.
- Bridges et al. (2020). Den stora tidsmätningsstudien: en jämförelse av olika experimentverktyg i laboratorier och på nätet.