Dovezi și cifre esențiale
| Exemplu | Număr | Ce arată |
|---|---|---|
| Procedura Woods pentru reacție simplă | 20 de probe de exersare, 120 de probe de testare | Un protocol publicat, nu un minim universal |
| Calcul ilustrativ pentru probe independente | De 4 ori mai multe probe | Înjumătățește eroarea standard dacă variabilitatea rămâne constantă |
| Studiu istoric despre fiabilitate | 18 probe simple, 30 de probe cu două opțiuni | Suficiente în condițiile specifice ale acelui studiu |
Numerele istorice provin de la Hamsher și Benton, al căror rezumat limitează explicit concluzia la condițiile studiului. Ele nu trebuie preluate ca regulă de certificare pentru un joc modern în browser. Fiabilitatea privește reproductibilitatea unui scor definit; puterea privește probabilitatea de a detecta un efect definit. Sunt întrebări înrudite, dar diferite. de S. Hamsher et al., 1977 Miller, 2023
De ce ajută repetarea aceleiași sarcini
Dacă probele ar fi observații independente, cu variabilitate neschimbată, eroarea standard a mediei lor ar fi egală cu abaterea standard a probelor împărțită la rădăcina pătrată a numărului de probe. Exemplul cu numărul de probe înmulțit de patru urmează din această formulă. În realitate, probele pot încălca aceste presupuneri, deoarece oamenii învață, obosesc sau își schimbă strategia. Prin urmare, un calcul al numărului de probe este un model, nu o garanție a unui scor personal stabil. Miller, 2023
Analiza modernă a numărului de probe arată și că efectele se pot schimba odată cu exersarea. Mai multe probe nu înseamnă pur și simplu mai multe copii ale unei prime probe neschimbate. Un studiu trebuie să aleagă un rezultat și să țină cont de comportamentul sarcinii pe parcursul sesiunii. Miller, 2023
Ce fel de fiabilitate vă interesează?
Consecvența în cadrul unei singure sesiuni diferă de consecvența de la o zi la alta sau de consecvența clasamentului persoanelor. Literatura despre paradoxul fiabilității arată că sarcinile pot produce efecte de grup robuste, dar diferențe individuale mai puțin fiabile. Un efect mediu mare la Stroop sau la timpul de reacție nu face automat ca un scor scurt să fie potrivit pentru stabilirea percentilei unei persoane. Hedge et al., 2017
Ce factori influențează acest lucru?
Mediile, medianele și valorile minime răspund la întrebări diferite
Cel mai rapid răspuns estimează o altă caracteristică a performanței decât media. Este deosebit de sensibil la numărul de ocazii pe care vi le oferiți. Valorile extreme lente pot ridica media, iar eliminarea lor fără o regulă stabilită dinainte poate denatura rezultatul. Cercetările despre valorile extreme ale timpului de reacție arată de ce regulile de calcul al scorului trebuie fixate înainte de a compara sesiunile. Ratcliff, 1993
Cercetările despre somn ilustrează de ce contează alegerea rezultatului: cercetătorii vigilenței psihomotorii disting răspunsurile lente și scăpările de atenție de măsurile centrale ale timpului de reacție. Nu se poate presupune că un joc scurt care reține cel mai bun rezultat dintre câteva încercări surprinde aceeași vulnerabilitate la lipsa somnului ca o sarcină susținută de vigilență. Basner et al., 2011
Ce schimbă numărul aparent de probe necesare?
Variațiile de temporizare ale dispozitivului adaugă variabilitate, iar întârzierea fixă a dispozitivului adaugă o eroare sistematică. Mai multe probe pot ajuta în primul caz, dar nu elimină prin calibrare întârzierea fixă. Atât evaluările temporizării, cât și rezultatele calibrărilor de laborator susțin deosebirea dintre aceste surse de eroare. Anwyl-Irvine et al., 2020 Bridges et al., 2020 Woods et al., 2015
Pentru urmărirea informală, alegeți un protocol ușor de respectat, folosiți același număr de încercări de fiecare dată și înregistrați toate sesiunile încheiate, nu doar recordurile personale. Folosiți această metodă pentru comparații, nu ca recomandare validată privind un număr minim anume. Dacă scopul este obținerea unei percentile științifice, sarcina are nevoie de un eșantion normativ reprezentativ și de fiabilitate măsurată, precum și de suficiente probe. Hedge et al., 2017 Miller, 2023
Vârsta, pregătirea și somnul pot schimba, de asemenea, performanța în timpul sesiunilor sau între ele. Menținerea unor condiții relativ constante face comparația mai ușor de interpretat, dar nicio standardizare nu transformă un rezultat din browser într-o evaluare clinică. Woods et al., 2015 Basner et al., 2011
Încearcă testul gratuit asociat
Test de timp de reacție
Încercați testul de timp de reacție folosind de fiecare dată aceleași instrucțiuni și aceeași metodă de introducere a răspunsului. Rezultatul său scurt este util pentru explorarea sarcinii. Protocolul de cercetare cu 120 de probe oferă context pentru măsurare; nu este o instrucțiune să repetați jocul până obțineți un anumit scor.
Întrebări frecvente
Sunt suficiente cinci încercări?
Pot demonstra cum funcționează sarcina, dar fiabilitatea lor pentru o anumită comparație personală trebuie testată. Nu există o regulă de cinci încercări valabilă pentru toate testele de reacție. Hedge et al., 2017
Ar trebui să folosesc cel mai rapid rezultat?
Doar dacă acesta este scorul pe care ați decis să-l urmăriți. Creșterea numărului de încercări mărește șansa de a obține un răspuns neobișnuit de rapid. Ratcliff, 1993
Mai multe date înseamnă întotdeauna un test mai bun?
Nu neapărat. Contează numărul de probe și de participanți, exersarea, calcularea scorului și efectul studiat. Miller, 2023
Surse
- Woods et al. (2015). Factori care influențează latența timpului de reacție simplu.
- Miller (2023). Câți participanți? Câte probe? Maximizarea puterii studiilor privind timpul de reacție.
- de S. Hamsher et al. (1977). Fiabilitatea determinărilor timpului de reacție.
- Hedge et al. (2017). Paradoxul fiabilității: de ce sarcinile cognitive robuste nu produc diferențe individuale fiabile.
- Ratcliff (1993). Metode de gestionare a valorilor extreme ale timpului de reacție.
- Basner et al. (2011). Maximizarea sensibilității testului de vigilență psihomotorie (PVT) la pierderea somnului.
- Anwyl-Irvine et al. (2020). Precizia și acuratețea realistă a platformelor de experimentare online, a browserelor web și a dispozitivelor.
- Bridges et al. (2020). Mega-studiul temporizării: comparația unei game de instrumente pentru generarea experimentelor, atât în laborator, cât și online.