Ključni dokazi in številke
| Primer | Število | Kaj to pokaže |
|---|---|---|
| Postopek preprostega reakcijskega časa po Woodsu | 20 poskusnih, 120 testnih preizkusov | En objavljen protokol, ne univerzalno najmanjše število |
| Ponazoritveni izračun za neodvisne preizkuse | 4-krat toliko preizkusov | Standardno napako prepolovi, če variabilnost ostane nespremenjena |
| Zgodovinska raziskava zanesljivosti | 18 preizkusov preprostega odziva, 30 preizkusov z dvema izbirama | Zadostovalo je v posebnih pogojih te raziskave |
Zgodovinski števili izvirata iz raziskave Hamsherja in Bentona, katere povzetek izrecno omejuje sklep na pogoje raziskave. Ne smemo ju prenesti v sodobno brskalniško igro kot pravilo za potrditev zanesljivosti. Zanesljivost se nanaša na ponovljivost določenega rezultata, statistična moč pa na verjetnost zaznave določenega učinka. Gre za povezani, vendar različni vprašanji. de S. Hamsher et al., 1977 Miller, 2023
Zakaj ponavljanje iste naloge pomaga
Če bi bili preizkusi neodvisni vzorci z nespremenjeno variabilnostjo, bi bila standardna napaka njihovega povprečja enaka standardnemu odklonu posameznih preizkusov, deljenemu s kvadratnim korenom števila preizkusov. Štirikratno povečanje števila izhaja iz te formule. V resničnih preizkusih te predpostavke morda ne veljajo, saj se ljudje učijo, utrudijo ali spremenijo strategijo. Izračun števila preizkusov je zato model, ne zagotovilo, da bo osebni rezultat stabilen. Miller, 2023
Sodobna analiza števila preizkusov kaže tudi, da se lahko učinki spreminjajo z vajo. Več preizkusov ne pomeni preprosto več kopij nespremenjenega prvega preizkusa. Raziskovalni načrt mora določiti izid in upoštevati, kako se naloga spreminja med sejo. Miller, 2023
Kakšno zanesljivost želite?
Doslednost znotraj enega izvajanja se razlikuje od doslednosti med različnimi dnevi ali doslednosti pri razvrščanju ljudi. Raziskave paradoksa zanesljivosti dokumentirajo, da lahko naloge pokažejo izrazite skupinske učinke, hkrati pa manj zanesljivo merijo razlike med posamezniki. Velik povprečni učinek pri Stroopovem testu ali reakcijskem času še ne pomeni, da je kratek rezultat primeren za določanje percentila posameznika. Hedge et al., 2017
Kaj vpliva na to?
Povprečja, mediane in minimumi odgovarjajo na različna vprašanja
Najhitrejši odziv ocenjuje drugo značilnost izvedbe kot povprečje. Nanj še posebej vpliva število priložnosti. Počasni odstopajoči odzivi lahko zvišajo povprečje, njihovo odstranjevanje brez vnaprej določenega pravila pa lahko izkrivi rezultat. Raziskave odstopajočih vrednosti pri reakcijskem času so razlog, da pravila točkovanja določimo pred primerjavo izvajanj. Ratcliff, 1993
Raziskave spanja ponazarjajo, zakaj je izbira izida pomembna: raziskovalci psihomotorične budnosti ločujejo počasne odzive in izpade pozornosti od osrednjih povzetkov reakcijskega časa. Kratke igre, ki beležijo le najboljši rezultat iz več poskusov, ne moremo samodejno enačiti z dolgotrajno nalogo budnosti pri merjenju ranljivosti za pomanjkanje spanja. Basner et al., 2011
Kaj vpliva na navidezno potrebno število preizkusov?
Nihanje odzivnega časa naprave poveča variabilnost, stalna zakasnitev naprave pa povzroči pristranskost. Več preizkusov lahko pomaga pri prvi težavi, ne odpravi pa kalibracijske napake druge. To razlikovanje podpirajo tako ocene natančnosti merjenja časa kot rezultati laboratorijskih kalibracij. Anwyl-Irvine et al., 2020 Bridges et al., 2020 Woods et al., 2015
Za neformalno spremljanje izberite izvedljiv protokol, vsakič uporabite enako število poskusov in zabeležite vsa zaključena izvajanja, ne le osebnih rekordov. To obravnavajte kot način primerjave, ne kot potrjeno priporočilo za določeno najmanjše število. Če želite znanstveni percentil, naloga potrebuje reprezentativen normativni vzorec in izmerjeno zanesljivost, pa tudi dovolj preizkusov. Hedge et al., 2017 Miller, 2023
Starost, priprava in spanje lahko vplivajo na izvedbo med sejo ali med sejami. Če so pogoji približno enaki, je primerjavo lažje razložiti, vendar standardizacija ne spremeni rezultata iz brskalnika v klinično oceno. Woods et al., 2015 Basner et al., 2011
Preizkusite povezan brezplačen test
Test reakcijskega časa
Test reakcijskega časa vsakič opravite po enakih navodilih in z enakim načinom vnosa. Njegov kratek rezultat je uporaben za raziskovanje naloge. Raziskovalni protokol s 120 preizkusi je kontekst za merjenje, ne navodilo, da igro ponavljate, dokler ne dosežete izbranega rezultata.
Pogosta vprašanja
Ali zadostuje pet poskusov?
Z njimi lahko spoznate nalogo, vendar je treba zanesljivost za določeno osebno primerjavo preveriti. Pravilo petih poskusov ne velja za vse teste reakcijskega časa. Hedge et al., 2017
Ali naj uporabim svoj najhitrejši rezultat?
Samo če ste se odločili spremljati prav ta rezultat. Večje število poskusov poveča možnost, da dobite neobičajno hiter odziv. Ratcliff, 1993
Ali več podatkov vedno pomeni boljši test?
Ne nujno. Pomembni so število preizkusov in udeležencev, vaja, točkovanje ter proučevani učinek. Miller, 2023
Viri
- Woods et al. (2015). Dejavniki, ki vplivajo na latenco preprostega reakcijskega časa.
- Miller (2023). Koliko udeležencev? Koliko preizkusov? Povečanje statistične moči raziskav reakcijskega časa.
- de S. Hamsher et al. (1977). Zanesljivost meritev reakcijskega časa.
- Hedge et al. (2017). Paradoks zanesljivosti: zakaj robustne kognitivne naloge ne dajejo zanesljivih razlik med posamezniki.
- Ratcliff (1993). Metode za obravnavo odstopajočih vrednosti reakcijskega časa..
- Basner et al. (2011). Povečanje občutljivosti testa psihomotorične budnosti (PVT) na pomanjkanje spanja.
- Anwyl-Irvine et al. (2020). Realistična natančnost in točnost spletnih eksperimentalnih platform, brskalnikov in naprav.
- Bridges et al. (2020). Obsežna raziskava merjenja časa: primerjava različnih orodij za izvajanje poskusov v laboratoriju in na spletu.