Berapa banyak percubaan diperlukan supaya ujian masa tindak balas boleh dipercayai?

Bilangan terdahulu itu datang daripada Hamsher dan Benton, yang abstraknya secara jelas mengehadkan kesimpulan kepada keadaan kajian tersebut. Bilangan itu tidak patut dijadikan peraturan pensijilan untuk permainan pelayar moden. Kebolehpercayaan merujuk kepada kebolehulangan skor yang ditakrifkan; kuasa merujuk kepada kebarangkalian mengesan kesan yang ditakrifkan. Kedua-duanya berkaitan tetapi merupakan persoalan yang berbeza. de S. Hamsher et al., 1977 Miller, 2023

Mengapa mengulang tugasan yang sama membantu

Jika percubaan ialah cabutan bebas dengan kebolehubahan yang tidak berubah, ralat piawai bagi min adalah sama dengan sisihan piawai percubaan dibahagikan dengan punca kuasa dua bilangan percubaan. Contoh empat kali ganda terhasil daripada formula itu. Percubaan sebenar mungkin tidak memenuhi andaian tersebut kerana orang belajar, letih atau mengubah strategi. Oleh itu, pengiraan bilangan percubaan ialah model, bukannya jaminan bahawa skor individu akan stabil. Miller, 2023

Analisis bilangan percubaan moden juga menunjukkan bahawa kesan itu sendiri boleh berubah dengan latihan. Lebih banyak percubaan tidak sekadar menghasilkan lebih banyak salinan percubaan pertama yang tidak berubah. Reka bentuk kajian perlu memilih hasil dan mengambil kira tingkah laku tugasan sepanjang sesi. Miller, 2023

Apakah jenis kebolehpercayaan yang anda inginkan?

Kekonsistenan dalam satu sesi berbeza daripada kekonsistenan antara hari atau kekonsistenan dalam kedudukan relatif seseorang. Kajian tentang paradoks kebolehpercayaan mendapati bahawa tugasan boleh menunjukkan kesan kumpulan yang kukuh sambil menghasilkan perbezaan individu yang kurang boleh dipercayai. Kesan purata Stroop atau tindak balas yang besar tidak semestinya menjadikan skor singkat sesuai untuk menentukan persentil seseorang. Hedge et al., 2017

Min, median dan nilai minimum menjawab soalan yang berbeza

Respons terpantas menganggar ciri prestasi yang berbeza daripada min. Ukuran ini amat dipengaruhi oleh bilangan peluang yang diberikan kepada diri sendiri. Nilai luar yang perlahan boleh menaikkan min, manakala membuangnya tanpa peraturan yang ditetapkan terlebih dahulu boleh memesongkan hasil. Kajian tentang nilai luar masa tindak balas menunjukkan sebab peraturan pemarkahan perlu ditetapkan sebelum membandingkan sesi. Ratcliff, 1993

Kajian tidur menunjukkan mengapa pemilihan hasil penting: penyelidik kewaspadaan psikomotor membezakan respons perlahan dan kelalaian daripada ringkasan masa tindak balas pusat. Permainan ringkas yang hanya mengambil keputusan terbaik daripada beberapa percubaan tidak boleh dianggap mengukur kerentanan terhadap kekurangan tidur dengan cara yang sama seperti tugasan kewaspadaan berterusan. Basner et al., 2011

Apakah yang mengubah anggaran bilangan percubaan yang diperlukan?

Ketidakstabilan masa peranti menambah kebolehubahan, manakala kelewatan peranti yang tetap menambah bias. Lebih banyak percubaan boleh membantu mengatasi yang pertama, tetapi tidak membetulkan yang kedua melalui kalibrasi. Penilaian masa dan hasil kalibrasi makmal sama-sama menyokong pembezaan antara punca ralat ini. Anwyl-Irvine et al., 2020 Bridges et al., 2020 Woods et al., 2015

Untuk menjejaki prestasi secara tidak formal, pilih protokol yang mudah diikuti, gunakan bilangan percubaan yang sama setiap kali dan catat semua sesi yang diselesaikan, bukan hanya rekod peribadi. Anggap ini sebagai kaedah perbandingan, bukan saranan yang disahkan tentang bilangan minimum tertentu. Jika matlamatnya ialah persentil saintifik, tugasan itu memerlukan sampel norma yang mewakili populasi dan ukuran kebolehpercayaan, selain percubaan yang mencukupi. Hedge et al., 2017 Miller, 2023

Umur, persediaan dan tidur juga boleh mengubah prestasi semasa atau antara sesi. Mengekalkan keadaan yang agak seragam memudahkan tafsiran perbandingan, tetapi penyeragaman sebanyak mana pun tidak menjadikan keputusan pelayar suatu penilaian klinikal. Woods et al., 2015 Basner et al., 2011