Клучни докази и бројки
| Пример | Број | Што утврдува |
|---|---|---|
| Постапка за едноставна реакција на Woods | 20 обиди за вежбање, 120 обиди за тестирање | Еден објавен протокол, а не универзален минимум |
| Илустративна пресметка со независни обиди | 4 пати повеќе обиди | Ја преполовува стандардната грешка ако варијабилноста остане иста |
| Историска студија за веродостојност | 18 едноставни, 30 обиди со два избора | Доволно под конкретните услови на таа студија |
Историските бројки доаѓаат од Hamsher и Benton, чиј апстракт експлицитно го ограничува заклучокот на условите на студијата. Тие не треба да се пренесуваат во современа игра во прелистувач како правило за сертификација. Веродостојноста се однесува на повторливоста на дефиниран резултат; моќта се однесува на веројатноста да се открие дефиниран ефект. Тие се поврзани, но различни прашања. de S. Hamsher et al., 1977 Miller, 2023
Зошто помага повторувањето на истата задача
Ако обидите беа независни извлекувања со непроменета варијабилност, стандардната грешка на нивната средна вредност би била еднаква на стандардното отстапување на обидите поделено со квадратниот корен од бројот на обиди. Примерот со четири пати повеќе обиди произлегува од таа формула. Вистинските обиди можат да ги прекршат тие претпоставки бидејќи луѓето учат, се заморуваат или ја менуваат стратегијата. Пресметката на бројот на обиди е затоа модел, а не гаранција за стабилен личен резултат. Miller, 2023
Современата анализа на бројот на обиди исто така покажува дека ефектите сами по себе можат да се менуваат со вежбање. Повеќе обиди не создаваат едноставно повеќе копии од непроменливиот прв обид. Истражувачкиот дизајн мора да избере исход и да го земе предвид однесувањето на задачата во текот на сесијата. Miller, 2023
Каква веродостојност сакаш?
Доследноста во едно извршување е различна од доследноста низ денови или доследноста при рангирање на луѓе. Литературата за парадоксот на веродостојноста документира како задачите можат да покажат стабилни групни ефекти, а да даваат помалку веродостојни индивидуални разлики. Голем просечен ефект кај Струпов тест или при реакција не прави краткиот резултат автоматски погоден за доделување на нечиј перцентил. Hedge et al., 2017
Што влијае врз тоа?
Средни вредности, медијани и минимуми одговараат на различни прашања
Најбрзиот одговор проценува различно својство на изведбата отколку средната вредност. Тој е особено чувствителен на тоа колку шанси си даваш себеси. Бавните екстремни вредности можат да ја повлечат средната вредност нагоре, додека нивното бришење без однапред определено правило може да го пристрасти резултатот. Истражувањата за екстремните вредности во времето на реакција се причина да се одржат правилата за оценување фиксни пред да се споредат извршувањата. Ratcliff, 1993
Литературата за спиење илустрира зошто изборот на исход е важен: истражувачите на психомоторната будност ги разликуваат бавните одговори и пропустите од централните резимеа на времето на реакција. Не може да се претпостави дека кратка игра „најдобар од неколку обиди“ ја доловува истата ранливост на недоволен сон како задачата за одржана будност. Basner et al., 2011
Што го менува очигледниот потребен број обиди?
Нестабилноста на тајмингот на уредот додава варијабилност, а фиксното доцнење на уредот додава пристрасност. Повеќе обиди можат да помогнат со првото, но не го отстрануваат со калибрација второто. И проценките на тајмингот и резултатите од лабораториската калибрација поддржуваат разликување на тие извори на грешка. Anwyl-Irvine et al., 2020 Bridges et al., 2020 Woods et al., 2015
За неформално следење, избери протокол што можеш да го спроведеш, користи ист број обиди секој пат и запишувај ги сите завршени извршувања, а не само личните рекорди. Сметај го ова како метод за споредба, а не како потврден рецепт за конкретен минимум. Ако целта е научен перцентил, задачата бара репрезентативен нормативен примерок и измерена веродостојност, како и доволно обиди. Hedge et al., 2017 Miller, 2023
Возраста, подготвеноста и спиењето исто така можат да ја променат изведбата за време на или помеѓу сесиите. Одржувањето на условите разумно стабилни ја олеснува интерпретацијата на споредбата, но никаква стандардизација не претвора резултатот од прелистувач во клиничка проценка. Woods et al., 2015 Basner et al., 2011
Пробај го поврзаниот бесплатен тест
Тест за време на реакција
Обиди го тестот за време на реакција со исти упатства и ист начин на внесување секој пат. Неговиот краток резултат е корисен за истражување на задачата. Истражувачкиот протокол со 120 обиди е контекст за мерењето, а не упатство да ја повторуваш играта додека не постигнеш избран резултат.
Чести прашања
Дали се доволни пет обиди?
Тие можат да ја прикажат задачата, но нивната веродостојност за конкретна лична споредба мора да се тестира. Не постои правило за пет обиди што важи за сите тестови за реакција. Hedge et al., 2017
Дали да го користам најбрзиот резултат?
Само ако тоа е резултатот што реши да го следиш. Зголемувањето на бројот на обиди ја менува можноста да се добие невообичаено брз одговор. Ratcliff, 1993
Дали повеќе податоци секогаш значат подобар тест?
Не автоматски. Важни се бројот на обиди, бројот на учесници, вежбањето, оценувањето и ефектот што се проучува. Miller, 2023
Извори
- Woods et al. (2015). Фактори што влијаат на латентноста на едноставното време на реакција.
- Miller (2023). Колку учесници? Колку обиди? Максимизирање на моќта на студиите за време на реакција.
- de S. Hamsher et al. (1977). Веродостојноста на одредувањата на времето на реакција.
- Hedge et al. (2017). Парадоксот на веродостојноста: Зошто робусните когнитивни задачи не даваат веродостојни индивидуални разлики.
- Ratcliff (1993). Методи за справување со екстремните вредности во времето на реакција..
- Basner et al. (2011). Максимизирање на чувствителноста на тестот за психомоторна будност (PVT) на загубата на сон.
- Anwyl-Irvine et al. (2020). Реална прецизност и точност на онлајн платформите за експерименти, веб-прелистувачите и уредите.
- Bridges et al. (2020). Мега-студијата за тајминг: споредба на низа генератори на експерименти, и лабораториски и онлајн.
