Izziv družabnih oblik: metodologija

Kaj meri

Socialna inteligentnost / mentalizacija: sklepanje o namerah, odnosih in čustvih na podlagi gibanja preprostih geometrijskih oblik. Posnetki ne vsebujejo obrazov, glasov ali besed; vprašanja in možnosti odgovorov so besedilni.

Postopek

14 nemih animacij (vsaka traja približno 10 do 23 s), prikazanih v določenem vrstnem redu. Preden lahko odgovorite, se mora vsak posnetek predvajati do konca. Nato sledi eno vprašanje z več možnimi odgovori in 4 možnostmi. Posnetek si lahko ogledate znova, vrnete pa se lahko tudi na prejšnja vprašanja in spremenite odgovor. Časovna omejitev ne velja, poskusne postavke ni, med izvajanjem pa ni povratnih informacij. Odgovarjate z dotikom ali klikom oziroma s tipkovnico (Tab in puščične tipke, nato Naprej). Za rezultat morate odgovoriti na vseh 14 vprašanj.

Parametri

Točkovanje

Število odgovorov, ki se ujemajo z izvirnim ključem, od 0 do 14; več je bolje. Rezultati se ne delijo na podrezultate in se ne pretvarjajo v metriko, podobno IQ. Primerjava z drugimi igralci je prikazana le kot razred (pod običajnim = pod 25. percentilom, običajen, nad običajnim = nad 75. percentilom), ko je na voljo 100 primerljivih igralcev; pred tem stran prikaže število sodelujočih. Pri primerjavi se upoštevajo samo prvi poskusi brez oznak kakovosti, z enako različico točkovalnika in enakimi nastavitvami izvajanja (brez prejšnjih poskusov istega obiskovalca, računa ali naslova IP in naprave).

Pravila za veljaven potek

Za vsako postavko je potreben natanko en odgovor, različica nabora postavk pa se mora ujemati s trenutno različico (sicer je treba stran znova naložiti). Odgovor je zavrnjen, če posnetek ni označen kot ogledan ali če je bil čas na postavki krajši od trajanja posnetka (ob 250 ms tolerance zaradi razlik med video vsebniki). Oznaka kakovosti »prehitro« se dodeli, če je bilo vsaj polovica odgovorov podanih v 700 ms od prikaza postavke. Strežnik vsak poskus znova sestavi iz neobdelanega dnevnika (in začetne vrednosti poskusa, če jo ta vsebuje) ter sam izračuna rezultat; navedbe strani o pravilnih ali napačnih odgovorih se prezrejo. Dnevnik, ki krši pravila igre, se zavrne in nič se ne shrani. Shranjeni poskusi lahko vsebujejo oznake kakovosti, ki niso nikoli prikazane in ne preprečijo prikaza rezultata: 10 ali več poskusov z enega naslova IP, manjkajoč ID obiskovalca, preklapljanje med zavihki in znaki avtomatizacije (avtomatiziran brskalnik, nemogoča hitrost, brez vnosnih dogodkov, strojno enakomerni časovni razmiki).

Razlike od klasične naloge

Objavljeni Social Shapes Test uporablja določene oblike (končni nabor z 23 postavkami in dve vzporedni obliki s po 14 postavkami). Ta stran uporablja svoj izbor 14 točkovanih postavk iz končnega nabora z 23 postavkami, ki se ne ujema z nobeno vzporedno obliko. Ponovni ogled in vračanje sta dovoljena. Objavljeni podatki o zanesljivosti, veljavnosti in normah ne veljajo za ta izbor ali prevode; rezultati se primerjajo samo z rezultati drugih uporabnikov te strani.

Omejitve

Preizkus poteka brez nadzora in časovne omejitve. Na rezultat vplivata bralna spretnost in jezik vprašanj, prevodi pa niso bili potrjeni. Poznavanje zgodb olajša drugi poskus. S 14 postavkami in 4 možnostmi je meritev pri enem poskusu groba. Z njo ni mogoče diagnosticirati avtizma ali katerega koli drugega stanja, prav tako ne opiše, kako se oseba vede v resničnih pogovorih. Igralci za primerjavo so obiskovalci strani in ne reprezentativen vzorec.

Jeziki in stanje pregleda

Animacije so neme in v vseh jezikih enake. Besedilo vprašanj in možnosti odgovorov: izvirnik v angleščini ter še 99 jezikov (strojno podprto prevajanje, avtomatizirano preverjanje skript in črkovanja ter primerjava z besedilnimi korpusi naravnih govorcev). Prevodi ohranjajo izvirni ključ odgovorov in vrstni red možnosti.