Test de vocabulario: método

Qué mide

Tamaño del vocabulario receptivo (de reconocimiento), en lemas, según autoinforme corregido por falsas alarmas ante pseudopalabras. No mide el conocimiento de definiciones, la producción ni el dominio del idioma.

Procedimiento

Inglés (método en-adaptive-1, lista en-1): el paso 1 es una cuadrícula de 40 elementos: 5 palabras aleatorias de cada uno de 7 tramos de frecuencia y 5 pseudopalabras, en orden aleatorio; el jugador marca las palabras que conoce («podría explicar al menos un significado»). El paso 2 es una cuadrícula de 60 elementos nuevos: 4 palabras nuevas por tramo, 25 palabras adicionales alrededor del tramo donde la proporción corregida de palabras conocidas en el paso 1 esté más cerca del 50% (las ponderaciones se reducen a la mitad por cada tramo de distancia) y 7 pseudopalabras nuevas. No se repite ninguna palabra. Sin límite de tiempo; las marcas se pueden cambiar antes de enviar cada paso. Preguntas opcionales después del resultado: grupo de edad, hablante nativo o aprendiz, años de aprendizaje, frecuencia de lectura. Alemán, español, francés, italiano, polaco, portugués y ruso (listas *-1): una palabra a la vez, 10 palabras aleatorias de cada uno de 6 tramos de frecuencia (60 palabras reales) más 30 pseudopalabras, en orden aleatorio (90 elementos); el jugador responde «La conozco» o «Inventada». Primero se muestran 2 palabras reales y 2 pseudopalabras de práctica con comentarios (se pueden omitir). Sin límite de tiempo; salir de la pestaña no termina la prueba.

Parámetros

Puntuación

Para cada tramo b: h = proporción de palabras reales del tramo marcadas como conocidas (en inglés, solo palabras step-2, para que la selección adaptativa no sesgue la estimación); f = proporción de pseudopalabras marcadas como conocidas (en inglés, las 12 de ambos pasos). La proporción conocida p = (h − f) / (1 − f), limitada al intervalo de 0 a 1 (0 si f = 1). Estimación = suma, para todos los tramos, del tamaño del tramo x p; se redondea a 100 y se limita al tamaño de la lista; un valor más alto indica un vocabulario mayor. Intervalo en inglés: 90% central de 4,000 simulaciones (distribuciones Beta de Jeffreys posteriores para la tasa de aciertos de cada tramo, una extracción Beta compartida para la tasa de falsas alarmas e incertidumbre Beta sobre el tamaño de cada tramo a partir de la revisión original de 70 candidatos), ampliado para incluir la estimación; si f = 1, el intervalo abarca toda la lista. Intervalo en otros idiomas: más o menos 1.645 errores estándar binomiales sumados entre tramos. En otros idiomas también se calcula una precisión al estilo de LexTALE = media del porcentaje de palabras reales aceptadas y del porcentaje de pseudopalabras rechazadas. Percentiles en inglés: proporción de jugadores elegibles cuya puntuación es estrictamente inferior a la estimación (método y lista actuales, resultados fiables, sin indicios de automatización, primer intento elegible por jugador); se muestra solo para grupos de al menos 100 personas; de lo contrario, se muestran como contexto cifras de investigaciones publicadas.

Criterios de validez de una ejecución

El servidor reconstruye los elementos a partir de la semilla de la partida (la página nunca recibe información sobre cuáles son reales, salvo durante la práctica). Hay que responder a todos los elementos; el formato inglés de 2 pasos requiere exactamente 40 y 60 respuestas y no se puede mezclar con el formato de 1 paso. Los resultados con demasiadas pseudopalabras marcadas como conocidas se señalan como poco fiables y no reciben percentil. El servidor reconstruye cada partida a partir del registro sin procesar (y de la semilla, si la hay) y calcula la puntuación; ignora cualquier indicación de la página sobre respuestas correctas o incorrectas. Se rechaza todo registro que infrinja las reglas del juego y no se guarda nada. Las partidas guardadas pueden incluir indicadores de calidad que nunca se muestran y nunca impiden obtener un resultado: 10 o más partidas desde una misma dirección IP, falta de identificador de visitante, cambios de pestaña y señales de automatización (navegador automatizado, velocidad imposible, ausencia de eventos de entrada, tiempos regulares propios de una máquina).

Diferencias con la tarea clásica

Las pruebas de sí/no con pseudopalabras se remontan a Meara y Buxton (1987). LexTALE (Lemhöfer & Broersma 2012) es una prueba fija de 60 elementos con una puntuación porcentual validada; Brysbaert et al. (2016) estimaron el tamaño del vocabulario a partir de un conjunto de datos en línea muy amplio sobre conocimiento de palabras, con un diccionario diferente y un criterio más flexible para considerar que se conoce una palabra. Este estimador, sus listas y su diseño de 2 pasos son nuevos y no se han calibrado de forma independiente. La unidad son los lemas escritos distintos, no las familias de palabras, como en el Test de tamaño del vocabulario de Nation.

Limitaciones

Autoinforme: las personas difieren en la facilidad con que marcan una palabra como conocida, y las pseudopalabras solo corrigen esto en parte. El tamaño de los tramos se basa en muestras revisadas, no en un recuento completo del diccionario. Las listas y el tamaño de los tramos varían entre idiomas, por lo que las estimaciones no son comparables entre ellos. Los intereses especializados y las partes de palabras familiares pueden cambiar el resultado. Recordar palabras de una partida anterior cambia los resultados posteriores. No mide la inteligencia, la fluidez ni la salud. Los jugadores de comparación son visitantes del sitio, no normas poblacionales.

Idiomas y estado de revisión

Inglés (2 pasos), además de alemán, español, francés, italiano, polaco, portugués y ruso (1 paso); en los demás idiomas del sitio se muestra la prueba de inglés. Palabras reales: lemas de Wiktionary (a través de kaikki.org) clasificados por frecuencia de uso (wordfreq 3.1.1), con una muestra revisada manualmente por tramo; compartidos bajo la licencia CC BY-SA 4.0, como exige la licencia. Las pseudopalabras se crearon para cada lista a partir de sus patrones de letras y se revisaron manualmente.