Kiểm tra vốn từ vựng: phương pháp

Bài đo lường điều gì

Quy mô vốn từ tiếp nhận (nhận biết) tính theo mục từ, dựa trên tự báo cáo và được hiệu chỉnh theo các lần nhận nhầm từ giả. Không đo mức độ biết định nghĩa, khả năng tạo từ hay năng lực ngôn ngữ.

Quy trình

Tiếng Anh (phương pháp en-adaptive-1, danh sách en-1): bước 1 là bảng gồm 40 mục: 5 từ được chọn ngẫu nhiên từ mỗi trong 7 nhóm tần suất, cộng 5 từ giả, xáo trộn thứ tự; người chơi đánh dấu những từ mình biết ('có thể giải thích ít nhất một nghĩa'). Bước 2 là bảng gồm 60 mục mới: 4 từ mới trong mỗi nhóm, 25 từ bổ sung được đặt quanh nhóm mà tỷ lệ biết đã hiệu chỉnh ở bước 1 gần 50% nhất (trọng số giảm một nửa với mỗi nhóm cách xa), và 7 từ giả mới. Không có từ nào lặp lại. Không tính giờ; có thể đổi các dấu chọn trước khi nộp từng bước. Sau khi có kết quả, người chơi có thể trả lời các câu hỏi tùy chọn về nhóm tuổi, người bản ngữ hay người học, số năm học và tần suất đọc. Tiếng Đức, Tây Ban Nha, Pháp, Ý, Ba Lan, Bồ Đào Nha và Nga (danh sách *-1): từng từ xuất hiện một lần; 10 từ ngẫu nhiên từ mỗi trong 6 nhóm tần suất (60 từ thật) cộng 30 từ giả, xáo trộn thứ tự (90 mục); người chơi trả lời 'Tôi biết từ này' hoặc 'Từ bịa đặt'. Trước tiên có 2 từ thật và 2 từ giả để luyện tập, kèm phản hồi (có thể bỏ qua). Không tính giờ; rời khỏi thẻ trang không kết thúc lượt chơi.

Thông số

Chấm điểm

Với mỗi nhóm b: h = tỷ lệ từ thật trong nhóm được đánh dấu là đã biết (chỉ dùng từ trong step-2 tiếng Anh để lựa chọn thích ứng không làm lệch mức ước tính); f = tỷ lệ từ giả được đánh dấu là đã biết (tiếng Anh: toàn bộ 12 từ ở cả hai bước). Tỷ lệ đã biết p = (h − f) / (1 − f), giới hạn trong khoảng từ 0 đến 1 (bằng 0 nếu f = 1). Mức ước tính = tổng quy mô từng nhóm nhân với p, làm tròn đến 100 và giới hạn ở quy mô danh sách; giá trị cao hơn nghĩa là vốn từ lớn hơn. Khoảng ước tính tiếng Anh: 90% ở giữa của 4,000 lần mô phỏng (phân bố hậu nghiệm Beta Jeffreys cho tỷ lệ nhận biết của mỗi nhóm, một lần lấy mẫu Beta dùng chung cho tỷ lệ nhận nhầm, và độ bất định Beta về quy mô từng nhóm dựa trên đợt rà soát ban đầu gồm 70 ứng viên), được nới rộng để bao gồm mức ước tính; khi f = 1, khoảng này là toàn bộ danh sách. Khoảng ước tính ở ngôn ngữ khác: cộng trừ 1.645 sai số chuẩn nhị thức được cộng qua các nhóm. Ngôn ngữ khác còn có độ chính xác kiểu LexTALE = trung bình của tỷ lệ phần trăm từ thật được chấp nhận và tỷ lệ phần trăm từ giả bị từ chối. Bách phân vị tiếng Anh: tỷ lệ người chơi đủ điều kiện có mức ước tính thấp hơn nghiêm ngặt (theo phương pháp và danh sách hiện tại, kết quả đáng tin cậy, không có khả năng là tự động hóa, lần thử đủ điều kiện đầu tiên của mỗi người chơi); chỉ hiển thị cho nhóm có ít nhất 100 người. Nếu không, các số liệu nghiên cứu đã công bố được hiển thị làm bối cảnh.

Quy tắc về lượt thực hiện hợp lệ

Máy chủ dựng lại các mục từ mã khởi tạo của lượt chơi (thông tin mục nào là từ thật không được gửi đến trang, ngoại trừ phần luyện tập). Phải trả lời mọi mục; định dạng hai bước tiếng Anh yêu cầu chính xác 40 và 60 câu trả lời, không thể kết hợp với định dạng một bước. Kết quả có quá nhiều từ giả được đánh dấu là đã biết sẽ bị gắn cờ thiếu ổn định và không có bách phân vị. Máy chủ dựng lại từng lượt chơi từ nhật ký thô (và mã khởi tạo nếu có) rồi tự tính điểm; mọi thông tin trang đưa ra về câu trả lời đúng hoặc sai đều bị bỏ qua. Nhật ký vi phạm quy tắc trò chơi sẽ bị từ chối và không có dữ liệu nào được lưu. Lượt chơi đã lưu có thể mang cờ chất lượng không bao giờ hiển thị và không bao giờ ngăn trả kết quả: có từ 10 lượt chơi trở lên từ một địa chỉ IP, thiếu mã định danh khách truy cập, chuyển đổi thẻ trang và dấu hiệu tự động hóa (trình duyệt tự động, tốc độ bất khả thi, không có sự kiện nhập liệu, thời gian đều đặn như máy).

Khác biệt so với nhiệm vụ kinh điển

Các bài kiểm tra có/không dùng từ giả đã có từ công trình của Meara và Buxton (1987). LexTALE (Lemhöfer & Broersma 2012) là bài kiểm tra cố định gồm 60 mục, có điểm phần trăm đã được kiểm định; Brysbaert et al. (2016) ước tính quy mô vốn từ từ một tập dữ liệu trực tuyến rất lớn về mức độ biết từ, dùng từ điển khác và cách hiểu rộng hơn về việc biết một từ. Phương pháp ước tính này, các danh sách từ và thiết kế hai bước đều mới, chưa được hiệu chuẩn độc lập. Đơn vị đo là các mục từ viết riêng biệt, không phải họ từ như trong Bài kiểm tra quy mô vốn từ của Nation.

Giới hạn

Tự báo cáo: mỗi người có mức độ sẵn lòng đánh dấu một từ là đã biết khác nhau; từ giả chỉ hiệu chỉnh được một phần. Quy mô các nhóm được xác định từ những mẫu đã rà soát, không phải từ việc đếm toàn bộ từ điển. Danh sách và quy mô nhóm khác nhau giữa các ngôn ngữ, vì vậy không thể so sánh mức ước tính giữa các ngôn ngữ. Mối quan tâm chuyên môn và các thành tố từ quen thuộc làm thay đổi kết quả. Nhớ được từ ở lượt trước sẽ làm thay đổi kết quả ở các lượt sau. Bài kiểm tra không đo trí thông minh, độ trôi chảy hay sức khỏe. Người chơi dùng để so sánh là khách truy cập trang web, không phải chuẩn dân số.

Ngôn ngữ và tình trạng rà soát

Tiếng Anh (hai bước), cùng tiếng Đức, Tây Ban Nha, Pháp, Ý, Ba Lan, Bồ Đào Nha và Nga (một bước); các ngôn ngữ khác trên trang web dùng bài kiểm tra tiếng Anh. Từ thật: các mục từ Wiktionary (thông qua kaikki.org), xếp hạng theo tần suất từ (wordfreq 3.1.1), kèm một mẫu trong mỗi nhóm đã được rà soát thủ công; được chia sẻ theo giấy phép CC BY-SA 4.0 như yêu cầu của giấy phép. Từ giả được tạo riêng cho từng danh sách dựa trên mẫu chữ cái của danh sách đó và được rà soát thủ công.