Khi chọn bộ đề V-ACT, tôi ưu tiên bộ có hồ sơ cho biết đề gồm những kỹ năng nào, câu được thử với bao nhiêu bài làm và câu nào cần xem lại. Empire có bảng phân tích theo từng câu trên 5.503 bài, nên em có thể nhìn thấy quy trình đó. Với HSA và TSA, bước đầu vẫn là đối chiếu đúng định dạng của kỳ thi. Sau đó mới hỏi bộ đề đã được thử, chữa và sửa qua các phiên bản ra sao.
Đọc cả bộ đề trước khi soi hai câu
Hồ sơ Empire tách 120 câu thành bốn phần, mỗi phần 30 câu. Tỷ lệ đúng quan sát bình quân lần lượt là 64,4% ở Tiếng Việt, 55,7% ở Tiếng Anh, 57,3% ở Toán và 60,8% ở Tư duy khoa học. Trung vị hệ số phân biệt a trong bốn phần lần lượt khoảng 1,25, 2,66, 1,84 và 1,59. Các con số tóm tắt chính bộ đề và mẫu đã làm. Tỷ lệ đúng còn phụ thuộc vào nhóm người dự thi. Khi hai phần được hiệu chuẩn riêng, cũng cần đọc a theo thang của từng phần và dùng nó để tìm câu đáng xem trong phần đó.
Bảng gốc đánh dấu một câu có a dưới 0,5 và 17 câu có a trên 3. Có 17 phương án sai được dưới 5% lượt chọn, nằm ở 14 câu. Đây là tín hiệu sàng lọc, giúp người ra đề biết nên mở câu nào trước. Độ dốc quá cao đáng được đối chiếu với ngữ liệu và cụm câu. Một phương án rất ít được chọn cần xem lại mức độ hợp lý. Câu hỏi gắn cờ nên được đọc cùng văn bản đề, lời giải và dữ liệu của đợt thử lại trước khi quyết định sửa hay loại.
Độ phân biệt và tỷ lệ đúng của toàn bộ đề
| Phần · 30 câu | Đúng TB | a nhỏ nhất | a trung vị | a lớn nhất | a > 3 | c > 0,35 |
|---|---|---|---|---|---|---|
| Tiếng Việt | 64,4% | 0,47 | 1,25 | 4,35 | 1 | 3 |
| Tiếng Anh | 55,7% | 1,02 | 2,66 | 5,96 | 13 | 1 |
| Toán | 57,3% | 0,69 | 1,84 | 3,54 | 2 | 0 |
| Tư duy khoa học | 60,8% | 0,70 | 1,59 | 3,49 | 1 | 1 |
Hai cột cuối đếm số câu. Các ngưỡng là cờ nội bộ. Bảng đủ 120 câu ở phần dữ liệu kèm theo.
Câu 15 và câu 5 khác nhau ở đâu
Câu 15 Tiếng Việt có 1.750 bài chọn đúng A, bằng 31,8% toàn mẫu. Nhóm thấp đúng 28,8%, nhóm cao đúng 35,6%, chênh 6,8 điểm phần trăm. Hai nhóm được xác định bằng 29 câu Tiếng Việt còn lại. Phương án D thu hút 2.412 lượt, bằng 43,8% toàn mẫu. Trong nhóm cao, 47,0% chọn D, cao hơn 35,6% chọn đáp án A. Mô hình ước lượng a = 0,467, b = 6,154 và c = 0,276. Tín hiệu đáng chú ý nằm ở cả độ dốc thấp, vị trí độ khó rất xa và sức hút của D với nhóm làm tốt phần còn lại. Câu này cần kiểm lại khóa đáp án, cách hỏi và lý lẽ có thể khiến D được chọn.
Ở câu 5, 2.942 bài chọn đúng B, tương ứng 53,5%. Tỷ lệ đúng từ 40,6% ở nhóm thấp lên 69,7% ở nhóm cao, cách nhau 29,2 điểm phần trăm khi tính trước khi làm tròn. Phương án C được 29,7% toàn mẫu chọn, giảm từ 34,4% ở nhóm thấp xuống 21,5% ở nhóm cao. Phương án D chỉ có 175 lượt, khoảng 3,2% toàn mẫu. Mô hình cho a = 2,464, b = 0,977 và c = 0,412. Câu phân tách được hai nhóm rõ hơn câu 15. Người biên tập nên xem vì sao D ít thuyết phục và liệu có dấu hiệu giúp nhóm yếu loại trừ quá dễ. Muốn biết lý do thật, có thể đọc lời giải của học sinh rồi thử phiên bản sửa.
Hai câu Tiếng Việt cần rà theo hai hướng
| Câu | Đúng toàn mẫu | Đúng thấp | Đúng cao | a | b | c |
|---|---|---|---|---|---|---|
| 15 | 1.750 (31,8%) | 28,8% | 35,6% | 0,467 | 6,154 | 0,276 |
| 5 | 2.942 (53,5%) | 40,6% | 69,7% | 2,464 | 0,977 | 0,412 |
Nhóm thấp và cao dựa trên 29 câu Tiếng Việt còn lại. Cỡ nhóm ở câu 15 là 1.564 và 1.805, ở câu 5 là 1.625 và 1.708.
Từ đường xác suất đến quyết định sửa đề
Đặt hai câu lên cùng thang năng lực Tiếng Việt sẽ thấy độ dốc khác nhau. Từ θ = −2 đến θ = 2, xác suất đúng dự kiến của câu 15 chỉ đi từ 29,1% lên 36,7%. Câu 5 đi từ 41,2% lên 95,6%, tăng nhanh quanh vùng giữa. Các mốc này là tọa độ trên thang năng lực ước lượng, tách với tỷ lệ nhóm thấp và nhóm cao quan sát trực tiếp. Tham số c là mức xác suất nền theo mô hình khi năng lực rất thấp. Nó không cho biết có bao nhiêu em khoanh lụi. Nhìn đường xác suất bên cạnh bảng A–D giúp người đọc thấy câu nào cần rà soát sâu hơn và vì sao.
Sau khi rà soát, người biên soạn cần ghi rõ câu nào được giữ, câu nào chỉnh diễn đạt hoặc đổi phương án. Có câu phải kiểm lại đáp án hoặc tạm ngừng dùng để chấm. Câu đã sửa cần một đợt thử mới và mã phiên bản riêng. Khi nhận đề, em có thể hỏi câu đang làm thuộc bản nào. Bảng hiệu chuẩn chỉ áp dụng cho phiên bản được phân tích. Nếu đề mới thay ngữ liệu hoặc đáp án, việc kiểm lại quan trọng hơn việc lấy nguyên các tham số từ đề cũ.
Tỷ lệ đúng và đường xác suất của câu 15 và câu 5
Kiểm bộ đề của từng kỳ trước khi mua
Với V-ACT, xem ma trận 120 câu và số lượng câu theo kỹ năng, rồi xin một ví dụ người ra đề đã xử lý sau khi xem dữ liệu. Với HSA, kiểm câu điền đáp án, phần định lượng, phần định tính và đúng nhánh tự chọn. Đáp án cần kèm cách xử lý yêu cầu nhập kết quả. Với TSA, xem đề có đủ ba phần và giao diện cho phép tập thao tác, phân bổ thời gian như kỳ thi trên máy. Bảng Empire trong bài phân tích một đề V-ACT cụ thể. Khi chọn đề HSA hoặc TSA, yêu cầu bằng chứng phù hợp của bộ đề đó.
Một học sinh mới có thể làm thử một phần và xem lời chữa có giải thích các lựa chọn dễ nhầm hay chỉ đưa đáp án. Học sinh đã luyện nhiều nên thử câu mới cùng kỹ năng để kiểm mức độ vận dụng. Bộ đề phù hợp là bộ cho em đủ câu để rèn, biết câu nào vừa sức và có cách kiểm tra chất lượng câu trước khi dùng điểm để chọn lộ trình.
Kiểm bộ đề theo kỳ thi
| Kỳ thi | Việc cần kiểm |
|---|---|
| V-ACT | Đối chiếu ma trận 120 câu. Xem bản phân tích và một câu từng được rà soát. |
| HSA | Kiểm tra câu điền, đáp án và đề đúng nhánh tự chọn. |
| TSA | Kiểm tra ba phần, thời gian riêng và thao tác trên máy. |
Câu dùng để rèn và câu dùng để đo
Câu luyện có thể kèm gợi ý, chia bước hoặc minh họa từ dễ đến khó để học sinh học một cách giải mới. Câu dùng để đo cần được làm độc lập trong điều kiện đã định. Khi kiểm một bộ đề, hãy hỏi người biên soạn câu nào được dùng để rèn và đề nào được giữ để đo lại. Nếu đề tái kiểm tra chứa nhiều câu giáo viên đã chữa, điểm tăng có thể phản ánh việc nhớ đáp án. Câu khác ngữ liệu hoặc dữ kiện, cùng kỹ năng và có độ thử thách tương đương, cho thấy rõ hơn học sinh vận dụng được điều gì.
Tỷ lệ đúng toàn mẫu cũng không đủ để quyết định hai câu đo tốt như nhau. Câu 15 có xác suất đúng dự kiến thay đổi 7,5 điểm phần trăm khi tính trước khi làm tròn từ θ = −2 đến θ = 2. Câu 5 thay đổi 54,4 điểm phần trăm trong cùng khoảng trên thang Tiếng Việt. Thử đối chiếu khoảng thay đổi này với chênh lệch đúng giữa hai nhóm quan sát ở bảng. Chênh quan sát và chênh dự kiến dùng hai cách xác định năng lực khác nhau nên có thể khác nhau. Đặt hai loại số cạnh nhau để đọc xu hướng, rồi mở nội dung câu để xác định bước rà soát.
Cũng cần xem cách xác định nhóm trong tệp gốc. Nhóm thấp và cao được chọn theo điểm của các câu còn lại trong cùng phần, với quy tắc lấy khoảng 27% ở mỗi đầu và giữ các bài đồng hạng tại biên. Bởi vậy số bài của mỗi nhóm có thể thay đổi giữa hai câu. Chọn nhóm bằng các câu còn lại giúp giảm việc câu đang kiểm tự làm thay đổi nhóm của mình. Khi trích bảng để kiểm lại, cần giữ dòng mẫu số và chú thích cách chia nhóm, cùng số lượt và tỷ lệ chọn đáp án. AI có thể tính lại tỷ lệ 1.750 trên 5.503 của câu 15. Muốn giải thích vì sao học sinh chọn D, người kiểm cần đọc đề và cách làm thực tế.
Bảng thông số của 120 câu V-ACT
Thông số câu hỏi phần Tiếng Việt
| Câu | Số đúng | Tỷ lệ đúng | a | b | c |
|---|---|---|---|---|---|
| 1 | 3.022 | 54,9% | 1,454 | 0,775 | 0,350 |
| 2 | 3.612 | 65,6% | 2,446 | 0,678 | 0,517 |
| 3 | 2.003 | 36,4% | 2,269 | 1,322 | 0,257 |
| 4 | 2.728 | 49,6% | 1,268 | 0,975 | 0,301 |
| 5 | 2.942 | 53,5% | 2,464 | 0,977 | 0,412 |
| 6 | 1.892 | 34,4% | 4,345 | 1,202 | 0,249 |
| 7 | 2.810 | 51,1% | 2,200 | 1,006 | 0,379 |
| 8 | 3.140 | 57,1% | 1,421 | 0,568 | 0,331 |
| 9 | 4.142 | 75,3% | 0,864 | -1,457 | 0,012 |
| 10 | 4.152 | 75,4% | 1,083 | -1,255 | 0,006 |
| 11 | 2.678 | 48,7% | 1,797 | 0,829 | 0,294 |
| 12 | 3.251 | 59,1% | 0,630 | -0,609 | 0,008 |
| 13 | 4.435 | 80,6% | 1,208 | -1,481 | 0,002 |
| 14 | 4.635 | 84,2% | 1,015 | -1,941 | 0,012 |
| 15 | 1.750 | 31,8% | 0,467 | 6,154 | 0,276 |
| 16 | 3.690 | 67,1% | 1,393 | -0,027 | 0,328 |
| 17 | 2.633 | 47,8% | 1,579 | 0,707 | 0,239 |
| 18 | 4.617 | 83,9% | 1,005 | -1,939 | 0,004 |
| 19 | 4.079 | 74,1% | 0,940 | -1,303 | 0,006 |
| 20 | 3.354 | 60,9% | 1,031 | 0,380 | 0,325 |
| 21 | 3.389 | 61,6% | 1,088 | -0,020 | 0,222 |
| 22 | 3.637 | 66,1% | 1,228 | -0,529 | 0,095 |
| 23 | 4.417 | 80,3% | 1,697 | -0,883 | 0,250 |
| 24 | 3.907 | 71,0% | 1,388 | -0,793 | 0,047 |
| 25 | 4.152 | 75,4% | 0,984 | -0,985 | 0,199 |
| 26 | 4.687 | 85,2% | 1,499 | -1,587 | 0,002 |
| 27 | 3.955 | 71,9% | 1,083 | -1,052 | 0,003 |
| 28 | 4.590 | 83,4% | 1,643 | -1,198 | 0,177 |
| 29 | 4.117 | 74,8% | 1,237 | -1,117 | 0,003 |
| 30 | 3.841 | 69,8% | 1,017 | -0,964 | 0,014 |
Tỷ lệ đúng quan sát trên 5.503 bài.
Thông số câu hỏi phần Tiếng Anh
| Câu | Số đúng | Tỷ lệ đúng | a | b | c |
|---|---|---|---|---|---|
| 31 | 2.634 | 47,9% | 3,438 | 0,784 | 0,306 |
| 32 | 2.558 | 46,5% | 2,513 | 0,686 | 0,242 |
| 33 | 3.545 | 64,4% | 1,390 | -0,509 | 0,037 |
| 34 | 3.864 | 70,2% | 1,317 | -0,595 | 0,158 |
| 35 | 4.143 | 75,3% | 1,419 | -1,063 | 0,000 |
| 36 | 3.412 | 62,0% | 1,549 | 0,214 | 0,310 |
| 37 | 4.106 | 74,6% | 1,353 | -1,057 | 0,001 |
| 38 | 4.111 | 74,7% | 1,350 | -0,811 | 0,169 |
| 39 | 3.195 | 58,1% | 1,157 | -0,153 | 0,092 |
| 40 | 3.770 | 68,5% | 1,256 | -0,793 | 0,001 |
| 41 | 4.137 | 75,2% | 1,318 | -1,103 | 0,000 |
| 42 | 4.595 | 83,5% | 1,817 | -1,154 | 0,185 |
| 43 | 3.914 | 71,1% | 1,506 | -0,830 | 0,000 |
| 44 | 4.011 | 72,9% | 1,732 | -0,850 | 0,000 |
| 45 | 3.850 | 70,0% | 1,025 | -0,991 | 0,001 |
| 46 | 2.825 | 51,3% | 5,067 | 0,808 | 0,369 |
| 47 | 2.399 | 43,6% | 3,650 | 0,642 | 0,203 |
| 48 | 2.869 | 52,1% | 2,612 | 0,160 | 0,112 |
| 49 | 2.528 | 45,9% | 3,751 | 0,696 | 0,256 |
| 50 | 2.583 | 46,9% | 3,286 | 0,570 | 0,220 |
| 51 | 2.576 | 46,8% | 5,964 | 0,932 | 0,347 |
| 52 | 1.692 | 30,7% | 4,898 | 0,852 | 0,118 |
| 53 | 2.256 | 41,0% | 5,169 | 0,821 | 0,240 |
| 54 | 2.060 | 37,4% | 2,989 | 1,012 | 0,226 |
| 55 | 3.060 | 55,6% | 2,714 | 0,435 | 0,296 |
| 56 | 1.850 | 33,6% | 5,757 | 0,917 | 0,180 |
| 57 | 2.828 | 51,4% | 3,373 | 0,636 | 0,308 |
| 58 | 2.059 | 37,4% | 5,580 | 0,803 | 0,190 |
| 59 | 2.283 | 41,5% | 5,218 | 0,779 | 0,233 |
| 60 | 2.248 | 40,9% | 4,819 | 0,781 | 0,223 |
Tỷ lệ đúng quan sát trên 5.503 bài.
Thông số câu hỏi phần Toán
| Câu | Số đúng | Tỷ lệ đúng | a | b | c |
|---|---|---|---|---|---|
| 61 | 2.841 | 51,6% | 2,041 | 0,584 | 0,276 |
| 62 | 2.917 | 53,0% | 0,686 | 0,288 | 0,136 |
| 63 | 2.730 | 49,6% | 1,702 | 0,734 | 0,275 |
| 64 | 2.357 | 42,8% | 2,071 | 0,563 | 0,138 |
| 65 | 3.025 | 55,0% | 1,633 | 0,300 | 0,222 |
| 66 | 2.308 | 41,9% | 1,674 | 1,261 | 0,283 |
| 67 | 3.542 | 64,4% | 1,687 | -0,361 | 0,102 |
| 68 | 2.562 | 46,6% | 1,527 | 0,518 | 0,156 |
| 69 | 2.713 | 49,3% | 2,238 | 0,332 | 0,152 |
| 70 | 4.142 | 75,3% | 1,383 | -1,078 | 0,002 |
| 71 | 3.155 | 57,3% | 2,412 | 0,238 | 0,251 |
| 72 | 2.991 | 54,4% | 1,133 | 0,163 | 0,147 |
| 73 | 3.219 | 58,5% | 1,575 | -0,210 | 0,057 |
| 74 | 2.488 | 45,2% | 1,758 | 0,728 | 0,213 |
| 75 | 3.596 | 65,3% | 1,754 | -0,396 | 0,101 |
| 76 | 2.666 | 48,4% | 2,487 | 0,579 | 0,239 |
| 77 | 4.244 | 77,1% | 1,480 | -1,034 | 0,080 |
| 78 | 3.318 | 60,3% | 1,654 | -0,110 | 0,148 |
| 79 | 3.880 | 70,5% | 1,940 | -0,356 | 0,247 |
| 80 | 3.519 | 63,9% | 1,330 | -0,567 | 0,001 |
| 81 | 3.459 | 62,9% | 1,932 | 0,061 | 0,277 |
| 82 | 3.207 | 58,3% | 2,728 | 0,330 | 0,307 |
| 83 | 2.515 | 45,7% | 3,543 | 0,618 | 0,228 |
| 84 | 3.010 | 54,7% | 2,440 | 0,503 | 0,307 |
| 85 | 3.317 | 60,3% | 2,267 | -0,223 | 0,065 |
| 86 | 3.183 | 57,8% | 3,293 | 0,203 | 0,249 |
| 87 | 3.256 | 59,2% | 2,669 | 0,188 | 0,264 |
| 88 | 4.189 | 76,1% | 1,189 | -1,229 | 0,002 |
| 89 | 3.705 | 67,3% | 2,261 | -0,181 | 0,254 |
| 90 | 2.593 | 47,1% | 2,301 | 0,578 | 0,215 |
Tỷ lệ đúng quan sát trên 5.503 bài.
Thông số câu hỏi phần Tư duy khoa học
| Câu | Số đúng | Tỷ lệ đúng | a | b | c |
|---|---|---|---|---|---|
| 91 | 3.968 | 72,1% | 1,285 | -0,958 | 0,002 |
| 92 | 3.743 | 68,0% | 0,803 | -1,043 | 0,010 |
| 93 | 3.357 | 61,0% | 1,209 | -0,467 | 0,001 |
| 94 | 4.093 | 74,4% | 2,142 | -0,507 | 0,250 |
| 95 | 3.915 | 71,1% | 1,495 | -0,834 | 0,001 |
| 96 | 2.771 | 50,4% | 1,483 | 0,682 | 0,262 |
| 97 | 4.053 | 73,7% | 2,065 | -0,608 | 0,167 |
| 98 | 3.480 | 63,2% | 1,938 | -0,293 | 0,099 |
| 99 | 2.561 | 46,5% | 1,816 | 0,887 | 0,278 |
| 100 | 3.390 | 61,6% | 2,373 | 0,034 | 0,239 |
| 101 | 3.375 | 61,3% | 3,491 | -0,004 | 0,209 |
| 102 | 2.621 | 47,6% | 1,520 | 0,333 | 0,106 |
| 103 | 2.649 | 48,1% | 1,808 | 0,692 | 0,250 |
| 104 | 2.955 | 53,7% | 1,684 | -0,007 | 0,063 |
| 105 | 2.820 | 51,2% | 1,392 | 0,668 | 0,265 |
| 106 | 2.968 | 53,9% | 1,659 | 0,739 | 0,338 |
| 107 | 3.483 | 63,3% | 2,699 | 0,229 | 0,357 |
| 108 | 2.884 | 52,4% | 2,717 | 0,585 | 0,307 |
| 109 | 3.798 | 69,0% | 1,113 | -0,873 | 0,010 |
| 110 | 3.061 | 55,6% | 1,845 | 0,286 | 0,235 |
| 111 | 3.268 | 59,4% | 2,010 | 0,075 | 0,216 |
| 112 | 3.610 | 65,6% | 1,383 | -0,440 | 0,112 |
| 113 | 3.595 | 65,3% | 1,201 | -0,565 | 0,060 |
| 114 | 4.111 | 74,7% | 2,444 | -0,507 | 0,243 |
| 115 | 4.088 | 74,3% | 2,130 | -0,828 | 0,002 |
| 116 | 3.774 | 68,6% | 1,386 | -0,564 | 0,121 |
| 117 | 2.882 | 52,4% | 1,208 | 0,233 | 0,138 |
| 118 | 2.879 | 52,3% | 0,696 | 0,168 | 0,093 |
| 119 | 2.956 | 53,7% | 0,871 | -0,191 | 0,001 |
| 120 | 3.215 | 58,4% | 1,035 | -0,025 | 0,157 |
Tỷ lệ đúng quan sát trên 5.503 bài.