Pytania-pułapki na PES — gdy większość wybiera tę samą złą odpowiedź
W 900 z 8 714 pytań CEM jeden błędny wariant wybrało więcej lekarzy niż ten z Klucza. I pod tymi pytaniami pięć razy częściej ktoś zgłasza zastrzeżenie.
CEM publikuje po każdej sesji nie tylko to, ilu lekarzy zdało, ale i to, jaki odsetek zdających wybrał każdy wariant — także błędny. Z tego da się policzyć coś, czego zdawalność nie pokaże: pytania, w których jeden konkretny zły wariant wybrało więcej osób niż ten z Klucza. Nazywamy je pułapkami, bo nie są po prostu trudne — trudne pytanie rozprasza odpowiedzi, a pułapka skupia je nie tam, gdzie trzeba.
Na 8 954 pytań z 10 dziedzin — 921 pułapek, czyli 10 %. Mniej więcej co dziesiąte pytanie na egzaminie jest tak zbudowane, że większość zdających idzie za tą samą złą odpowiedzią. Najwięcej w dziedzinie chirurgia ogólna (15 %), najmniej w dziedzinie psychiatria (8 %).
Pod każdym pytaniem na stronie CEM można zgłosić zastrzeżenie — i czytelnicy z tego korzystają, powołując się na wytyczne albo na nowsze wydanie podręcznika. Wśród pułapek takie zastrzeżenie ma 19 % pytań (176), a wśród pozostałych — 4 %. To 5,0× więcej.
Innymi słowy: pytania, które skupiły większość zdających na jednej błędnej odpowiedzi, to w dużej mierze te same, pod którymi ktoś potem napisał, że się nie zgadza. Nie rozstrzygamy, kto miał rację — ani my, ani rozkład odpowiedzi tego nie mówi. To jest natomiast najlepsza lista miejsc, w których warto wiedzieć więcej niż „która litera”.
| Dziedzina | Pytań | Pułapek | Udział |
|---|---|---|---|
| Chirurgia ogólna | 594 | 90 | 15 % |
| Pediatria | 1 314 | 143 | 11 % |
| Ortopedia i traumatologia narządu ruchu | 715 | 77 | 11 % |
| Medycyna rodzinna | 1 195 | 124 | 10 % |
| Choroby wewnętrzne | 1 315 | 136 | 10 % |
| Kardiologia | 1 075 | 105 | 10 % |
| Anestezjologia i intensywna terapia | 839 | 81 | 10 % |
| Położnictwo i ginekologia | 829 | 78 | 9 % |
| Radiologia i diagnostyka obrazowa | 240 | 21 | 9 % |
| Psychiatria | 838 | 66 | 8 % |
Liczymy tylko sesje, w których do egzaminu podeszło co najmniej 100 osób — i to nie jest kosmetyka. W małych dziedzinach sesję zdaje kilkanaście osób, więc jeden człowiek waży kilkanaście punktów procentowych, a „poprawnej odpowiedzi nie wybrał nikt” znaczy tylko tyle, że nie wybrał jej nikt z ośmiu. Dlatego 31 dziedzin wypada z tabeli w całości: żadna ich sesja nie dobiła do 100 zdających.
Ile w tych odsetkach jest szumu, widać na przykładzie dziedziny chirurgia ogólna: licząc wszystkie sesje, wychodzi 14 % i 7. miejsce — a po odcięciu małych sesji 15 % i miejsce 1. z 10. Ta sama dziedzina, te same pytania; różni się wyłącznie to, czy do średniej wpuszczamy sesje, w których zdawało kilkanaście osób.
Pułapka to nie to samo co pytanie źle ułożone. Rozkład odpowiedzi mówi, co wybrali zdający — nie mówi, kto miał rację. Pytania unieważnione przez CEM nie wchodzą do żadnej kolumny.
W PEStce ta statystyka stoi przy każdym pytaniu osobno — widać, ile procent zdających wybrało każdy wariant, więc pułapkę poznajesz od razu, zanim odpowiesz. Zobacz pytania.
Źródło: Centrum Egzaminów Medycznych, cem.edu.pl/pytcem. Treść i klucz przytoczone dosłownie. CEM zastrzega, że mogą być nieaktualne względem bieżącej wiedzy medycznej. PEStka jest niezależnym serwisem edukacyjnym i nie reprezentuje CEM.