Глава III. Тестовый экзамен, методика проведения и его анализ

Тестовый экзамен с применением вопросов множественного выбора имеет явные преимущества по сравнению с устным. Во-первых, он проводится для всего потока в один день, во-вторых, психологические нагрузки отвечающих значительно меньше, чем при устном ответе, в-третьих, тестовый экзамен позволяет прове­сти анализ с применением математических выкладок, что объек­тивно характеризует ориентацию студентов в изучаемом пред­мете.

Для проведения экзамена необходимо изготовить несколько вариантов экзаменационных работ. Более чем 20-летний опыт проведения тестового экзамена показал, что для этого необходи­мо составить не менее 5 вариантов, каждый из которых состоит из 100 вопросов. Меньшее количество вариантов может способ­ствовать списыванию отвечающими друг у друга, большее же их число затруднит проведение анализа экзаменационной сессии. Для подготовки и ответа выделяется 3 часа, после чего варианты собираются для проверки. Каждый из вариантов должен содер­жать одинаковое количество вопросов по различным темам. Структура вариантов может быть составлена следующим обра­зом: 1—10-й вопросы выделены для общей тематики: волемические изменения при различной патологии, КЩС, определение группы крови, осложнения при переливании крови и пр.; 11—22-й вопросы относятся к патологии заболеваний легких; 23—27-й — заболевания щитовидной железы; 28—30-й — заболевания молоч­ной железы; 31—42-й—заболевания пищевода и желудка; 43—

52-й—патология желчного пузыря и поджелудочной железы;

53—57-й—патология червеобразного отростка; 58—67-й—воп­росы острой кишечной непроходимости и перитонита; 68—77-й— патология ободочной и прямой кишок; 78—87-й—патология со­судов; 88—92-й—грыжи и 93—100-й—прочие заболевания. Есте­ственно, структура вариантов может быть иной в зависимости от научной направленности кафедры. Каждые 3—4 года приходится создавать новые варианты, так как старые часто становятся до­стоянием студенческой аудитории, что приводит к потере объек­тивности тестов. Наличие банка вопросов по различным заболе­ваниям значительно упростит эту довольно трудоемкую про­цедуру.

Матрицей для математического анализа является общий лист с цифровым перечислением всех 100 вопросов и пунктов а, б, в, г, д, один из которых, являющийся, по мнению экзаменующегося, правильным, зачеркивается (схема 1). На контрольный лист на­кладывается прозрачный трафарет, изготовленный, например, из отмытой рентгенологической пленки, на котором в виде кружоч­ка или крестика наносится правильный ответ. Эти трафареты хра­нятся в сейфе у наиболее ответственного лица кафедры и разда­ются преподавателям непосредственно перед проверкой работ. В связи с тем, что окончательный ответ однозначен, количество ошибок может быть от 1 до 100.

Цели математического анализа экзаменационной сессии пока­заны на схеме 2. Одним из самых важных и наглядных показа­телей является установление компетентности студентов в вопро­сах хирургии (схема 2).

Математический анализ начинается с подсчета в каждой рабо­те количества ошибок. Это один из самых трудоемких моментов технической обработки материала. Сводное количество ошибок, деленное на число отвечающих, дает среднюю ошибку. Этот по­казатель позволяет ориентировочно судить о результате экзаме­национной сессии, сравнить его с соответствующими результата­ми в предыдущие годы. Подобное же вычисление в каждом вари­анте характеризует степень их трудности для студента. Средняя ошибка каждого варианта, так же как и средняя ошибка курса, выраженные графически в сопоставлении с данными по несколь­ким сессиям, наглядно отражают степень подготовленности пото­ка и трудность вариантов для отвечающих в настоящем году. Анализ экзаменационных работ в зависимости от количества ошибок является стабильным и достаточно информативным. Тра­диционно выделены следующие работы: от 1 до 15 ошибок, от 16 до 25, от 26 до 30, от 31 до 40 и от 41 ошибки и больше. Процент­ное соотношение этих работ детально характеризует ориентацию студентов в изучаемом предмете, позволяет выделить число неус­певающих и отличников. Подобное же вычисление проводится в каждом варианте, что дополнительно характеризует эти варианты по степени трудности.

Конечным этапом анализа экзаменационной сессии по выявле­нию знаний студентов является определение коэффициента неос­ведомленности студентов, вычисляемого по формуле:

Общее количество ошибок по теме (варианту)

КН=---------------------------------------------------------

Количество вопросов в теме (варианте)* число отвечающих

Не претендуя на математическую обоснованность, коэффици­ент неосведомленности позволяет не только выявить общую ори­ентированность студентов в хирургии и трудность каждого вари­анта для отвечающих, но и, что более важно, определить осведом­ленность студентов по каждой теме в отдельности. Например, по заболеваниям периферических сосудов в варианте А допущено 129 ошибок 36 отвечающим.

В этом варианте данной патологии уделено 10 вопросов. Сле­довательно:

КН=-------=0,36

10*36

 

Сопоставляя величины К.Н по каждой теме, можно выделить наиболее и наименее информативные из них и сделать соответ­ствующие выводы. Более полная характеристика знаний студен­та может быть получена при сравнении результатов экзаменаци­онной сессии с успеваемостью в течение года, так как различные причины (болезнь учащегося, прогулы, непосещение лекций) найдут отражение в экзаменационных ответах на эту тему.

Важным аспектом анализа экзаменационных вариантов явля­ется выявление качества составленных вопросов — валидность экзаменационных тестов (схема 3).

СХЕМА 1

2-й МОЛГМИ. Кафедра хирургических болезней № 3 лечебного факультета

КОНТРОЛЬНЫЙ ЛИСТ

Группа ___________Ф.И.О. _________________

Вариант _______Преподаватель_________________

Заполняется на кафедре (для компьютерной обработки) Код группы ___Номер студента___Номер варианта. Количество ошибок Резерв-1 _____Резерв-2 ____

1абвгд 26абвгд 51 а б в г д 76 а б в г д

2абвгд 27абвгд 52абвгд 77абвгд

Забвгд 28абвгд 53 а б в г д 78абвгд

4абвгд 29 а б в г д 54абвгд 79абвгд

5 а б в г д 30абвгд 55абвгд 80абвгд

бабвгд 31абвгд 56 а б в г д 81абвгд

7абвгд 32абвгд 57абвгд 82абвгд

8абвгд ЗЗабвгд 58абвгд 83абвгд

9абвгд 34абвгд 59абвгд 84абвгд

Юабвгд 35 а б в г д 60абвгд 85абвгд

Набвгд Збабвгд 61 а б в г д 86абвгд

12 а б в г д 37абвгд 62 а б в г д 87абвгд

13абвгд 38абвгд бЗабвгд 88абвгд

14 а б в т д 39абвгд 64абвгд 89абвгд

15 аб в г д 40 а б в г д 65 а б в г д 90 а б в г д

16абвгд 41абвгд 66 а б в г д 91абвгд

17абвгд 42абвгд 67абвгд 92абвгд

18абвгд 43абвгд 68 а б в г д 93абвгд

19абвгд 44абвгд 69 а б в г д 94абвгд

20абвгд 45абвгд 70абвгд 95абвгд

21абвгд 46абвгд 71 а б в-г д 96 а б в г д

22абвгд 47абвгд 72абвгд 97абвгд

23абвгд 48абвгд 73абвгд 98абвгд

24абвгд 49абвгд 74абвгд 99абвгд

25абвгд 50абвгд 75абвгд 100 а б в г д