Глава III. ТЕСТОВЫЙ ЭКЗАМЕН, МЕТОДИКА ПРОВЕДЕНИЯ И ЕГО АНАЛИЗ

Тестовый экзамен с применением вопросов множественного выбора имеет явные преимущества по сравнению с устным. Во-первых, он проводится для всего потока в один день, во-вторых, психологические нагрузки отвечающих значительно меньше, чем при устном ответе, в-третьих, тестовый экзамен позволяет прове­сти анализ с применением математических выкладок, что объек­тивно характеризует ориентацию студентов в изучаемом пред­мете.

Для проведения экзамена необходимо изготовить несколько вариантов экзаменационных работ. Более чем 20-летний опыт проведения тестового экзамена показал, что для этого необходи­мо составить не менее 5 вариантов, каждый из которых состоит из 100 вопросов. Меньшее количество вариантов может способ­ствовать списыванию отвечающими друг у друга, большее же их число затруднит проведение анализа экзаменационной сессии. Для подготовки и ответа выделяется 3 часа, после чего варианты собираются для проверки. Каждый из вариантов должен содер­жать одинаковое количество вопросов по различным темам. Структура вариантов может быть составлена следующим обра­зом: 1—10-й вопросы выделены для общей тематики: волемические изменения при различной патологии, КЩС, определение группы крови, осложнения при переливании крови и пр.; 11—22-й вопросы относятся к патологии заболеваний легких; 23—27-й — заболевания щитовидной железы; 28—30-й — заболевания молоч­ной железы; 31—42-й—заболевания пищевода и желудка; 43—

52-й—патология желчного пузыря и поджелудочной железы;

53—57-й—патология червеобразного отростка; 58—67-й—воп­росы острой кишечной непроходимости и перитонита; 68—77-й— патология ободочной и прямой кишок; 78—87-й—патология со­судов; 88—92-й—грыжи и 93—100-й—прочие заболевания. Есте­ственно, структура вариантов может быть иной в зависимости от научной направленности кафедры. Каждые 3—4 года приходится создавать новые варианты, так как старые часто становятся до­стоянием студенческой аудитории, что приводит к потере объек­тивности тестов. Наличие банка вопросов по различным заболе­ваниям значительно упростит эту довольно трудоемкую про­цедуру.

Матрицей для математического анализа является общий лист с цифровым перечислением всех 100 вопросов и пунктов а, б, в, г, д, один из которых, являющийся, по мнению экзаменующегося, правильным, зачеркивается (схема 1). На контрольный лист на­кладывается прозрачный трафарет, изготовленный, например, из отмытой рентгенологической пленки, на котором в виде кружоч­ка или крестика наносится правильный ответ. Эти трафареты хра­нятся в сейфе у наиболее ответственного лица кафедры и разда­ются преподавателям непосредственно перед проверкой работ. В связи с тем, что окончательный ответ однозначен, количество ошибок может быть от 1 до 100.

Цели математического анализа экзаменационной сессии пока­заны на схеме 2. Одним из самых важных и наглядных показа­телей является установление компетентности студентов в вопро­сах хирургии (схема 2).

Математический анализ начинается с подсчета в каждой рабо­те количества ошибок. Это один из самых трудоемких моментов технической обработки материала. Сводное количество ошибок, деленное на число отвечающих, дает среднюю ошибку. Этот по­казатель позволяет ориентировочно судить о результате экзаме­национной сессии, сравнить его с соответствующими результата­ми в предыдущие годы. Подобное же вычисление в каждом вари­анте характеризует степень их трудности для студента. Средняя ошибка каждого варианта, так же как и средняя ошибка курса, выраженные графически в сопоставлении с данными по несколь­ким сессиям, наглядно отражают степень подготовленности пото­ка и трудность вариантов для отвечающих в настоящем году. Анализ экзаменационных работ в зависимости от количества ошибок является стабильным и достаточно информативным. Тра­диционно выделены следующие работы: от 1 до 15 ошибок, от 16 до 25, от 26 до 30, от 31 до 40 и от 41 ошибки и больше. Процент­ное соотношение этих работ детально характеризует ориентацию студентов в изучаемом предмете, позволяет выделить число неус­певающих и отличников. Подобное же вычисление проводится в каждом варианте, что дополнительно характеризует эти варианты по степени трудности.

Конечным этапом анализа экзаменационной сессии по выявле­нию знаний студентов является определение коэффициента неос­ведомленности студентов, вычисляемого по формуле:

Общее количество ошибок по теме (варианту)

КН=---------------------------------------------------------

Количество вопросов в теме (варианте)* число отвечающих

Не претендуя на математическую обоснованность, коэффици­ент неосведомленности позволяет не только выявить общую ори­ентированность студентов в хирургии и трудность каждого вари­анта для отвечающих, но и, что более важно, определить осведом­ленность студентов по каждой теме в отдельности. Например, по заболеваниям периферических сосудов в варианте А допущено 129 ошибок 36 отвечающим.

В этом варианте данной патологии уделено 10 вопросов. Сле­довательно:

КН=-------=0, 36

10*36

 

Сопоставляя величины К.Н по каждой теме, можно выделить наиболее и наименее информативные из них и сделать соответ­ствующие выводы. Более полная характеристика знаний студен­та может быть получена при сравнении результатов экзаменаци­онной сессии с успеваемостью в течение года, так как различные причины (болезнь учащегося, прогулы, непосещение лекций) найдут отражение в экзаменационных ответах на эту тему.

Важным аспектом анализа экзаменационных вариантов явля­ется выявление качества составленных вопросов — валидность экзаменационных тестов (схема 3).

СХЕМА 1