Общие принципы написания результатов обучения

В литературе предлагается большой объем информации о том, что считается лучшей практикой написания результатов обучения (Bingham, 1999; Fry et all, 2000; Jenkins and Unwin, 2001; Moon, 2002). Предполагается, что при написании результатов обучения полезно сосредоточиться на том, чт о, по вашим ожиданиям, смогут делать или демонстрировать студенты в конце модуля или программы. Очень важно, чтобы результаты обучения выражались в простых и однозначных терминах и были понятны студентам, преподавателям, коллегам, работодателям и внешним экспертам.

В целом, результаты обучения определяют необходимую обученность для некоторого модуля. Поэтому, по общему мнению, при написании результатов обучения для модуля следует определить минимальный приемлемый уровень, позволяющий студенту получить зачетный балл по модулю. В связи с этим лучше иметь небольшое число важных результатов обучения, чем множество второстепенных. В литературе даются рекомендации относительно числа результатов обучения, описываемых для одного модуля. Так, например, Дж. Мун (Moon, 2002) считает маловероятным, что это число будет больше восьми. «Если количество результатов обучения для модуля превышает десять, то они, скорее всего, определяют слишком много деталей учебной программы и будут трудно поддаваться оцениванию». Подразделение образования и развития персонала Университета Центральной Англии рекомендует определять от четырех до восьми результатов обучения для каждого модуля. Дж. Бинэм (Bingham, 1999) предлагает, чтобы «большинство единиц имело от пяти до девяти результатов обучения».

Очевидно, что число результатов обучения зависит от размера модуля. Дж.Маклин и П.Лукер (McLean and Looker (2006) считают, что «результаты обучения должны быть в достаточной мере немногочисленными и значимыми, чтобы быть запоминающимися и показательными - большинство курсов должны ориентироваться на пять-десять результатов». Иными словами, идеалом является модуль с примерно шестью хорошо написанными результатами обучения.

Один из наиболее важных моментов, подчеркиваемых в литературе, – результаты обучения должны быть не просто «списком пожеланий» относительно того, чт о студент должен быть в состоянии делать по завершении учебной деятельности. Результаты обучения должны быть ясно и просто описаны и допускать эффективное оценивание.

Как уже отмечалось, таксономия Блума (Bloom, 1956) является одним из наиболее применимых инструментов написания хороших результатов обучения. Таксономия Блума предлагает готовый список глаголов, используемых в качестве словаря при написании результатов обучения. В литературе единодушно отмечается, что при написании результатов обучения следует делать основной акцент на активных глаголах и избегать использование некоторых терминов. Ключевым словом является слово ДЕЛАТЬ, а ключевое требование при проектировании результатов обучения – использовать активные глаголы.

Необходимо избегать использования неоднозначных глаголов, таких как «знать», «понимать», «быть в курсе», «оценивать». (Bingham, J. (1999)). Более полезными для целей оценивния являются конкретные глаголы «определять», «применять» или «анализировать», чем такие глаголы, как «понимать», «знать», «быть знакомым с…». (Osters and Tiu, 2003).

Неопределенные глаголы, такие как «понимать» или «знать» трудно поддаются измерению и должны заменяться глаголами «установить», «определить», «описать» или «продемонстрировать» (British Columbia Institute of Technology, 1996).

Следует проявлять осторожность в использовании таких слов, как «понимать» и «знать», если не возможно быть уверенным в том, что студенты точно представляют, что значит понимать или знать в данном конкретном контексте (McLean, and Looker, 2006).

Глаголы, связанные со знаниевыми результатами – «знать», «понимать», «принимать во внимание» - как правило, довольно расплывчаты или фокусируются на процессе, пройденном студентами, а не на конечном результате этого процесса.

Поэтому, чтобы указать, каким образом студенты могут продемонстрировать приобретение этого знания, нужно использовать глаголы действия - решить, оценить, проанализировать (Подразделение образования и развития персонала Университета Центральной Англии).

Некоторые глаголы не ясны и допускают разные толкования с точки зрения того, какие действия они определяют. Такие глаголы охватывают поведение, которое может не поддаваться наблюдению или измерению. Следует избегать глаголов такого типа, как знать, постигать, оценивать, узнавать, понимать, познакомиться с…. (Американская ассоциация юридических библиотек).

Дж. Мун (Moon, 2002) обобщает проблемы, связанные с использованием нечетких терминов при написании результатов обучения, следующим образом:

«Еще одна распространенная ошибка при написании результатов обучения заключается в том, что они относятся к обученности, а не к представлению обученности. Плохо написанный результат обучения может быть, например, таким: "В конце данного модуля, обучаемый должен будет знать правила безопасного проведения лабораторных работ. (Химия, уровень 1) ". Мы сможем сказать, что студент знает эти правила лишь в том случае, если от него потребуется продемонстрировать свое знание. Ему может быть предложено написать доклад, чтобы ответить на вопросы, объяснить правила в устной форме и так далее».

В практических рекомендациях по написанию результатов обучения Х.Фрай и его соавторы (Fry et al, 2000) предлагают использовать "однозначные глаголы действия" и дают многочисленные примеры глаголов из таксономии Блума. Чтобы показать различия в словарях, используемых для описания целей и для описания результатов обучения, авторы приводят список глаголов:

Знать

Понимать

Определять

Оценивать

Усваивать

Познакомиться

Проводить различие

Выбрать

Собирать

Корректировать

Установить

Решить, применить, перечислить

Гослинг и Мун (Gosling and Moon, 2001) дают следующую рекомендацию для написания результатов обучения: «Описывайте результаты обучения просто. Для каждого результата используйте только одно предложение с одним глаголом. Избегайте ненужного профессионального жаргона. При необходимости используйте более одного предложения для большей ясности».

Следующие рекомендации могут оказаться полезными при написании результатов обучения:

• Каждый результат обучения должен начинаться с глагола действия, за которым следует фраза, описывающая контекст.

• Используйте только один глагол для каждого результата обучения.

• Избегайте использования неясных терминов, таких как знать, понимать, учить, быть знакомым, быть информированным, быть в курсе. Эти термины относятся к учебным задачам а не к результатам обучения.

• Избегайте сложных предложений. Если необходимо, для большей ясности используйте более одного предложения.

• Обеспечьте, чтобы результаты обучения для модуля соотносились с результатами обучения для всей программ в целом.

• Результаты обучения должны быть видимыми и измеримыми.

• Обеспечьте, чтобы получаемые результаты можно было оценивать.

• При составлении результатов обучения необходимо помнить о временном интервале, в течение которого эти результаты должны быть достигнуты. Всегда существует опасность того, что при написании результатов обучения можно стать излишне амбициозным. Спросите себя, реально ли достичь данных результатов обучения с имеющимися ресурсами и временем.

• При написании результатов обучения следует представлять себе, каким образом они будут оцениваться, т.е. как можно будет узнать, добился ли студент этих результатов?

Если результаты обучения будут очень общими, их эффективное оценивание вызовет затруднения. Напротив, если результаты обучения будут имеют узкий характер, их список может стать излишне длинным и подробным.

• Перед окончательным оформлением результатов обучения, спросите своих коллег и, если возможно, бывших студентов, понятны ли эти результаты обучения им.

• При составлении результатов обучения для студентов старше первого курса старайтесь не перегружать список результатами обучения, взятыми из нижней части таксономии Блума (например, знание и понимание в познавательной сфере). Побуждайте студентов к использованию того, чему они уже научились, включив некоторые результаты обучения из более высоких категорий таксономии Блума (таких, например как применение, анализ, синтез и оценка).

Списку результатов обучения для модуля обычно предшествует фраза: «По успешном завершении данного модуля студенты должны быть способны:…».

В качестве примера приведем результаты обучения для модуля RD3003 Университетского колледжа Корка, написанные доктором Ноэлем Вудсом (Dr Noel Woods).

При успешном освоении данного модуля студенты должны быть способны:

• Выявлять основные индикаторы для прогнозирования фондового рынка.

• Описывать и различать основные экономические индикаторы.

• Интерпретировать отчет о национальных доходах и расходах Ирландии.

• Проводить различие между кредитно-денежной и бюджетно-финансовой политикой.

• Выполнять экономические расчеты, позволяющие обучаемому с большей ясностью оценить экономические концепции.

• Критиковать бюджетные решения, основываясь на экономических критериях.

• Разрабатывать и интерпретировать финансовую отчетность и бухгалтерские коэффициенты компании.

• Разрабатывать соответствующую бюджетную политику в ответ на изменения в бизнес-цикле.

• Оценивать установки бюджетно-налоговой политики правительства.

Приведенный далее контрольный список позволяет удостовериться, что результаты обучения написаны в соответствии со стандартными принципами:

• Сосредоточился ли я на результатах, а не на процессе, Другими словами, сосредоточился ли я на том, чт о студенты способны продемонстрировать, а не на том, чтоя сделал в процессе преподавания?

• Начинается ли описание каждого результата с активного глагола?

• Используется ли только один активный глагол на каждый результат обучения?

• Исключены ли такие термины, как знать, понимать, учить, быть знакомым, быть информированным, быть в курсе?

• Поддаются ли результаты обучения наблюдению и измерению?

• Можно ли оценить написанные результаты обучения?

• Включают ли результаты обучения различные уровни таксономии Блума?

• Соответствуют ли результаты целям и содержанию модуля?

• Соблюдается ли рекомендация по числу результатов (максимум девять для одного модуля)?

• Реально ли добиться данных результатов обучения с имеющимися временем и ресурсами?

Как уже отмечалось, результаты обучения должны обеспечивать возможность оценивания, т.е. их следует писать таким образом, чтобы можно было проверить, добился ли студент требуемого результата. Правила написания результатов обучения для программы аналогичны правилам написания результатов обучения для модулей.

Предлагаемый в литературе общий принцип таков: для программы требуется 5 – 10 результатов обучения, причем должно быть включено лишь минимальное число считающихся необходимыми результатов. Иными словами, результаты обучения для программы описывают необходимые знания, навыки и позиции, которые, как предполагается, смогут продемонстрировать лица, прошедшие эту программу.

Дж. Мун (Moon 2002) выдвинул идею, что при составлении результатов обучения для программ имеет смысл описывать два типа результатов обучения. Первый тип – это результаты обучения, которые могут оцениваться в ходе программы, то есть в рамках различных модулей. Второй тип результатов может не оцениваться, однако он дает работодателям и другим заинтересованным сторонам представление об уровне реального исполнения, который выпускники программы продемонстрируют по ее окончании. Эти «декларативные» или «желательные» результаты обучения показывают, что, как ожидается, сможет достичь хороший студент к концу программы. Эту ситуацию можно обобщить следующим образом: «Важно отметить, что существуют четкие различия в характере результатов программы и результатов обучения, написанных для модулей. Результаты программы пишутся для типичного или среднего студента и могут носить декларативный характер. Они не являются, таким образом, непосредственно доступными проверке. Так, например, результаты программы могут показывать сферы обученности, которые являются результатом опыта участия студента в этой программе, исходя из того, что целое может быть больше суммы составляющих его частей» (Moon 2002 p. 142).

При написании программы результатов обучения нельзя просто объединить вместе результаты обучения для всех модулей в программе. Программа может быть чем-то б о льшим, чем сумма различных составляющих ее модулей. Так, могут существовать некоторые общие для программ результаты обучения, например, формулировать гипотезы, анализировать данные и делать выводы. Кроме того, могут быть включены некоторые желательные результаты обучения, о чем говорилось выше. Если программа содержит курсы по выбору, то могут быть навыки, общие для всех студентов, независимо от выбранной ими комбинации модулей (Dillon and Hodgkinson, 2000).

Описание результатов обучения, как правило, начинается фразой «По завершении данной программы ожидается, что студенты будут способны...».

За этой фразой следует перечень результатов обучения, написанных в соответствии с принципами, которые уже рассматривались в связи с результатами обучения для модуля. Например, некоторые результаты обучения для программы на степень магистра компьютерных наук приведены ниже.

Пример результатов обучения для программы на последипломную степень по компьютерным наукам:

При успешном завершении данного модуля студенты должны быть способны:

• Осуществлять решение проблем в академических и промышленных условиях.

• Создавать, использовать и контролировать крупные вычислительные системы.

• Эффективно работать в качестве члена команды.

• Организовать и осуществить научно-исследовательский или промышленный проект.

• Писать тезисы и доклады на профессиональном уровне, эквивалентные по качеству презентации печатным работам.

• Готовить и проводить семинары на профессиональном уровне.

• Осуществлять самостоятельное и эффективное управление временем.

• Применять широкий спектр навыков информационных технологий и

демонстрировать высокий уровень компьютерной грамотности. Некоторые авторы рекомендуют составлять карту курса, которая показывала бы, каким образом результаты обучения для программы охватываются в различных курсах, предлагаемых в рамках программы.

При написании результатов обучения для программ следует позаботиться о том, чтобы, если это необходимо, результаты обучения для профессиональных организаций были включены в результаты программы. Примеры результатов обучения для программ в различных предметных областях можно найти сайте Университета Вайоминга.

Результаты обучения следует писать таким образом, чтобы их можно было оценивать. Это особо подчеркивает Дж. Мун: «Результаты обучения должны поддаваться оцениванию, т.е. должны быть написаны таким образом, чтобы можно было проверить, достигнуты ли они студентами» (Moon, 2002).

Совершенно очевидно, что необходимы некоторые инструменты или методы оценивания, позволяющие определить, в какой степени достигнуты установленные результаты обучения. Среди прямых методов оценивания - письменные экзамены, проектная работа, портфолио, оценочная система с рубриками, диссертации, журналы наблюдений, аттестация и т.д. Примерами косвенных методов оценивания являются: опросы работодателей, сравнение с другими учебными заведениями, анкетирование выпускников, показатели отсева, анализ учебных программ и т.д.

Задача преподавателя состоит в том, чтобы обеспечить соответствие методов обучения, процедур оценивания, критериев оценивания и результатов обучения. Связь между преподаванием, оцениванием и результатами обучения позволяет сделать учебный опыт более прозрачным. Проведение курсовых оценок студентов показывает, что четко обозначенные ожидания являются важнейшей частью эффективного обучения.

Отсутствие ясности в этой области почти всегда связаны с негативными оценками, трудностями в обучении и низкой успеваемостью студентов. С.Тухи (Toohey, 1999) считает, что лучший способ помочь студентам понять, каким образом они могут достичь установленных результатов обучения, - точно объяснить методы и критерии оценивания.

С точки зрения преподавания и обучения, имеется динамическое равновесие между стратегиями преподавания, с одной стороны, и результатами обучения и оцениванием, с другой.

Трудно переоценить важность оценки для учебного процесса. Как уже отмечалось (Ramsden, 2003), если речь идет о студентах, то для них оценивание - это учебная программа. Студенты будут учить то, что, по их мнению, будет оцениваться, а не то, что может быть в программе или даже рассматривалось на лекции! В применении к оцениванию известная поговорка «хвост виляет собакой» очень верна.

Поскольку оценивание является движущей силой обучения, мы должны четко представлять себе, какой уровень обученности мы ожидаем от наших студентов, с тем, чтобы оценочные задачи, которые ставятся перед ними, помогали достичь желаемой обученности. Оценивание часто описывается в терминах формативного или суммативного оценивания.

Формативное оценивание характеризуется как оценивание для обучения и «относится к тем проводимым преподавателями и студентами (последними – при самооценивании) действиям, которые дают информацию, используемую в качестве обратной связи для изменения обучающей и учебной деятельности, в которых они участвуют» (Black and Williams, 1998). Иными словами, формативное оценивание служит источником информации об успеваемости студентов как для преподавателей, так и для самих студентов. Формативное оценивание, как правило, проводится в начале программы или в ходе ее. Результаты выполнения студентами оценочных заданий помогут преподавателю в принятии решений относительно характера обучения.

Как показали П.Блэк и Д.Уильямс (1998), путем обратной связи со студентами, формативное оценивание может способствовать совершенствованию обучения и повышению успеваемости обучаемых.

Основные характеристики формативного оценивания включают:

• Выявление преподавателями и студентами результатов обучения и критериев их достижения.

• Эффективное и своевременное обеспечение четкой и исчерпывающей обратной связи.

• Активное участие студентов в своем собственном обучении.

• Хорошая коммуникация между преподавателем и студентами.

• Отклик преподавателя на потребности студентов.

Примером формативного оценивания является быть задание студентам сделать презентацию перед своей студенческой группой. Это поможет расширить знания студентов и их исследовательские, коммуникационные и организационные навыки. Хотя формативное оценивание может использоваться как часть непрерывного оценивания, оно обычно не включается в итоговую отметку, выставляемую студентам. Более того, многие специалисты в области образования считают, что оно не должно включаться. Так, например, Р.Доннели и М.Фицморис считают: «чтобы студенты могли извлечь максимальную пользу из обучения, модуль должен предусматривать возможность формативного оценивания, не влияющего на итоговую отметку. В этом случае студенты могут получить обратную связь, которая позволит им заполнить имеющиеся пробелы в знаниях» (Donnelly and Fitzmaurice, 2005). Говоря коротко, формативное оценивание – это часть учебного процесса, а не процесс выставления отметок.

Суммативное оценивание - это оценивание, подводящее итоги учебной

деятельности студента в определенный момент времени, обычно в конце модуля или программы. Суммативное оценивание можно описать как «оценивание по окончании курса, которое позволяет получить измерение, подытоживающее чьи-то достижения, и которое не имеет другого реального применения, кроме как описание того, что было достигнуто» (Brown and Knight, 1994).

Таким образом, использование суммативного оценивания позволяет выставить отметку, которая будет отражать работу студента. К сожалению, суммативное оценивание зачастую ограничивается традиционными экзаменационнами и не охватывает другие области, такие, например, как проектная работа, портфолио или эссе. В силу природы суммативного оценивания не все результаты обучения можно оценить в любой момент времени. Общепринятым является оценивание выборки результатов обучения.

Теоретически, непрерывное оценивание - это сочетание суммативного и

формативного оценивания. Однако в реальности непрерывное оценивание часто сводится к циклическому суммативному оцениванию с фиксированием отметок, но практически без обратной связи со студентами. Очень важно, чтобы используемый метод оценивания позволял проверить, достигнуты или нет установленные результаты обучения. Авторы отмечают, что набор оценочных работ очень ограничен: примерно 80% оцениваний проходит в виде экзаменов, эссе и докладов (Brown, 1999). Так, исследование практики оценивания в Университетском колледже Дублина, Ирландия, показало, что выбранные случайным образом 83 преподавателя использовали в общей сложности 256 оцениваний, то есть примерно 3 оценивания за курс. Установление связей между результатами обучения, стратегиями преподавания, учебной деятельностью студентов и оценочными заданиями очень сложная задача. Большинство оценок были суммативными (84%) и меньшинство - формативными (16%).Очень важно обеспечить, чтобы метод оценивания позволял адекватно оценить результаты обучения. Может не быть единого метода оценивания, который был бы применим ко всем результатам обучения. В связи с этим возникает необходимость в использовании нескольких методов одновременно.

Как видно из вышесказанного, существуют три основных задачи, связанных с конструктивной согласованностью любого модуля:

1. Четкое определение результатов обучения.

2. Выбор методов преподавания и обучения, обеспечивающих достижение установленных результатов обучения.

3. Оценка результатов обучения студентов и проверка того, в какой степени они совпадают с тем, что было запланировано.

Результаты обучения задают минимальный приемлемый стандарт, позволяющий студенту успешно завершить модуль. Успеваемость студентов выше этого порогового уровня дифференцируется с помощью отметочных критериев. Отметочные критерии определяют, каким требованиям должен отвечать студент для получения более высокой отметки. Эти определения помогают дифференцировать уровни успеваемости студента. Понятные для студентов критерии выставления отметок позволяют надеяться, что студенты будут стремиться к более высокому уровню успеваемости.

Несмотря на определенную критику образования на основе результатов в европейской литературе, подход к преподаванию и обучению на основе результатов обучения получил серьезную поддержку на международном уровне. Так, например, А.Дженкинс и Д.Анвин (Jenkins and Unwin, 2001) считают, что результаты обучения:

• помогают преподавателям более точно донести до студентов, чтоименно от них ожидается.

• помогают студентам учиться более эффективно: студенты знают о своей

ситуации, и учебная программам становится более открытой для них.

• помогают преподавателям более эффективно разработать свои материалы, поскольку могут служить в качестве некоторого эталона.

• делают понятным, чт о могут приобрести студенты, прослушав некоторый данный курс или лекцию.

• помогают преподавателям выбрать надлежащую стратегию обучения, которая отвечает предполагаемым результатам обучения, например, лекция, семинар, групповая работа, консультация руководителя, дискуссия, презентация перед соучениками или лабораторная работа.

• помогают преподавателям более точно донести до коллег, на достижение чего направлена та или иная деятельность.

• помогают организовать экзамены на основе изученного материала.

• обеспечивают использование надлежащих стратегий преподавания и оценивания.

С. Тухи (Toohey, 1999) видит ценность результатов обучения в том, что они:

• проясняют образовательную задачу и помогают при разработке разных аспектов программы. В конструктивно согласованном курсе результаты обучения определяют выбор учебной и оценочной деятельности.

• объясняют студентам образовательные цели преподавателя с тем, чтобы

студенты знали, чт о предлагает курс и чт о от них ожидается. Другими словами, результаты обучения помогают студентам сосредоточиться на том, что наиболее важно в данном курсе.

• помогают преподавателю пересмотреть образовательные цели под углом зрения студентов, т.е. в терминах того, чт о, как ожидается, сможет делать студент в результате успешного завершения модуля или программы.

С. Адам (Adam,2004) обобщил преимущества результатов обучения следующим образом:

1. Проектирование курсов и модулей

Результаты обучения могут:

• обеспечить согласованность в рамках модулей и программ.

• облегчить проектирование учебных планов, поскольку делают понятным, где происходит частичное совпадение между модулями и программами.

• помочь разработчикам курса точно определить ключевые цели курса, прояснить,

как соотносятся компоненты программы и каким образом можно учесть прогресс в учебе.

• акцентировать связь между преподаванием, обучением и оцениванием (критерии и аттестация) и улучшить структуру курса и учебную жизнь студентов.

• позволить сосредоточиться на оценивании и выработке его критериев, а также на повышении его эффективности и многообразия.

2. Обеспечение качества

Результаты обучения:

• улучшают прозрачность и сравнимость стандартов внутри квалификаций и между ними.

• обладают большей надежностью и практичностью, чем традиционные

квалификации.

• играют ключевую роль, выступая в качестве точек отсчета для создания и оценки стандартов.

3. Студенты

Результаты обучения обеспечивают:

• исчерпывающее и точное описание того, чт о достигнут студенты при успешном завершении обучения.

• четкую информацию, которая помогает студентам при выборе модуля/

программы и может сделать обучение более эффективным.

• четкую информацию работодателям, высшим учебным заведениям о свойствах конкретных квалификаций и условиях их достижения.

4. Мобильность

Результаты обучения:

• способствуют мобильности студентов, облегчая признание квалификаций

• улучшают прозрачность квалификаций.

• упрощают перенос кредитов.

• обеспечивают некий общий формат, облегчающий развитие образования в течение жизни и могут способствовать созданию различных путей продвижения в конкретной системе образования и между различными образовательными системами.

Подразделение образования и развития персонала Университета Центральной Англии отмечает, что результаты обучения помогают в борьбе с плагиатом. Например:

• Результат обучения: Студенты смогут подтвердить происхождение своих идей

ссылками на источники, используемые в работе.

• Критерий оценивания: Точное использование методов организации ссылок в тексте для всех используемых источников.

Переход в международном масштабе от методов, центрированных на преподавателе, к методам образования, базирующимся на результатах, получил новый импульс от Болонского процесса, с его акцентом на студенто-центрическое обучение и с требованием большей четкости в структуре и содержании учебных программ. Очевидно, что результаты обучения играют ключевую роль в обеспечении прозрачности квалификаций и квалификационных структур. Кроме того, они серьезно способствуют реализации различных линий действия Болонского процесса на всем Европейском пространстве высшего образования. Необходимость сделать процессы преподавания и обучения более прозрачными и более проработанными является настоящим вызовом для всех вовлеченных в образование. В краткосрочной перспективе это означает решение задачи описания модулей и программ в терминах результатов обучения. В долгосрочной же перспективе принятие метода результатов обучения может способствовать развитию более систематического подхода к проектированию образовательных программ и модулей.