Методы и формы проведения оценки компетенций обучающихся

В технологии модульного обучения, основанного на компетенциях, оценка представляет собой процесс создания и сбора свидетельств деятельности обучающегося и вынесения суждения относительно этих свидетельств на основе заранее определенных критериев.

Оценка предполагает демонстрацию и подтверждение того, что обучающиеся освоили компетенции, сформулированные в задаче каждого конкретного модуля, и способны осуществлять все требуемые действия.

Свидетельства могут иметь форму:

О физических объектов, произведенных обучающимся;

о деятельности обучающегося (под наблюдением оценщика);

О свидетельств, представленных другими людьми, которые наблюдали за обучающимся (видео-, аудиозаписи и т.д.);

О результатов выполнения заданий, включая проекты и case studies;

О ответов на письменные или устные вопросы;

О результатов ролевых игр;

О записей в журналах обучающегося, «портфеля свидетельств» (см. ниже).

Свидетельства, необходимые для принятия решения по оценке, рассматриваются по критериям:

О достоверности — они должны быть непосредственно связаны с объектом оценки;

О достаточности — требуется объем свидетельств, достаточный для демонстрации устойчивого качества деятельности в течение заданного периода времени.

Основу оценки компетенций составляют следующие принципы:

О оценка основана на четких критериях;

О критерии формулируются в каждом действии спецификации модуля;

О при оценке учитываются представленные свидетельства освоения компетенций обучающимся.

Свидетельства собираются непрерывно в течение всего периода обучения, т.е. в процессе освоения компетенций в определенных заранее контрольных точках, а также в ходе итоговой оценки. Они могут быть получены в ходе деятельности обучающегося на рабочем месте или в ситуации, имитирующей рабочее место, в частности, когда экзаменатор наблюдает за выполнением конкретного практического задания.

Оценка компетенций обучающихся существенно отличается от традиционной оценки.

В традиционном обучении методы оценки достаточно просты в использовании (тесты, зачеты, экзамены и дипломные проекты, по результатам которых выставляются оценки по традиционной

шкале) и создают впечатление объективности. Однако такое оценивание, как правило, непродуктивно с точки зрения реального достижения высокого качества обучения, отвечающего потребностям рынка труда, поскольку зачастую традиционные методы оценки имеют целью проверку памяти, а не оценку компетенций обучающегося.

Более того, традиционные методы оценки, включая экзамены и тестирование, не носят обучающего характера, так как студенты направляют свои усилия на получение как можно более высокой отметки, а не на достижение результатов обучения, значимых для последующего трудоустройства. Большинство преподавателей в традиционной системе оценивания выставляет «сравнительные» оценки, т.е. фактически обучающиеся посредством оценок сравниваются друг с другом, но это не позволяет определить, насколько достижения обучающихся соответствуют требованиям рынка труда и образовательным потребностям самих обучающихся.

В традиционной системе оценки у обучающихся часто возникает недоверие к системе и методам оценки, а также к критериям выставления отметок. Как показывает опыт, повысить доверие к оценке можно путем ее максимальной обоснованности, достоверности и ресурсной обеспеченности.

В обучении, основанном на компетенциях, обучающийся ориентирован на активность и сам осваивает знания и умения в их целостности, взяв на себя управление собственным обучением. Поэтому методы оценки позволяют измерить целостные освоенные компетенции, а не отдельные знания и умения, и носят обучающий характер. Это самая важная особенность и характеристика процесса оценки в рамках модульной технологии, основанной на компетенциях.

Оценка в рамках модульного обучения, основанного на компетенциях, предполагает и обеспечивает индивидуальный подход к оцениванию достижений обучающегося по критериям соответствия задаче модуля и освоения действий.

Признаками качественной оценки являются:

О обоснованность — средства/формы/методы оценки должны оценивать именно ту деятельность или компетенцию, которая является задачей обучения, причем оценка проводится по установленным критериям, единым для тех, кто проводит оценку, и для обучающихся;

О достоверность — нужны одинаковые условия для оценки всех обучающихся (единые задания), алицам, проводящим оценку, следует убедиться, что результат достигнут именно данным обучающимся. Достоверность также означает проверку не механической памяти, а способности использовать приобретенные умения, знания и опыт (компетенции) для выполнения конкретных трудовых функций;

О обеспеченность — при планировании оценки требуется уверенность, что методы оценки подкреплены соответствующими ресурсами (оборудЬванием, материалами, инструментами и т.д.);

О гибкость — оценку нужно проводить при готовности обучающегося продемонстрировать освоение выполнения действий.

Оценка, отвечающая указанным признакам, становится естественным и конструктивным компонентом учебного процесса, фактором мотивации и поощрения обучающихся за достигнутые результаты.

Привлечение обучающихся к планированию оценки (естественно, в разумных пределах) необходимо в рамках самоуправляемого обучения, представляющего собой одновременно и неотъемлемое условие, и контекст реализации модульных программ, основанных на компетенциях. Это способствует развитию способности обучающихся к рефлексии и самооценке и воспитывает у них ответственность за собственное обучение. Именно рефлексия сводит воедино все аспекты обучения и создает у обучающегося ощущение завершенности и понимания достигнутого.

Чтобы привлечь обучающегося к планированию оценки, нужно прежде всего ознакомить его с процедурами оценки и критериями. В таком случае оценка перестает быть чем-то «устрашающим» и «карающим» и выступает как обучающая, поскольку студент постепенно приобретает уверенность в том, что даже негативные результаты оценки небесполезны: они помогают преподавателю определить вместе с обучающимся наиболее эффективные способы достижения требуемых результатов. Благодаря этому выстраиваются доверительные отношения обучающих с обучающимися, а доверие между ними — важнейшее условие успешности обучения. Это доверие поддерживается также обоснованностью оценки и гибкостью оценочных процедур.

К основным методам оценки, применяемым в рамках модульной технологии, основанной на компетенциях, относятся:

0 практические задания по демонстрации компетенций, выполняемые в процессе смоделированной или реальной трудовой ситуации;

0 экзамен (беседа, собеседование, тестирование, интервью);

0 индивидуальные или групповые проекты;

0 небольшие задания/упражнения;

0 журналы/дневники, которые ведут обучающиеся;

0 сбор образцов деятельности обучающихся, демонстрирующих освоение ими требуемых компетенций (портфолио).

Ключевыми методами являются проекты и практические задания: они или выполняются под наблюдением преподавателя, если важен сам процесс их выполнения, или приводят к созданию какого-либо продукта, качество которого служит основой для вынесения суждения. Остальные методы следует отнести к дополнительным.

Оптимальным методом оценки компетенций может быть демонстрация умений и знаний (компетенций) на рабочем месте. Если невозможно оценивать на рабочем месте, приходится обращаться к имитации трудовой ситуации/рабочего места, которая должна включать в себя среду, оборудование и материалы, используемые в реальных условиях трудовой деятельности на рабочем месте.

Во избежание субъективности при оценивании рекомендуется:

0 иметь проверочные листы для оценщиков, содержащие четкие ответы на вопросы и критерии выполнения практических заданий;

0 проводить оценку с участием не менее двух оценщиков.

При планировании процесса оценки надо учитывать:

0 временные затраты оценщиков;

0 ресурсы, необходимые для оценки (материалы, оборудование);

0 время, отводимое для выполнения оценочных зданий обучающимися.

Рассмотрим методы оценки.

Практическое задание по демонстрации компетенций, в ходе которого осуществляется оценка освоения указанных техниче- ских/надпрофессиональных/ключевых компетенций.

Компетенции демонстрируются индивидуально или в группе в различных условиях, например в учебной аудитории, лаборатории, на рабочем месте.

К демонстрации компетенций как методу оценки можно обратиться на любом этапе обучения по модулю. Она особенно эффективна для оценки практических компетенций, таких, как проведение лабораторных исследований, межличностные и коммуникативные компетенции, компетенции в области ИКТ и т.д.

При организации практических оценочных заданий преподаватель должен обеспечивать:

О наличие ясных и точных инструкций по выполнению задания;

О связь демонстрируемых компетенций с компетенциями, подлежащими освоению в модуле;

О понимание обучающимся содержания и процедур выполнения задания;              *

О необходимые материалы и ресурсы;

О понимание обучающимся критериев оценки;

О обратную связь с обучающимся по результатам оценки.

Компетенции обучающихся часто оцениваются посредством наблюдения за выполнением практического задания. Демонстрировать компетенции обучающийся может в форме либо устной демонстрации, либо комплексной демонстрации, либо экзамена, либо проекта.

Устная демонстрация производится, например, при оценке коммуникативных умений. Для проведения устной демонстрации умений требуется:

О разработать четко и понятно сформулированные вопросы, соотносящиеся с теми компетенциями модуля, которые подлежат оценке;

о создать для обучающихся возможность продемонстрировать нужные компетенции при ответе на вопросы;

О объяснить обучающимся, какие результаты оцениваются, по каким критериям;

о обеспечить единые требования проведения оценки для всех обучающихся.

Комплексная демонстрация компетенций осуществляется на рабочем месте или в среде, имитирующей рабочее место.

При организации комплексной демонстрации компетенций необходимо:

0 создать такую среду, в которой обучающийся сможет продемонстрировать весь спектр компетенций, освоенных в ходе реализации модуля/действия модуля;

О снабдить обучающихся четкими инструкциями о процедурах проведения оценки, объектах и критериях (продолжительность, возможность дополнительных устных вопросов и т.д.);

о предоставить обучающимся необходимые материалы, инструменты и оборудование.

Экзамен является средством/формой оценки способности обучающегося применять умения, знания и понимание в ситуации ограниченного времени и четко-заданных условий.

Экзамены могут проводиться в устной и письменной форме в дополнение к практическим заданиям по демонстрации компетенций и могут быть:

0 практическими, оценивающими освоение конкретных когнитивных умений;

0 устными, оценивающими способность сделать устное сообщение;

0 в форме интервью, когда результаты обучения оцениваются посредством устных вопросов, задаваемых обучающемуся (индивидуально или в группе);

0 в форме аудирования (для оценки умения слушать и интерпретировать);

0 теоретическими — для оценки способности обучающегося применять теоретические знания (краткие и структурированные ответы на различные вопросы, тесты, эссе).              '

Проект может быть индивидуальным или групповым и предполагает наличие четко сформулированного задания в виде инструкции по выполнению.

В групповых проектах необходимо оценивать вклад каждого участника. Дополнительная ценность групповых проектов состоит в том, что в ходе их выполнения обучающиеся развивают умение работы в группах, эффективного общения, решения проблем, разрешения конфликтов и т.д. Коммуникативные, личные и межличностные умения могут быть оценены в ходе непосредственного наблюдения за процессом планирования деятельности и во время групповой работы; результаты этих наблюдений можно учитывать при оценке лидерских умений и умений работы в группе.

Проект может представлять собой:

0 исследование — групповое или индивидуальное по заданной теме;

0 разработку, создание, представление какого-либо продукта.

Проект позволяет обучающемуся продемонстрировать, как правило, от двух до четырех параметров из следующего набора:

0 понимание и употребление понятий в конкретной области;

0 использование/выбор методов исследования, источников информации, в том числе справочной литературы;

0 способность анализировать, оценивать, делать выводы и вырабатывать рекомендации;

0 понимание процесса/планирование использования умений/уме- ние планировать время;

0 способность выполнять задание/создавать, конструировать действие;

0 умение пользоваться инструментами и применять различные техники и технологии;

0 творческие умения, умение решать проблемы (оценивать);

0 презентационные умения;

0 умение работать в команде (сотрудничать).

Инструкция по реализации проекта имеет приведенную ниже структуру независимо от темы.

Цель проекта:

Изучение конкретного вопроса/темы с применением методов, соответствующих цели проекта, и представление результатов конкретной аудитории.

В рамках групповых проектов отдельно оценивается вклад члена группы.

Задачи проекта:

0 провести исследование по определенному вопросу, для чего: выбрать и проанализировать ряд источников по данному вопросу; использовать методы исследования, соответствующие данному вопросу;

0 составить отчет о полученных результатах;

0 оценить проведенное исследование и подготовленный отчет.

Результат проекта:

Отчет о проведенном исследовании, представленный устно или письменно.

Требования к проекту/критерии

Проект требует планирования, выполнения и оценки различных этапов проекта, которые должны быть представлены в виде следующих свидетельств...

Рекомендации для обучающихся по реализации проекта

Описание проекта: изучите цели и задачи проекта и вопросы, которые нужно исследовать; проведите предварительные исследования, которые позволят:

0 выбрать конкретный вопрос/вид деятельности;

о принять решение об аудитории, которой будут представлены результаты;

0 выбрать форму представления отчета; определите факторы, которые могут обеспечить успех проекта, в том числе:

0 поиск требуемых источников (ресурсов);

0 общение с теми, кто связан с исследуемым вопросом или деятельностью;

0 форму презентации проекта;

0 продолжительность работы над проектом; составьте краткое описание проекта, в котором:

0 представьте в сжатой форме результаты предварительного исследования;

0 определите вопрос/деятельность исследования;

0 опишите форму презентации результатов проекта;

0 укажите аудиторию, которой вы будете представлять результаты;

0 объясните причины выбора вопроса или деятельности для исследования и факторы, которые могут оказаться важными при сборе материалов.              '

План проекта: определите, какая информация и ресурсы могут понадобиться и как их получить; укажите намеченные виды деятельности, включая:

0 исследования;

0 контакты с соответствующими лицами;

0 применяемые методы;

0 подготовку письма и вопросов для анкетирования (если требуется);

0 сроки;

0 создание и презентацию отчета;

0 оценку отчета; выберите формат (например, журнал) документирования продвижения к цели в ходе выполнения проекта; разработайте план проекта (письменно), подробно описывающий этапы и деятельность по проекту; объясните цели и задачи проекта; определите этапы проекта и виды деятельности по каждому этапу, а также необходимую информацию и источники/ресурсы; четко спланируйте реализацию этапов проекта по времени; опишите методы, которые будут применяться для документирования продвижения к цели проекта.

«Портфель свидетельств» деятельности по проекту. реализуя план, поэтапно и в запланированные сроки выполняйте намеченные виды деятельности; в процессе исследования соберите «портфель свидетельств» (копии посланных и полученных писем, собранные брошюры, анкеты, результаты исследования и т.п.).

Документирование продвижения к достижению цели: описывайте все виды деятельности; вносите, где необходимо, коррективы в план и на каждом этапе_ фиксируйте продвижение к поставленной цели.

Результат проекта — отчет, который должен:

0 включать в себя сбалансированный анализ использованных источников (ресурсов);

0 основываться на точной информации;

0 соответствовать аудитории, которой он будет представлен;

0 быть ясным и понятным;

0 базироваться на методах исследования, отвечающих теме и характеру исследования;

О учитывать данные, полученные благодаря обратной связи;

О содержать список источников информации.

Отчет по самооценке проекта: оцените достоинства и недостатки этапа планирования проекта, учитывая:

0 проведенное исследование;

О изначально определенные этапы проекта;

0 ресурсы и информацию, которыми вы планировали воспользоваться;

О запланированные виды деятельности;

0 намеченные сроки; оцените сильные и слабые стороны реализации этапов проекта по таким параметрам, как:

О доступ к ресурсам и получения информации;

0 осуществление различных видов деятельности;

о соблюдение сроков; оцените проект в целом с точки зрения реализации поставленных задач, опишите проблемы, с которыми пришлось столкнуться при проведении исследования и подготовке отчета и презентации в части:

0 методов исследования;

0 организации анкетирования (если оно проводилось);

0 доступа к ресурсам;

0 планирования презентации; подумайте, как можно более эффективно решить эти проблемы; проанализируйте проведенное исследование, отчет и его презентацию. Кратко суммируйте результаты и оцените соответствие проекта критериям, указанным в разделе «Реализация» спецификации проекта; составьте отчет по оценке проекта, в котором:

0 кратко опишите проект;

0 проанализируйте его сильные и слабые стороны;

0 оцените степень соответствия результатов задачам проекта;

О оцените эффективность отчета и его презентации;

0 опишите, чему вы научились в ходе выполнения проекта;

0 определите, как эти «уроки» могут повлиять на выполнение проектов в будущем.

Для оценки проектов необходимо подготовить отдельные оце- ночные/контрольные ведомости (вслучае групповых проектов такая ведомость заполняется на каждого участника проекта — обучающегося).

Образец контрольной ведомости

Номер оцениваемого проекта /название:...

Ф.И.О. студента

Группа:...

Дата

Разделы выполнения

Планирование

Дата

Представленные свидетельства:...

Описание проекта:...

Комментарии*:...

План проекта: ...

Комментарии*:...

Реализация

Дата

Представленные свидетельства: ...

«Портфель свидетельств» деятельности по проекту:...

Представленные свидетельства: ...

Комментарии*: ...

Результат проекта: ...

Комментарии*: ...

Оценка

Дата

Представленные свидетельства: ...

Отчет об оценке:...

Комментарии*:...

Итоговая оценка

Удовлетворительная:...

Неудовлетворительная:...

Подпись оценщика:

¦Комментарии должны отражать соответствие данных разделов требованиям, установленным для этого этапа.

Задание/упражнение — небольшое упражнение, выполняемое, как правило, по заданным параметрам и отличающееся от практического задания по демонстрации компетенций, которое проводится с целью комплексной оценки освоения отдельных действий или всего модуля.

Каждое задание содержит описание (условия), составленное преподавателем, с указанием времени, отводимого на его выполнение. Задания могут быть устными или заключаться в проведении расчетов, анализе конкретных ситуаций из практики, чтении или выполнении чертежей и т.д.

Журнал (дневник) обучающегося ведет сам обучающийся. В нем содержится описание конкретного опыта обучения, выполненных заданий, освоенных умений, отношения к обучению.

Дня заполнения журналов целесообразно выделять 5— 10 мин в конце каждого занятия.

Формат журнала зависит от характера осваиваемых компетенций и выбирается обучающимся совместно с преподавателем. Требования к содержанию и структуре журнала устанавливаются преподавателем и оформляются в виде отдельного документа, к которому предъявляются следующие требования:

0 четкая формулировка инструкций для обучающихся по ведению журнала;

О ориентация информации, предназначенной для внесения в журнал, на задачу освоения модуля;

0 требования к оформлению журнала;

0 сроки подачи журнала для оценки.

Сбор образцов деятельности, выполненных обучающимся (портфолио), проводится в процессе обучения по модулю и состоит в накоплении фактов о результатах деятельности, доказывающих освоение обучающимся требуемых компетенций. Эти образцы демонстрируют освоенные компетенции и могут включать в себя фото- и видеозаписи, реально созданную продукцию, чертежи, рисунки, эскизы, расчеты, схемы, документы и т.д.

Требования к сбору конкретных свидетельств разрабатывают преподаватели и заранее знакомят с ними обучающихся. Эти требования оформляются в виде:

0 инструкций по сбору свидетельств для обучающегося, написанных четко и понятно;

0 определения типов и формата свидетельств;

0 описания примерного формата предсташгения свидетельств;

0 установленных критериев;

0 указаний относительно ресурсов и материалов, которые могут быть предоставлены обучающимся для создани^ требуемых свидетельств;

О определения сроков подачи свидетельств.

При проведении оценки изучаются журнал и портфолио.