1. Проблема создания адекватного инструмента диагностики

Если это так, то вполне понятно, почему столетиями и уже тысячелетиями образование топчется на месте, а люди становятся всё менее образованными и воспитанными. Причина этого явления предельно проста: не имея в своём распоряжении точных измерительных инструментов для диагностики качества знаний учащихся и их воспитанности, довольствуясь глазомерными измерениями, мы пребываем под гипнозом иллюзий вместо осознанного и точного знания. И деградируем вместе с этими иллюзиями.

Ниже мы рассматриваем проблему инструментальной диагностики качества знаний учащихся с опорой на рассмотренные в первых трёх лекциях исходные положения.

115

-е-

ВеБра1ко1.дхсС 28.02.2008 16:15 Раде 1Г-6

116

В.П. Беспалько. ПРИРОДОСООБРАЗНАЯ ПЕДАГОГИКА

Для лучшего восприятия материала этой лекции полезно напомнить следующие сведения из предыдущих лекций: понятие о структуре личности и возможности диагностичного целеобразо-вания по отдельным её свойствам, а также о параметрах диагно-стичной цели.

Под личностью, в самом общем виде, понимают человека, овладевшего в определённой мере знаниями и умениями жизнедеятельности в современном мире людей и вещей. В структуре личности различают свойства, присущие ей от рождения — генетические свойства и свойства, приобретаемые ею прижизненно в результате обучения в широком смысле этого слова.

Выше показаны также имеющиеся в настоящее время у педагогической науки параметры диагностичной цели. Это далеко не полный их перечень, остаются всё ещё утаиваемые природой от нашего исследовательского ока и другие, не менее значимые параметры качества подготовки человека к жизни и деятельности, например, разумность деятельности, нравственность деятельности и др. Безусловно, когда придёт, наконец, к обучающим и потребителям их «продукции» понимание того, что организованное образование не может ограничиваться поверхностным просвещением (К1= 0,3 - 0,5), а должно выполнять серьёзную работу по реальной подготовке своих учащихся к жизни (а2 - а3; в2 - в3), тогда, как из рога изобилия, появятся новые диагностич-ные параметры качества подготовки человека к определённому виду деятельности. Следом за ними придут гарантирующие это качество педагогические системы. А из них «посыплются» высокообразованные и воспитанные люди.

Важнейшим этапом на этом пути будет разработка инструментов диагностики качества подготовки, сопряжённых с выделенными параметрами качества обучения и образования.

2. Требование валидности измерения качества обучения

Слово «валидность» означает соответствие правилу или истине. Можно говорить о валидном выводе или доказательстве, поступке или действии. Говоря о валидном измерении и оценке знаний учащихся, подразумевают, что результаты этих действий точно и однозначно характеризуют подготовленность учащегося в данном предмете или в данной деятельности. К примеру, учащийся получил оценку «пять» по некоторому предмету при вы-

116

Bespalkol.qxd 28.02.2008 16:15 Page 1S7

Лекция № 4. Инструменты диагностики качества знаний учащихся. Тесты

пуске из школы, а при поступлении в вуз его знания были оценены «четвёркой» или того хуже «тройкой». Что это означает? Это означает, что одна из его оценок или обе вместе не валидны («ин-валидны»).

Как появляется инвалидная оценка? Инвалидность оценки имеет несколько источников:

1. Проверка качества знаний осуществлялась с отступлением от обозначенного программой содержания обучения. В школе это могло быть из-за сокращения учителем числа УЭ, на базе которых проводился экзамен. В вузе, наоборот, экзаменаторы часто выходят за пределы школьных программ, предлагая учащимся «догадываться» о существовании ещё и других УЭ, не вошедших в школьную программу, но известных экзаменаторам.

К примеру, в США ощущается острая нужда в медицинском персонале среднего и низшего звена («beginning practioner»). Казалось бы, возьми и обучи массу желающих получить эту работу на первом — втором уровнях с ограниченными рамками непосредственной деятельности числом УЭ («minimum competency») и ликвидируй дефицит. Но этот дефицит на руку профессиональной ассоциации медицинских сестёр: таким путём можно требовать повышенной зарплаты за неадекватный труд (то же делает и врачебная ассоциация). Как же перекрыть доступ к этой профессии? Наиболее простой и «демократичный» способ — это создать непреодолимый экзамен, предложив претендентам инвалидные тесты.

Медсестра обслуживает 56-летнего больного, который принимает лекарство Haldol2 mg PO BID. Какую из ниже перечисленных диет сестра может порекомендовать больному?

а) 100 г телятины, печёная картошка, салат, солёный огурчик, яблочный пирог и стакан молока;

б) 100 г жареной курицы, зелёный горошек, варёный рис, хлеб, банан и молоко;

в) бутерброд с сыром, жареная картошка с кетчупом, печенье, яблоко и молоко;

г) 100 г жареной рыбы, хлеб, брокколи, мороженое и ананасовый сок через полчаса после еды.

Весь этот «навороченный» тест имеет одну задачу: так запутать испытуемого, чтобы он обязательно провалился, потому что

117

-е-

ВеБраІкоІ.дхсС 28.02.2008 16:15 Раде 1:8

В.П. Беспалько. ПРИРОДОСООБРАЗНАЯ ПЕДАГОГИКА

тест является предельно инвалидным: в нём не содержится в явном виде тот вопрос, который удерживает в своём уме автор теста и до которого должен не иначе как телепатически додуматься испытуемый. Подвох состоит в том, что для больного, принимающего данное лекарство, нет ограничений в диете, а поэтому все альтернативы теста правильны, но экзаменатор хочет, но об этом не говорит испытуемому, чтобы тот выбрал «наилучшую» диету для этого больного и предполагает, что такой диетой будет диета по п. 2. Почему автор считает, что наилучшей диетой для данного больного будет эта диета? «Потому что, — говорит он, — это сбалансированная диета». Однако с тем же свободным подходом к анализу теста испытуемый может вполне резонно предположить, что 56-летний больной — мужчина, организм которого не принимает молока, иначе почему только четвёртая диета без молока? И выбрать п. 4. С другой стороны, испытуемый может предположить, что не случайно в диете по п. 1 упоминается солёный огурчик и, по чеховской рекомендации о стреляющем ружье, может предположить, что у больного плохой аппетит, и выберет диету по п. 1.

Так инвалидный тест с неопределённой формулировкой задания становится ловушкой для испытуемого, который может хорошо усвоить предмет, но не в состоянии угадать скрытые мысли экзаменатора. Такие инвалидные тесты, однако, хорошо служат целям профессиональных ассоциаций, скрывая их действительную дискриминационную политику. В результате искусственно созданного в США острого дефицита медицинских кадров медицинское обслуживание стало уже не просто самым дорогим в мире, но и просто недоступным для половины населения страны в связи с космической ценой медицинской страховки и даже рутиной медицинской процедуры. Как ассоциации добиваются желаемого эффекта, удерживая массу медицинских абитуриентов за пределами профессии? Они об этом сами пишут в иструкциях испытуемым, не подозревая, что совершают преднамеренное педагогическое преступление: «Вам не помогут в преодолении теста знания, полученные вами в учебном заведении (колледже). Для преодоления теста вам надо подумать и догадаться, в чём состоит правильный ответ». Но как можно додуматься и догадаться до того, чему тебя не обучали или о чём тебя не спрашивают? Об этом инструкция умалчивает. А испытуемые не догадываются, что у них есть достаточные основания для подачи в суд за экзамен содержательно инвалидными тестами. Поскольку во всех

118

-е-

ВеБра1ко1.дхсС 28.02.2008 16:15 Раде 1Г-0

Лекция № 4. Инструменты диагностики качества знаний учащихся. Тесты

названных случаях мы имеем отступление от содержательной валидности измерения и оценки знаний учащихся.

2. Второй источник отступления от валидности оценки — предложение учащимся выполнить действие, превышающее или являющееся ниже заданной программой обучения диагностич-ной цели по а, в, Т, у, если цель задана диагностично. Если же цель не задана диагностично, то это не обучение, а элементарное просвещение, результаты которого могут проверяться только тестами первого уровня (знакомство).

Этот вид валидности называют функциональной валидностью измерения и оценки качества знаний учащихся. Нарушение функциональной валидности оценки знаний учащихся в традиционном обучении неизбежно по той простой причине, что цель не задана диагностично, а поэтому учитель и экзаменатор видят её по-своему, что типично при субъективных методах контроля. И даже в том случае, когда делается попытка объективизировать контроль качества знаний учащихся (как, например, в случае ЕГЭ), то отсутствие в обучении диагностичной цели неизбежно ведёт к нарушению функциональной валидности контроля.

3. Наконец, третьим и довольно распространённым источником возможной инвалидности теста является дефектная формулировка самого задания теста, когда учащемуся не ясно, что требуется сделать в тесте. Пример такого теста приведён выше. Другими словами, предлагаемый тест является неопределённым и не общепонятным.

Итак, измерение и оценка качества знаний учащихся должна удовлетворять требованию валидности этих процедур. В противном случае учащиеся либо развращаются либеральным экзаменатором, либо столь же незаслуженно наказываются слишком строгим испытателем. И то и другое вредно для учащегося и вредно для образования.