Темы диссертаций по педагогике » Общая педагогика, история педагогики и образования

автореферат и диссертация по педагогике 13.00.01 для написания научной статьи или работы на тему: Образовательная квалиметрия как фактор повышения эффективности контроля качества процесса обучения

Автореферат по педагогике на тему «Образовательная квалиметрия как фактор повышения эффективности контроля качества процесса обучения», специальность ВАК РФ 13.00.01 - Общая педагогика, история педагогики и образования
Автореферат
Автор научной работы
 Сафонцев, Сергей Александрович
Ученая степень
 доктора педагогических наук
Место защиты
 Ростов-на-Дону
Год защиты
 2004
Специальность ВАК РФ
 13.00.01
Диссертация по педагогике на тему «Образовательная квалиметрия как фактор повышения эффективности контроля качества процесса обучения», специальность ВАК РФ 13.00.01 - Общая педагогика, история педагогики и образования
Диссертация

Автореферат диссертации по теме "Образовательная квалиметрия как фактор повышения эффективности контроля качества процесса обучения"

Сафонцев Сергей Александрович

ОБРАЗОВАТЕЛЬНАЯ КВАЛИМЕТРИЯ КАК ФАКТОР ПОВЫШЕНИЯ ЭФФЕКТИВНОСТИ КОНТРОЛЯ КАЧЕСТВА ПРОЦЕССА ОБУЧЕНИЯ

13.00.01 - Общая педагогика, история педагогики и образования

АВТОРЕФЕРАТ диссертации на соискание ученой степени доктора педагогических наук

Сафонцев Сергей Александрович

ОБРАЗОВАТЕЛЬНАЯ КВАЛИМЕТРИЯ КАК ФАКТОР ПОВЫШЕНИЯ ЭФФЕКТИВНОСТИ КОНТРОЛЯ КАЧЕСТВА ПРОЦЕССА ОБУЧЕНИЯ

13.00.01 - Общая педагогика, история педагогики и образования

АВТОРЕФЕРАТ диссертации на соискание ученой степени доктора педагогических наук

Работа выполнена на кафедре педагогики Ростовского государственного педагогического университета

Научный консультант:

доктор педагогических наук, профессор, академик РАО Бондаревская Е.В.

Официальные оппоненты:

доктор педагогических наук, профессор, член-корр. РАО, академик РАПО Монахов В.М.

доктор педагогических наук, профессор Сухорукова Л.М.

доктор педагогических наук, профессор УманА. И.

Ведущая организация:

Академия повышения квалификации и переподготовки работников образования

Защита диссертации состоится 26 января 2005 г. на заседании Диссертационного совета Д 212.206.02 в Ростовском государственном педагогическом университете по адресу: 344082, г. Ростов-на-Дону, ул. Б. Садовая, 33

С диссертацией можно ознакомиться в библиотеке Ростовского государственного педагогического университета

Автореферат разослан 25 декабря 2004 г.

Ученый секретарь диссертационного совета:

(НОС. НАЦИОНАЛЬНА^!

библиотека }

С.Пет»рб] < О» *0

Пивненко П. П.

)ТЬ*Л I

ЙРЙЗ]

ОБЩАЯ ХАРАКТЕРИСТИКА РАБОТЫ

Актуальность исследования. Модернизация отечественного образования, предполагающая введение государственного образовательного стандарта, невозможна без эффективной системы управления качеством. Ярким подтверждением этого факта является использование соответствующих понятий в нормативных документах, а также организация в учебных заведениях специализированных структур, основной функцией которых является осуществление контроля эффективности процесса обучения.

В последнее десятилетие в нашей стране проблема качества образования активно рассматривается с квалиметрических позиций, то есть посредством сопоставления учебных достижений обучающихся с требованиями государственных образовательных стандартов (Болотов В.А., Субетто А.И., Татур Ю.Г. и др.). Анализируя методологический подход к количественным способам исследования образовательного процесса, следует признать наиболее перспективным аспектом управления качеством современные модели стандартов и мониторинга (Бай-денко В.И., Кулемин НА, Нейман Ю.М., Хлебников В.А., Челышкова М.Б. идр.).

Решение квалиметрических задач в образовании сопряжено с большими трудностями, обусловленными отсутствием фундаментальных работ в соответствующей области педагогического знания, а также существующими противоречиями между сторонниками внедрения математических методов в педагогике и концепцией личностно-ориентированного образования. Однако еще в конце 90-х годов двадцатого века появились первые попытки использования результатов контроля уровня обученности учащихся для развивающего личностно-ориентированного обучения (Бондаревская Е.В., Кульневич С.В., Се-левко Г.К., Сериков В.В. и др.). Большое количество исследований в области управления качеством образования, педагогической диагностики и образовательной квалиметрии выполнены на основе идей гуманизации и гуманитаризации образования (Бермус А.Г., Ефремова Н.Ф., Ковалева Г.С. и др.).

Качественный образовательный процесс предполагает применение стандартизованных дидактических тестов, которые в последнее время особенно активно разрабатываются в нашей стране. Неотъемлемая социальная функция процедуры тестирования выводит отечест-

венное образование на качественно новый уровень, обеспечивающий интеллектуальное развитие общества.

В связи с активным внедрением современных методов педагогической диагностики перед всеми учебными заведениями страны ставится задача обеспечения соответствия знаний и умений, приобретенных учащимися в процессе обучения, государственным образовательным стандартам. Оценка качества образовательного продукта является чисто квалиметрической задачей. Но чтобы добиться желаемого результата, необходимо осуществить оптимизацию процесса обучения с учетом потенциальных возможностей каждого учащегося. Поэтому диагностические материалы должны оценивать не только знаниевый компонент процесса обучения, но и способность индивида продолжать образование в избранной области знаний.

Применение тестовой диагностики на всех этапах процесса обучения сопряжено с большими трудностями, связанными с неискушенностью большинства членов общества в вопросах квалиметрии в целом и образовательной квалиметрии в частности. У многих учителей сохраняется устойчивая неприязнь к тестированию. Она вызван г низким качеством многих предлагаемых ранее контрольно-измерительных материалов, которые совершенно необоснованно называли тестами. Попытки неквалифицированных специалистов создать всевозможные измерители только усиливают негативное отношение педагогической общественности к процедуре тестирования.

Несмотря на то, что педагогическая диагностика и образовательная квалиметрия являются тесно связанными между собой практическими областями исследований в рамках педагогической науки, у каждой из них есть ряд существенных особенностей. Диагностика позволяет осуществить качественную или количественную оценку определенных характеристик объекта и истолковать ее в терминах данной научной дисциплины. Педагогическая диагностика обычно проводится по проблематике обучения и воспитания с целью выработки необходимых коррекционных мер. Способы диагностирования могут быть самыми разнообразными, начиная со сравнительной оценки по чисто внешним признакам и заканчивая количественной оценкой объекта исследования с помощью педагогических измерителей. Однако все процедуры педагогической диагностики ориентированы на получение качественных выводов о состоянии образовательного процесса.

В отличие от педагогической диагностики образовательная ква-лиметрия предполагает сравнение результатов тестирования с существующими стандартами, например, с государственным стандартом общего образования. Квалиметрические методы изначально нашли применение в производственной сфере, где эффективность работы любого предприятия определяется качеством производимой продукции. Рентабельность производства, прежде всего, зависит от объемов сбыта, так как товар низкого качества никогда не будет востребован большинством потребителей. Только в условиях рыночной экономики квалимет-рические методы стали активно внедряться в сферу общественного потребления.

Прежде всего, необходимо установить эталон данного изделия, предполагающий его соответствие всем требованиям Госстандарта и потребительского рынка. Затем произведенная продукция выборочно сравнивается с эталонным изделием с целью определения соответствия по целому ряду критериев. При этом недостаточно добиться общей работоспособности устройства или применимости изделия для той или иной цели. Необходимо убедиться в стандартных показателях, как состава изделия, так и его параметров на каждом этапе выполняемых действий. Усредненные показатели нормативов установленных Госстандартом также не принимаются во внимание. Только соответствие требованиям стандарта на всех этапах и контрольных точках работы тестируемого изделия может убедить метрологов в его качественных показателях.

Образовательная квалиметрия призвана осуществить стандартизацию уровней достижений учащихся в конце определенного этапа обучения. Ситуация чем-то напоминает производственную сферу деятельности, так как она предполагает сравнение результатов обучения с существующими стандартами. Поскольку процедура стандартизации предполагает сопоставление результатов тестирования с эталонными нормами, необходимо в процессе обследования уровня обученности проявлять необходимую требовательность, сохраняя при этом объективность. Оптимальным условием проведения любой квалиметриче-ской процедуры является привлечение независимого диагноста, выступающего в роли метролога.

Аналогично квалиметрическим операциям, производимым при компоновке сложного технического устройства, в процессе обучения предполагается текущий контроль уровня обученности учащихся, ко-

торый осуществляется преподавателем после изучения очередной темы образовательной программы и гарантирует надежное усвоение изучаемого материала на каждом этапе обучения. Зная о предстоящем независимом обследовании уровней достижений учащихся, преподаватель должен ориентироваться на безусловное выполнение образовательного стандарта, а также стремиться к максимальной объективности выставляемых им оценок.

Система управления качеством в каждом учебном заведении не должна сводиться только к реализации существующей нормативно-правовой базы образования, а непосредственно отслеживать позитивные и негативные тенденции деятельности отдельных преподавателей и факторы, влияющие на эффективность процесса обучения в целом. Многие образовательные учреждения успешно применяют квалимет-рические методы, но им приходится продвигаться на ощупь в силу недостаточного развития теоретической базы образовательной квалимет-рии.

Квалиметрически оснащенный образовательный процесс, предполагающий систематическое применение тестов, позволяет установить соответствие между данными мониторинга, осуществляемого сотрудниками образовательного учреждения, и результатами независимого обследования. Эту задачу должна решать активно создаваемая в нашей стране система менеджмента качества образования, важнейшим элементом которой является квалиметрический мониторинг, отслеживающий на каждом этапе обучения степень соответствия результатов тестирования государственному образовательному стандарту.

Учитывая существующие проблемы распространения современных методов образовательной квалиметрии, данное исследование представляется весьма актуальным. С его помощью любой преподаватель сможет оценить эффективность собственной педагогической деятельности, а руководитель учебного заведения - качество образовательного процесса в целом. Сложность заключается в том, что данная область исследований находится на стыке гуманитарного и естественнонаучного образования, а, следовательно, должна сочетать в себе общефилософский подход и математическую интерпретацию рассматриваемых процессов. Настороженное отношение к работам, содержащим не только вербалыгую составляющую, но и элементы математического моделирования, объясняется некоторой искусственностью привнесения в педагогику формальных математических методов. Но если эти

методы являются содержательно обоснованными, а каждое формализуемое понятие и соотношение подвергается вербальному анализу, то наиболее существенные закономерности образовательного процесса могут быть представлены в лаконичной форме с помощью математических символов В дальнейшем это облегчает применение статистических методов в эмпирической составляющей педагогического исследования.

Целью исследования является теоретическое обоснование ква-лиметрических методов повышения эффективности контроля качества процесса обучения, использующих методологию современной натуральной философии и позволяющих разработать педагогические измерители по различным учебным дисциплинам.

Объект исследования - система контроля качества образовательного учреждения, включающая в себя оценку профессионально-педагогической квалификации преподавателя.

Предмет исследования - теоретические основы образовательной квалиметрии и процедура стандартизации дидактических тестов, позволяющих сопоставить результаты тестирования уровней достижений учащихся с требованиями государственного образовательного стандарта.

С учетом цели, объекта и предмета исследования выдвигается гипотеза о том, что образовательная квалиметрия является фактором повышения эффективности контроля качества процесса обучения при условии, что:

- инвариантное описание процесса обучения, включающее в себя квалиметрическое образовательное пространство, интервалыгую шкалу уровней достижений, потенциальные возможности учащихся, педагогическое действие, а также поле индивидуальной педагогической поддержки, позволяет выявить особенности деятельности независимого диагноста при проведении мониторинга образовательного процесса;

- анализ дискретных свойств процесса обучения, включающий в себя структурные элементы образовательной программы, мотивацион-ные паузы и длины волн субъектов квалиметрического образовательного пространства, позволяет оптимизировать индивидуальные образовательные траектории учащихся;

- классическое приближение квалиметрической модели процесса обучения дает возможность сформулировать основные признаки системы контроля качества образовательного процесса;

- обеспечивая содержательную валидность дидактического теста с помощью экспертного метода, его надежность посредством апробации на репрезентативной выборке, конструктную валидность путем сравнения надежности внутренней согласованности измерителя с идеальным нормативным тестом, а критериальную валидность - сопоставлением результатов независимого тестирования с данными текущей аттестации, можно осуществить процедуру стандартизации педагогического измерителя;

- стандартизованный дидактический тест позволяет оценить эффективность процесса обучения и профессионально-педагогическую квалификацию преподавателя.

Для реализации цели и проверки гипотезы были поставлены следующие задачи исследования:

- сформировать систему ключевых понятий образовательной квалиметрии: «квалиметрическое образовательное пространство», «интервальная шкала уровней достижений», «потенциальные возможности», «педагогическое действие», «поле индивидуальной педагогической поддержки», «структурный элемент образовательной программы», «мотивационная пауза» и «длина волны субъекта квалиметриче-ского образовательного пространства»;

- создать квалиметрическую модель процесса обучения, а также ее классическое приближение, с целью выявления статистических показателей эффективности образовательного процесса;

- разработать методику создания поля индивидуальной педагогической поддержки, соответствующего потенциальным возможностям учащихся, посредством установления длительности различных этапов усвоения структурных элементов образовательной программы и использования мотивационных пауз для обоснования целесообразности изучения программного материала;

- разработать и апробировать процедуру стандартизации дидактических тестов, включающую в себя обеспечение содержательной, конструктной, критериальной валидности и надежности педагогического измерителя;

- разработать технологию оценивания эффективности процесса обучения и профессионально-педагогической квалификации преподавателя.

Концептуальной и методологической основой исследования

являются теории и идеи:

- современной натуральной философии (М.Борн, А.Пуанкаре, Р.Фейнман и др.);

- структуры и качества образования (А.А.Аветисов, С.И.Архангельский, Ю.К.Бабанский, В.И.Байденко, В.СЛеднев, Н.А.Селезнева,

A.И.Субетто, Н.Ф.Талызина, Ю.Г.Тагур и др.);

- личностно-ориентированного и развивающего образования (Е.В.Бондаревская, С.В.Кульневич, В.В.Сериков, В.Т.Фоменко и

др-);

- современных образовательных технологий (В.П.Беспалько, Г.К.Се-левко и др.);

- психологического тестирования (А.Анастази, П.Я.Гальперин, Ю.З.Гильбух, П.Клайн и др.);

- педагогической диагностики (В.С.Аванесов, В.П.Бинитас, К.Ингенкамп, Е.А.Михайлычев, В.И.Михеев, Дж.Равен,

B.С.Черепанов, Д.Б.Эльконин и др.);

- квалиметрического мониторинга (Н.В.Акинфиева, Т.С.Анисимова, Н.В.Гороховатская, В.Е.Каплан, Н.А.Кулемин, А.Н.Майоров, В.И.Нардюжев, Ю.М.Нейман, В.А.Хлебников, Е.В.Яковлев и др.);

- технологии тестового контроля (В.С.Аванесов, Г.С.Ковалева, А.Н.Майоров, В.И.Нардюжев, Ю.М.Нейман, В.А.Хлебников, М.Б.Челышкова и др.);

- статистической обработки информации и математического моделирования (Р.Ибел, Л.Б.Ительсон, Г.Ф.Кьюдер, М.В.Ричердсон, К.Пирсон, Дж.Раш и др.).

В реализации поставленной цели и решении задач использовались общенаучные и специальные методы теоретического и эмпирического исследования:

- анализ и синтез основных принципов современной натуральной философии;

- теоретическое моделирование квалиметрически значимых закономерностей образовательного процесса;

- факторный анализ условий оптимизации процесса обучения;

- анализ соотношений квалиметрической модели процесса обучения на экстремум;

- стратификация генеральной совокупности учащихся общеобразовательных учреждений и создание репрезентативной выборки;

- статистическая обработка результатов апробации дидактического теста с целью его стандартизации;

- выявление количественных показателей эффективности процесса обучения на основе анализа статистических закономерностей распределения результатов тестирования учащихся.

Исследование проводилось в четыре этапа.

1. Изучение методов педагогической диагностики и образовательной квалиметрии параллельно с преподаванием в специализированных физико-математических классах при Ростовском государственном университете. (1989-1993 гг.)

2. Проблемно ориентированный анализ первоисточников и подготовка квалиметрической модели процесса обучения. Изучение статистических методов обработки информации. (1994-1999 гг.)

3. Проведение многофакторного педагогического анализа результатов дидактического тестирования. Разработка и апробация нормативно-критериального теста итогового контроля. Защита кандидатской диссертации по теме: «Технология критериально ориентированного тестирования потенциальных возможностей учащихся». (2000-2002 гг.)

4. Создание теоретических основ образовательной квалимет-рии и их экспериментальная проверка в процессе руководства Центром педагогических измерений на базе Ростовского областного института повышения квалификации и переподготовки работников образования. Обсуждение результатов исследования на страницах специализированного журнала «Педагогическая диагностика». Завершение редактирования основного текста диссертации. (2003-2004 гг.)

Базой исследования являлись следующие учреждения и организации: Центр модернизации общего образования при Министерстве общего и профессионального образования Ростовской области; Ростовский областной институт повышения квалификации и переподготовки работников образования (РО ИПК и ПРО) с филиалами в горо-

дах Волгодонск, Каменск-Шахтинский и Шахты; Таганрогский государственный педагогический институт; Новороссийская государственная морская академия (Ростовский филиал) с сетью лицейских классов; районные и городские отделы образования, а также общеобразовательные школы Ростовской области.

Основным результатом исследования является теория образовательной квалиметрии, используемая в целях повышения эффективности контроля качества процесса обучения и включающая в себя:

- принципы образовательной квалиметрии, сформулированные на методологической основе современной натуральной философии:

1) принцип инвариантности, суть которого заключается в том, что качество образовательного процесса не зависит от точки зрения диагноста;

2) принцип дискретности, заключающийся в том, что педагогическое действие содержит целое число структурных элементов образовательной программы, на основе которых разрабатываются тестовые задания для контроля качества обучения;

- квалиметрическую модель процесса обучения, классическое приближение которой позволяет получить распределение тестовых результатов по уровням достижений учащихся, положенное в основу объективных оценочных норм;

- нормированный квалификационный коэффициент, с помощью которого можно оценить качество профессионально-педагогической подготовки преподавателя;

- процедуру обеспечения содержательной валидности дидактического теста, предполагающую проведение экспертизы образовательной программы с целью определения комбинированной весомости отдельных вопросов;

- способ количественной оценки конструктной валидности теста, основанный на сравнении надежности внутренней согласованности педагогического измерителя с соответствующим показателем идеального нормативного теста;

- методы корреляционных вопросов, доверительного интервала и процентной разности ответов респондентов на позитивные и негативные вопросы, касающиеся одного и того же объекта исследования, позволяющие обеспечить объективность результатов педагогического анкетирования;

- метод расхождения медиан статистических распределений результатов текущий аттестации и независимого обследования с помо-

щью стандартизованного дидактического теста, позволяющий оценить эффективность процесса обучения.

Научная новизна и теоретическая значимость исследования

состоят в следующем:

- созданы теоретические основы образовательной квалиметрии на базе методологии современной натуральной философии, предполагающие инвариантное описание дискретных свойств процесса обучения;

- выявлены особенности деятельности независимого диагноста при проведении мониторинга образовательного процесса, заключающиеся в объективной оценке уровней достижений и потенциальных возможностей учащихся;

- выведена функция распространения тестовых результатов по уровням достижений учащихся, позволяющая сопоставить степень их разброса с нормальным статистическим распределением, и на этой основе делать заключение о степени эффективности образовательного процесса;

- получено соотношение для комбинированной весомости отдельных вопросов образовательной программы, позволяющее на основе экспертной оценки выявить ее структурные элементы, имеющие определяющее значение для контроля качества процесса обучения;

- установлен диапазон допустимых значений надежности внутренней согласованности педагогического измерителя, соответствующих необходимым конструктным свойствам нормативно-критериального теста достижений, благодаря которым повышается точность производимых измерений;

- разработаны квалиметрические методы обработки результатов анкетирования, предполагающие применение корреляционного анализа и процентной разности позитивных и негативных суждений респондентов;

- разработан статистический метод оценки отклонения центральной тенденции распределения результатов тестирования, позволяющий сравнить данные независимого обследования и текущей аттестации учащихся, и на этой основе составить суждение о качестве процесса обучения.

Практическая значимость исследования заключается в возможности применения теоретических выводов образовательной квали-метрии для повышения эффективности контроля качества процесса обучения. Каждый преподаватель может с помощью стандартизован-

ного дидактического теста осуществить входной контроль потенциальных возможностей учащихся, вычислить средневзвешенное значение поля индивидуальной педагогической поддержки и правильно распределить время занятия между подготовительным и сущностно-мотивационным этапами изучения структурного элемента образовательной программы. Придерживаясь предельно допустимой скорости повторения ранее пройденного материала и изложения новой для учащихся информации, преподаватель не должен превышать среднюю скорость передачи информации 14 бит в секунду. Это гарантирует усвоение большинством учащихся программного материала на понятийном уровне при условии, что в конце изучения каждого структурного элемента им будет предложено мотивационное задание, которое обладает практической направленностью и позволяет обосновать целесообразность усвоения программного материала. Результаты обучения фиксируются с помощью дидактических тестов рубежного или итогового контроля, которые прошли процедуру стандартизации. Если обеспечена необходимая надежность, а также содержательная, конструкт-ная и критериальная валидность педагогического измерителя, то с его помощью можно не только определить потенциальные возможности учащихся, но и нормированный квалификационный коэффициент преподавателя.

Достоверность результатов исследования гарантируется методологически обоснованным анализом теоретических основ образовательной квалиметрии, репрезентативностью выборок, сформированных в процессе стратификации генеральной совокупности учащихся общеобразовательных школ Ростовской области, а также соблюдением всех требований к методологии проведения педагогического исследования. Подготовка диссертации сопровождалась участием автора в региональных и всероссийских конференциях, публикацией монографических и учебно-методических изданий, а также редактированием всероссийского специализированного журнала по вопросам педагогической диагностики и образовательной квалиметрии.

Назащиту выносятся следующие положения:

1. Эффективность использования образовательной квалимет-рии определяется закономерностями, раскрывающими связи между образовательным процессом и способами контроля его качества. Эти закономерности сформулированы в нижеследующих положениях.

2. Образовательный процесс не зависит от точки зрения диагноста. На основе анализа структуры и функций квалиметрического образовательного пространства, процедуры шкалирования уровней достижений учащихся и способов определения их потенциальных возможностей вводится понятие «педагогической действие», которое характеризует образовательный процесс как с точки зрения его развития в квалиметрическом образовательном пространстве, так и с точки зрения потенциальных возможностей учащихся. Численное значение и форма записи индивидуального педагогического действия не зависит от точки зрения диагноста, несмотря на то, что в разных системах отсчета могут быть зарегистрированы различные изменения уровней достижений учащегося.

3. Поле индивидуальной педагогической поддержки ориентируется на учащихся с низкими потенциальными возможностями. Величина поля должна совпадать с потенциальными возможностями слабых учащихся, а по отношению к сильным учащимся квалиметрическое образовательное пространство должно оставаться однородным. Такая конфигурация поля индивидуальной педагогической поддержки гарантирует стандартное перемещение большинства учащихся вдоль шкалы уровней достижений и уменьшение дисперсии статистического распределения результатов тестирования.

4. Педагогическое действие содержит целое число структурных элементов образовательной программы. Процесс усвоения структурного элемента включает в себя подготовительный этап, заключающийся в повторении ранее изученного материала, и сущностный этап, в течение которого преподаватель излагает новую для учащихся информацию. В конце изучения каждого структурного элемента образовательной программы преподаватель должен сформировать мотиваци-онную паузу, позволяющую обосновать целесообразность усвоения переданной информации. При этом учащимся предлагаются специальные мотивационные задания, которые обладают определенной значимостью для адаптации индивида в социуме.

5. На каждом этапе изучения структурного элемента образовательной программы информация должна передаваться с предельно допустимой скоростью. На подготовительном этапе скорость передачи информации между субъектами квалиметрического образовательного пространства соответствует медленному темпу произнесения слов, а на сущностном и мотивационном этапах скорость передачи информации становится приблизительно в три раза меньше, что требует секундных пауз между произносимыми словами. Определяя длительность различных этапов изучения структурных элементов образовательной программы на основе средневзвешенных потенциальных возможностей контингента учащихся, удалось установить среднюю скорость передачи информации при эффективном процессе обучения.

6. Мониторинг учебных достижений в эффективном образовательном процессе осуществляется с помощью дидактических тестов, прошедших процедуру стандартизации, то есть:

- обеспечение содержательной валидности с помощью экспертной оценки весомости отдельных вопросов образовательной программы;

- определение надежности внутренней согласованности тестовых заданий на основе данных репрезентации;

- выявление конструктных свойств педагогического измерителя путем сравнения его надежности с соогветствующим показателем идеального нормативного теста;

- определение критериальной валидности по корреляции тестовых и текущих оценок участников репрезентативной выборки.

7. Процесс обучения можно считать эффективным, если нормированный квалификационный коэффициент превышает единичное значение. Индикаторным показателем эффективности процесса обучения является совпадение медиан статистических распределений данных текущей аттестации и результатов независимого обследования с помощью стандартизованного дидактического теста с доверительной вероятностью не больше 5%. Затем необходимо сопоставить дисперсию распределения результатов тестирования учащихся с нормальным статистическим распределением. Полученный таким образом нормированный квалификационный коэффициент должен превышать единичное значение.

Апробация результатов исследования. Основные положения диссертационного исследования отражены в публикациях автора в виде статей в журналах и сборниках, а также в монографических изданиях: «Система контроля качества образовательного процесса» (2002), «Инвариантность образовательного процесса» (2002), «Дискретность образовательного процесса» (2003), «Образовательная квалиметрия в системе повышения квалификации» (2003).

Результаты исследования докладывались на следующих конференциях:

- «Проблемы обновления содержания общего образования» (Ростов-на-Дону, 1992);

- «Управление качеством образования в высшей школе и стратегия подготовки нового поколения российского бизнеса» (Ростов-на-Дону, 2001,2002);

- «Математика. Образование. Экология. Тендерные проблемы» (Воронеж, 2003);

- «Оценка эффективности образовательных инноваций и технологий» (Славянск-на-Кубани, 2003);

- «Психолого-педагогические проблемы развития современного об-

разования» (Брянск, 2003);

- «Единый государственный экзамен в региональной системе управления качеством образования» (Ростов-на-Дону, 2003);

- «Актуальные проблемы педагогической диагностики и мониторинга российской системы образования» (Таганрог, 2003,2004);

- «Диагностика уровня достижений студентов в современной высшей школе» (Ростов-на-Дону, 2004).

По теме диссертации опубликованы 54 печатные работы, из них 10 учебно-методических пособий, 44 научные работы, среди которых 4 монографии и 11 статей, опубликованных в реферируемых журналах согласно списку ВАК.

Внедрение результатов исследований. Автор на протяжении

ряда лет (2002-2004 гг.) осуществлял массовые обследования уровня обученности учащихся общеобразовательных школ Ростовской области. Квалиметрические методики, разработанные в процессе написания диссертации, нашли свое применение при подготовке диагностических материалов, а затем были апробированы на репрезентативных выборках выпускников начальной, основной и средней (полной) общеобра-

зовательной школы. Создан областной банк педагогических измерителей, используемых в эксперименте по совершенствованию структуры и содержания общего образования, а также для проведения аттестационных мероприятий с целью присвоения первой и высшей квалификационной категории учителям Ростовской области. Результаты диссертационного исследования были использованы для создания системы контроля качества в Ростовском областном институте повышения квалификации и переподготовки работников образования, а также в Ростовском филиале Новороссийской государственной морской академии.

В процессе работы над теоретическими основами образовательной квалиметрии автор участвовал в организации специализированного журнала «Педагогическая диагностика», являющегося приложением журнала «Школьные технологии» и издающегося в редакции «Народное образование», а затем стал заместителем главного редактора. В процессе рецензирования статей для журнала по образовательной ква-лиметрии достигался эффект обсуждения ключевых идей исследования с ведущими специалистами з этой области педагогического знания. В результате целый ряд материалов автора, опубликованных в журнале «Педагогическая диагностика», стали достоянием широкой научной общественности. Журнал осуществляет дистанционное профессиональное педагогическое обучение учителей основам педагогической диагностики и образовательной квалиметрии в различных регионах Российской Федерации.

Структура и объем диссертации. Диссертация представляет собой оригинальный авторский текст, объемом 395 страниц, состоящий их введения, четырех глав, заключения, списка 215 первоисточников и приложений.

ОСНОВНОЕ СОДЕРЖАНИЕ РАБОТЫ

Во введении обосновывается актуальность выбранной темы, определяются цель, объект, предмет, формулируется гипотеза и задачи диссертационного исследования, а также формируется методологический аппарат образовательной квалиметрии; излагаются основные положения, выносимые на защиту, раскрывается научная новизна, теоретическая и практическая значимость результатов исследования.

В первой главе «Инвариантность образовательного процесса» закладываются теоретические основы образовательной квалиметрии. Методология современной натуральной философии позволяет с помощью небольшого количества постулатов развивать логически обоснованные рассуждения, применяемые при исследовании такого сложного многофакторного нелинейного процесса, каким является процесс обучения.

Создание теоретических основ образовательной квалиметрии несколько затруднено терминологическими различиями педагогической науки и методологии современной натуральной философии. Но возникающие проблемы компенсируются целым рядом бесспорных преимуществ. Во-первых, логическая обоснованность психолого-педагогического анализа дополняется математической составляющей, что позволяет избавиться от возможных ошибок. Во-вторых, статистические закономерности, которые обычно в педагогическом исследовании выглядят чужеродными, становятся естественным продолжением теоретических построений и позволяют не только подтвердить качественные выводы, но и установить степень соответствия эмпирических данных полученным количественным соотношениям. В-третьих, образовательная квалиметрия приобретает черты строгой научной дисциплины, обеспечивающей инвариантность получаемых выводов. Если чисто гуманитарная научная дисциплина находит адекватное выражение в формализованном модельном представлении, то перед нею открываются новые перспективы., Логически обоснованные взаимосвязи становятся неотъемлемым атрибутом теоретических построений, что позволяет избавиться от субъективной составляющей формулируемых выводов.

Несмотря на правомочность субъективной интерпретации результатов квалиметрического мониторинга, существует объективная потребность в инвариантном подходе к описанию образовательного процесса. Возможность подобного подхода основывается на уверенности всех участников процесса обучения и окружающих в том, что существуют объективные индивидуальные и групповые показатели степени его эффективности. Действительно, никто не может сомневаться в том, что преподаватель передает определенный объем информации своим подопечным, в результате чего, учащиеся повышают свой уровень достижений в данной образовательной области и развивают соб-

ственные потенциальные возможности. Различные диагносты могут по-разному оценивать результативность процесса обучения и степень соответствия уровней достижений требованиям образовательных стандартов, но невозможно отрицать сам факт передачи информации между субъектами образовательного процесса. Даже если получен отрицательный результат, и учащиеся не смогли переместиться вдоль шкалы уровней достижений - это тоже результат данного процесса обучения. Следовательно, необходимо признать инвариантный характер образовательного процесса.

Привлечение к процедуре тестирования независимого диагноста позволяет приблизить способ описания образовательного процесса к элементам реальности. Используя систему стороннего наблюдателя, в которой строго соблюдаются квалиметрические процедуры, можно более полно проанализировать взаимодействия между субъектами образовательного процесса, что позволит получить объективные результаты тестирования. Исключительная роль независимого диагноста заключается в том, что относительно него учащийся является объектом исследования, а относительно преподавателя - субъектом образовательного пространства. Субъектный статус учащегося в личностно-ориентированном процессе обучения значительно сужает диагностические возможности преподавателя. Явно выигрывая в психолого-педагогическом аспекте своей деятельности, преподаватель проигрывает в квалиметрическом аспекте. Поэтому следует признать необходимость независимого тестирования учащихся, особенно на заключительной стадии обучения.

Принцип инвариантности образовательной квалиметрии гласит: образовательный процесс не зависит от точки зрения диагноста. Это значит, что в дальнейшем при описании всевозможных педагогических процессов мы должны подчеркивать субъективный характер создаваемых моделей и помнить о том, что реально существующий образовательный процесс совершенно не зависит от способов его описания. Правда, не следует забывать о возможном влиянии высказанных суждений о тенденциях развития исследуемого процесса и, особенно, о результатах тестовой диагностики на дальнейшую педагогическую деятельность преподавателя. Психологически вполне оправдано, стремление внести коррективы в собственные практические действия, если итоги обучения признаны неудовлетворительными. Однако сле-

дует различать мнения административно зависимых экспертов, конкурирующих преподавателей и независимого диагноста.

Развитие теоретических основ образовательной квалиметрии потребовало введения квалиметрического образовательного пространства как структурированной системы субъектов, испытывающей корректирующее влияние извне. Данное определение подчеркивает открытость квалиметрического образовательного пространства как своеобразной системы отсчета, используемой для описания всевозможных психолого-педагогических процессов. Изолированность подобной системы немедленно приведет к невозможности сравнить реализуемый процесс обучения с существующим образовательным стандартом, а значит, будет утерян квалиметрический аспект рассматриваемого явления. Следовательно, квалиметрическое образовательное пространство предполагает наличие независимого диагноста.

Субъектами квалиметрического образовательного пространства являются преподаватели, учащиеся и их родители. Учитывая принципиальную значимость независимой диагностики для инвариантного описания процесса обучения, не следует включать в квалиметрическое образовательной пространство сотрудников администрации учебного заведения и представителей независимых контрольных органов. Их влияние на процесс обучения при проведении мониторинга необходимо свести к минимуму.

Всякое взаимодействие, описываемое в рамках натуральной философии, предполагает субъект-объектные отношения между тем, кто создает искажения пространства и тем, кто оказывается в искаженном континууме. Субъект-субъектные отношения требуют учета взаимного влияния всех участников квалиметрического образовательного пространства, что практически невозможно смоделировать. Поэтому необходимо провести структурирование субъектов по степени их значимо -сти, выделяя доминирующие в образовательном процессе. Таким образом, реальный процесс обучения при теоретическом рассмотрении в рамках образовательной квалиметрии будет заменен идеализированной моделью, в которой только преподаватели являются источниками информации способными создать поле индивидуальной педагогической поддержки, родители выступают в роли ретрансляторов, создающих мотивационный фон, а учащиеся выполняют функцию приемников информации.

Количественное описание процесса обучения предполагает введение интервальной шкалы уровней достижений, основанной на данных нормативного тестирования и позволяющей производить любые математические операции с баллами, которые набирают учащиеся в результате применения педагогических измерителей. В качестве масштаба интервальной шкалы уровней достижений выступает стандарт статистического распределения. Однако невозможно представить на одной и той же шкале результаты входного и рубежного контроля, поскольку статистическое распределение данных повторного тестирования должно быть смещено вдоль шкалы уровней достижений на величину стандарта. Единственным выходом из сложившейся ситуации является использование различных шкал, первая из которых связана с положением испытуемого, у которого тестовый балл отличается в меньшую сторону от среднестатистического значения на величину стандарта, а нулевой уровень второй шкалы смещен относительно первой на величину стандарта в большую сторону. При этом в исходной интервальной шкале в качестве единицы измерения следует использовать стандарт распределения результатов тестирования репрезентативной выборки, полученный с помощью теста входного контроля, а в рубежной интервальной шкале - стандарт, полученный в результате тестирования той же выборки тестом рубежного контроля. Подобный искусственный метод перемещения исходного уровня достижений вдоль интервальной шкалы позволяет представить процесс обучения в динамике, сохраняя нормальный вид статистического распределения результатов тестирования.

Основной личностной характеристикой учащегося в квалимет-рическом образовательном пространстве являются его потенциальные возможности, которые определяют скорость изменения умственного возраста индивида. Потенциальные возможности учащегося можно принять равными единице, если изменение уровней его достижений на данном этапе процесса обучения оказывается равным стандарту нормального статистического распределения. При этом изменения умственного и биологического возраста индивида совпадают. В наиболее общем случае потенциальные возможности совпадают с величиной уровня достижений учащегося, выраженного в стандартных единицах

Поскольку текущий контроль уровня обученности, в отличие от входной и рубежной диагностики, осуществляется посредством критериального тестирования, не позволяющего применять интервальное

шкалирование, практически невозможно непрерывно отслеживать изменение уровней достижений каждого субъекта квалиметрического образовательного пространства. Поэтому необходимо воспользоваться методологическим подходом позволяющим отказаться от детального описания поведения индивида и оперировать интегральными характеристиками процесса обучения. Для этого необходимо ввести инвариантную величину, включающую в себя изменение уровней достижений и потенциальные возможности учащегося.

Педагогическое действие - универсальная инвариантная величина, характеризующая образовательный процесс как с точки зрения его развития в квалиметрическом образовательном пространстве, так и с точки зрения потенциальных возможностей учащихся. Величина педагогического действия пропорциональна изменению уровней достижений учащегося и обратно пропорциональна его потенциальным возможностям.

В рамках собственной системы отсчета практически невозможно подобрать величину поля индивидуальной педагогической поддержки как способа задания в каждой точке квалиметрического образовательного пространства некоторой величины, характеризующей конструктивное влияние преподавателя на учащегося в соответствии с его потенциальными возможностями, так как вполне возможны ошибочные суждения преподавателя об уровне его развития и внутренних мотивационных факторах. Только результаты независимой диагностики с помощью стандартизованного дидактического теста позволяют правильно оценить потенциальные возможности учащихся и подобрать соответствующее поле индивидуальной педагогической поддержки.

Для создания эффективного процесса обучения преподаватель должен формировать поле индивидуальной педагогической поддержки, избирательно ориентируя его только на учащихся с потенциальными возможностями меньше единицы. Остальные учащиеся должны оставаться в однородном квалиметрическом образовательном пространстве, иначе их внутренние мотивации существенно снизятся.

Во второй главе «Дискретность образовательного процесса» развивается методологическая основа образовательной квалиметрии. Поскольку в процессе обучения предполагается поэтапное усвоение программного материала, всякое педагогическое действие должно обладать дискретными свойствами. Эта гипотеза находит непосредствен-

ное эмпирическое подтверждение в диагностических процедурах. Как известно, результаты педагогических измерений дают возможность определить положение каждого испытуемого относительно нормального статистического распределения, а индивидуальная сумма тестовых баллов может быть поставлена в строго однозначное соответствие его уровню учебных достижений. Вводимая таким образом интервальная шкала имеет дискретный набор градаций, так как за выполнение каждого тестового задания или отдельной логической операции учащемуся начисляется один балл, а частично усвоить какой-либо структурный элемент образовательной программы принципиально невозможно. Если же испытуемый все-таки овладел необходимыми знаниями и умениями, то он, безусловно, справится с тестовым заданием. Следовательно, в результате тестирования индивидуальные суммы тестовых баллов располагаются в строго определенных точках интервальной шкалы уровней достижений и принципиально не могут попасть в промежуточные точки, соответствующие дробным градациям. Подобное распределение тестовых результатов указывает на прерывистость квалиметрической процедуры, а значит на дискретный характер самого процесса обучения. Действительно, если бы педагогическое действие обладало непрерывными свойствами, то тестовые результаты могли бы принимать любые значения и равномерно располагались вдоль шкалы уровней достижений. Однако повторное испытание с привлечением взаимозаменяемой формы теста приводит к дискретной картине распределения результатов, хотя уровни достижений конкретных испытуемых могут оказаться несколько иными.

Поскольку педагогическое действие позволяет осуществить инвариантное описание процесса обучения, следует предположить, что именно эта величина обладает дискретными свойствами. Причем каждая порция педагогического действия должна быть связана с содержательно значимым элементом образовательной программы, усвоение которого должно контролироваться по окончании данного этапа обучения. На основе проведенного рассуждения формулируется принцип дискретности образовательной квалиметрии: педагогическое действие содержит целое число структурных элементов образовательной программы.

Структурный элемент образовательной программы обладает общепризнанной содержательной значимостью и на его основе составляется тестовое задание для педагогического измерителя. Экс-

пертная оценка весомости каждого вопроса образовательной программы позволяет сформировать репрезентативную выборку структурных элементов. При этом под выборкой репрезентации мы понимаем адекватное отражение всех необходимых особенностей генеральной совокупности программных позиций.

Если рассматривать множество вопросов, входящих в образовательную программу по данной учебной дисциплине, то обнаружится, что они обладают различной содержательной значимостью для полноценного усвоения программного материала. Речь идет не о количестве страниц учебника, на которых описывается данный вопрос, и не о времени, отведенном для его изучения. Содержательная значимость или весомость рассматриваемого вопроса определяется с наиболее общих позиций целесообразности использования данного элемента в процессе овладения учебной дисциплиной и продолжения образования в избранной области научного знания. Определить такой показатель достаточно сложно, так как каждый вопрос занимает определенное место в структуре образовательной программы к выполняет в ней сложно подчиненную роль. Поэтому, прежде всего, необходимо разработать бланк экспертизы, основанный на традиционных уровнях структурирования, и оценить комбинированную весомость каждого вопроса образовательной программы.

По результатам экспертизы составляется спецификация дидактического теста. Для этого отбирается такое количество наиболее содержательно значимых вопросов, чтобы сумма их весомостей составляла более 30% от общей содержательной значимости всех вопросов образовательной программы. При этом необходимо учитывать количество логических операций, которые должен совершить испытуемый при выполнении тестовых заданий, и подобрать разумную продолжительность процедуры тестирования.

Процесс изучения любого структурного элемента образовательной программы включает в себя:

1) подготовительный этап, то есть логическое обоснование нового материала с помощью известных понятий и закономерностей;

2) сущностный этап, заключающийся в изложении содержания рассматриваемого вопроса;

3) мотивационную паузу.

Мотивационная пауза - это специфический этап усвоения структурного элемента образовательной программы, раскрывающий целесообразность его изучения.

Если существует несколько альтернативных вариантов развития того или иного процесса, то эффективным окажется тот, который оптимально сочетает все основные факторы влияния. Оптимизация процесса обучения требует учета целого ряда взаимопроникающих факторов, которые должны сочетаться таким образом, чтобы численное значение педагогического действия оказалось минимальным. Поэтому потребовалось провести факторный анализ основных условий эффективной деятельности преподавателя, к которым можно отнести:

1) обоснованную доступность и дифференцированность изложения программного материала;

2) мотивационную состоятельность восприятия структурных элементов образовательной программы учащимися;

3) создание благоприятных психологических условий в квали-метрическом образовательном пространстве.

На основе попарного сопоставления перечисленных условий нами были сформулированы важнейшие аспекты оптимизации процесса обучения:

1-3) высокая психолого-педагогическая подготовка преподавателя;

1-2) заинтересованное отношение всех субъектов квалиметриче-ского образовательного пространства к результатам обучения;

2-3) использование в процессе обучения стандартизованных дидактических тестов.

На первое место выходит содержательно обоснованное изложение образовательной программы с предельно допустимой скоростью на каждом этапе изучения ее структурных элементов. Применяемые педагогические технологии должны содержать мотивационные паузы, позволяющие обосновать практическую значимость изучаемого материала. Наконец, необходимо использовать в процессе обучения педагогические измерители.

Дальнейшее исследование условий эффективной деятельности преподавателя позволило создать квалиметрическую модель процесса обучения, из которой следует, что предельно допустимая скорость передачи информации не зависит от конфигурации поля индивидуальной педагогической поддержки. Относительная продолжительность подго-

товительного этапа изучения структурного элемента образовательной программы должна составлять не менее 90% учебного времени и только 3 +4 минуты урока учитель может использовать на изложение нового материала и мотивационную паузу.

Для описания дискретного характера педагогического действия используется волновая функция. При этом длина волны субъекта ква-лиметрического образовательного пространства является количественной характеристикой периодичности изложения или усвоения структурных элементов образовательной программы. Длина волны учащегося зависит от индивидуальной скорости усвоения материала, а длина волны преподавателя — от скорости передачи информации.

Наиболее подготовленные учащиеся усвоят программный материал при условии, что их длина волны близка по своему значению к длине волны преподавателя. Если собственная длина волны учащегося оказывается больше переданного объема информации, то избыток учебного времени может быть потрачен на углубленное усвоение данного структурного элемента или мотивационное осмысление целесообразности получения образования в данном учебном заведении. Если же индивидуальная скорость усвоения программного материала учащимся оказывается меньше скорости передачи информации преподавателем, то за время, отведенное на изучение данного структурного элемента программы, индивид не сможет выйти на соответствующий уровень достижений. Для того чтобы добиться логически обоснованного усвоения материала учащимися с низкими потенциальными возможностями, необходимо воспользоваться полем индивидуальной педагогической поддержки.

Предоставляя учащимся возможность усвоения программного материала на понятийном уровне, необходимо учитывать, что фазы волновой функции соответствующие различным образовательным траекториям будут отличаться только временем, отсчитанным от момента начала обучения, так как исходный и конечный уровни достижений у них совпадают. Чтобы ожидаемый результат тестирования можно было зафиксировать в заданной точке интервальной шкалы уровней достижений с вероятностью близкой к единице, разность фаз волновых функций, соответствующих различным образовательным траекториям, должна составлять целое число периодов гармонической функции. Данное условие регистрации тестового результата фактически утверждает следующее: для ликвидации пробелов в знаниях и умениях не-

обходим интервал времени, в течение которого учащийся способен усвоить пропущенное количество структурных элементов образовательной программы.

Сократить время усвоения необходимой информации без ущерба для понятийной составляющей этого процесса невозможно. Поэтому эффективный образовательный процесс предполагает рациональное использование учебного времени и недопущение отставания отдельных учащихся. Если же это все-таки произошло, необходимы полноценные дополнительные занятия с отстающими учениками. При этом роль мотивационных пауз возрастает, так как от заинтересованности учащихся в овладении изучаемым предметом во многом зависит качество образовательного процесса.

В третьей главе «Система контроля качества образовательного процесса» кратко описываются основные принципы дидактического тестирования, а также рассматривается классическое приближение квалиметрической модели процесса обучения.

В предыдущих главах удалось связать индивидуальные тестовые результаты учащихся с деятельностью преподавателя по передаче определенного объема информации и обеспечению его усвоения с помощью поля индивидуальной педагогической поддержки. Чтобы получить условие регистрации тестового результата на интервальной шкале уровней достижений, потребовалось поставить в соответствие всем мыслимым образовательным траекториям испытуемого волновые функции и учитывать соотношение между их фазами в интересующей нас точке. Переходя к классическому приближению, следует пренебречь дискретными свойствами процесса обучения и получить функцию статистического распределения результатов тестирования вдоль интервальной шкалы уровней достижений.

Первоначально некоторое количество учащихся, обладающих практически одинаковыми потенциальными возможностями, находится на исходном уровне достижений. Сообщая необходимый объем информации, и создавая поле индивидуальной педагогической поддержки, преподаватель стремится переместить учащихся на более высокий уровень достижений. В рамках классического приближения можно рассматривать бесконечно малое изменение уровней достижений и записать соотношение для элементарной работы, совершенной при этом преподавателем.

В силу недостаточной квалификации преподавателя, который не смог правильно подобрать поле индивидуальной педагогической поддержки, а может быть, из-за недостаточных потенциальных возможностей отдельных учащихся, часть из них не сможет удержаться на более высоком уровне достижений. В своей практической деятельности преподавателю приходится преодолевать деструктивные тенденции в образовательном процессе, что позволяет записать соответствующее дифференциальное уравнение, решением которого является экспоненциальная функция распределения тестовых результатов по уровням достижений.

По дисперсии распределения результатов тестирования учащихся можно судить о квалификации преподавателя, так как данная статистическая характеристика является показателем его способности сформировать поле индивидуальной педагогической поддержки, то есть:

1) на основе данных независимого обследования с помощью стандартизованного дидактического теста определить потенциальные возможности учащихся;

2) зная потенциальные возможности, вычислить средневзвешенную величину поля;

3) подобрать необходимые соотношения между продолжительностью различных этапов изучения структурных элементов образовательной программы;

4) поддерживать оптимальную скорость передачи информации, используя в процессе обучения мотивационные задания.

Только при выполнении всех перечисленных условий удается осуществить педагогическую поддержку учащихся с низкими потенциальными возможностями, а учащимся с высокими потенциальными возможностями предоставить необходимую самостоятельность. Как следствие, возрастает концентрация тестовых результатов возле моды статистического распределения, что соответствует уменьшению дисперсии. Если же поле индивидуальной педагогической поддержки ориентировано на наиболее сильных учащихся, распределение результатов тестирования становится плоским, что соответствует увеличению дисперсии.

Используя функцию распределения тестовых результатов по уровням достижений, удалось получить соотношение для квалификационного коэффициента, в котором фигурирует натуральный логарифм отношения числа удовлетворительных и неудовлетворительных оце-

нок, выставленных на основе результатов применения стандартизованного педагогического измерителя. В случае нормального статистического распределения соответствующий показатель равен 0,77. Его можно использовать в качестве нормировочного коэффициента при аттестации учителя на квалификационную категорию.

Практическое применение результатов проведенного исследования во многом зависит от процедуры стандартизации дидактического теста, которая включает в себя:

1) обеспечение содержательной валидности с помощью экспертной оценки комбинированной весомости каждого вопроса образовательной программы;

2) определение надежности по взаимной согласованности тестовых заданий, апробированных на репрезентативной выборке учащихся;

3) оценку конструктной валидности путем сопоставления надежности с соответствующим показателем идеального педагогического измерителя;

4) определение критериальной валидности с помощью коэффициента корреляции тестовых и текущих оценок репрезентативной выборки учащихся.

Четвертая глава «Образовательная квалиметрия в системе повышения квалификации» посвящена использованию квалиметрических методов при анкетировании слушателей курсов повышения квалификации, организации профессиональной переподготовки и аттестации работников образования.

Обеспечить объективность результатов анкетирования можно с помощью метода корреляционных вопросов, заключающегося в том, что в различных частях анкеты выбираются два взаимосвязанных вопроса, ответы на которые должны согласовываться друг с другом. Затем производится статистическая обработка суждений респондентов с целью определения коэффициента корреляции. Если его значение превышает 0,6, то возникает возможность оценить степень достоверности статистически значимого ответа на любой вопрос анкеты с помощью метода доверительного интервала.

Наиболее сложным в математическом плане, но и наиболее эффективным является метод процентной разности. Респондентам предлагаются вопросы об одном и том же объекте, содержащие позитивные

или негативные суждения. Процентная разность ответов на вопросы с противоположными суждениями является наиболее объективным показателем истинного состояния дел. В сочетании с корреляционной надежностью результатов анкетирования и определением доверительного интервала для каждого вопроса анкеты предлагаемый метод позволяет создать высококачественные измерительные материалы, которые находят широкое применение в системе повышения квалификации и переподготовки работников образования.

В процессе аттестации работников образования, а также образовательных учреждений ставится задача определения степени эффективности процесса обучения. Для этой цели предлагается использовать метод расхождения медиан, сущность которого заключается в сравнении положения наиболее распространенных результатов текущей аттестации и данных независимого тестирования одного и того же контингента учащихся. Образовательный процесс можно считать достаточно эффективным, если доверительная вероятность не превышает 5%. Только в этом случае имеет смысл вычислять нормированный квалификационный коэффициент аттестуемого учителя.

Широкое применение методов образовательной квалиметрии в системе повышения квалификации работников образования позволяет существенно снизить психологическое напряжение при проведении массовых обследований уровня освоения общеобразовательных программ, так как учителя приобретают искушенность в процедуре дидактического тестирования. В диссертацию включены учебные модули по курсу «Образовательная квалиметрия», который преподается в Ростовском областном ИПК и ПРО, а также используется в дистанционном повышении квалификации. Модули оснащены апробированными критериальными тестами текущего контроля.

В заключении диссертации представлены основные результаты и выводы исследования, а также определены перспективные направления дальнейших изысканий в области образовательной квалиметрии.

Анализ образовательного процесса, проведенный на основе методологии современной натуральной философии, принципиально отличает теорию образовательной квалиметрии от существующих теорий качества образования. Раскрывая взаимосвязи между основными характеристиками образовательного процесса и современными квали-метрическими методиками, удалось определить способы повышения эффективности контроля качества процесса обучения. На основе прин-

ципа инвариантности установлено ограничение средней скорости передачи информации между субъектами квалиметрического образовательного пространства в условиях эффективного процесса обучения. На основе принципа дискретности найдено оптимальное соотношение между продолжительностью различных этапов усвоения структурного элемента образовательной программы Классическое приближение квалиметрической модели процесса обучения позволило получить функцию распределения тестовых результатов вдоль шкалы уровней достижений, необходимую для введения нормированного квалификационного коэффициента, характеризующего профессионально-педагогическую подготовку преподавателя.

В рамках теории образовательной квалиметрии стандартизация дидактического теста рассматривается не только как процедура сравнения результатов тестирования с нормальным статистическим распределением, но и как квалиметрически обоснованное сопоставление уровней достижений учащихся с требованиями государственного образовательного стандарта. Разработаны количественные методы обеспечения необходимой содержательной и конструктной валидности дидактических тестов. При этом использовался классический способ обработки результатов тестирования, предполагающий процедуру репрезентации измерителя и отличающийся большей точностью по сравнению с теорией моделирования и параметризации педагогических тестов.

К перспективным направлениям исследований в области образовательной квалиметрии следует отнести:

1) разработку конкретных моделей повышения эффективности контроля качества процесса обучения;

2) дальнейшее формирование банков педагогических измерителей для различных образовательных программ;

3) детальное исследование конструктных свойств педагогических измерителей, позволяющих повысить точность определения уровней достижений учащихся;

4) совершенствование дистанционного обучения работников образования в области педагогической диагностики и образовательной квалиметрии;

5) совершенствование технологии оценивания результатов освоения образовательных программ, позволяющей с высокой точностью определять квалификационную категорию преподавателя.

В приложениях приводятся тесты достижений, содержащие бланки экспертизы образовательных программ, спецификации и данные апробации на репрезентативных выборках учащихся общеобразовательных учреждений Ростовской области.

Основные положения диссертации отражены в следующих публикациях автора:

Монографии:

1. Сафонцев С.А. Система контроля качества образовательного процесса. Ростов н/Д., 2002. 4,5 п.л.

2. Сафонцев С.А. Инвариантность образовательного процесса. Ростов н/Д., 2002. 5,5 п.л.

3. Сафонцев С.А. Дискретность образовательного процесса. Ростов н/Д., 2003. 6,7 п.л.

4. Сафонцев С.А Образовательная квалиметрия в системе повышения квалификации. Ростов н/Д., 2003. 9,3 п.л.

Статьи, опубликованные в журналах, согласно списку ВАК:

5. Михайлычев Е.А., Сафонцев С.А. К методологии дидактического тестирования // Гуманитарные и социально-экономические науки. 2001.№2. 0,2 п.л. (личный вклад-0,1 п.л.)

6. Сафонцев С.А. Контроль качества образовательного процесса на основе тестовой диагностики // Школьные технологии. 2002. №5. 1,5 п.л.

7. Сафонцев С.А. Критериально ориентированное тестирование // Школьные технологии: Педагогическая диагностика. 2002. №1. 0,3 п.л.

8. Сафонцев С.А. Конструктная валидность теста потенциальных возможностей школьников // Школьные технологии: Педагогическая диагностика. 2002. №2. 0,3 п.л.

9. Сафонцев С.А. Обеспечение объективности результатов педагогического анкетирования // Школьные технологии: Педагогическая диагностика. 2003. №1. 0,5 п.л.

10. Сафонцев С.А. Опыт применения технологии создания дидактического теста // Школьные технологии: Педагогическая диагностика. 2003. №2. 1,4 п.л.

11. Сафонцев С.А. Дистанционное образование по программе «Образовательная квалиметрия» // Школьные технологии: Педагогическая диагностика. 2003. №2. 0,3 п.л.

12. Сафонцев С.А. Методология образовательной квалиметрии // Школьные технологии: Педагогическая диагностика. 2003. №3. 1,0 п.л.

13. Сафонцев С.А. Образовательная квалиметрия // Школьные технологии: Педагогическая диагностика. 2003. №4. 1,2 п.л.

14. Сафонцев С.А. Процедура стандартизации дидактического теста // Школьные технологии: Педагогическая диагностика. 2004. №1.1,0 п.л.

15. Сафонцев С.А., Раскина Е.А., Попов С.В. Спецификация дидактического теста в системе повышения квалификации // Школьные технологии: Педагогическая диагностика. 2004. №2. 1,1 п.л. (личный вклад -0,6 п.л.)

Статьи:

16. Сафонцев С.А. Мотивация процесса обучения в специализированных физических классах / Творческие достижения - учебному процессу. Вып. I. Ростов н/Д., 1989. 0,2 п.л.

17. Сафонцев С.А. Специфика обучения старшеклассников в специализированных физико-математических классах / Воспитание интеллектуальной творческой личности с высоким уровнем нравственной и правовой культуры. Ростов н/Д., 1991. 0,2 п.л.

18. Кравченко В.Ф., Сафонцев С.А. Решение задач по теме «Электродинамика» методом физического моделирования // Практические советы учителю. 2001. №1. 0,2 п.л. (личный вклад-0,1 п.л.)

19. Кравченко В.Ф., Сафонцев С.А. Оценка погрешностей измерений в школьном физическом эксперименте // Практические советы учителю. 2001. №5. 0,2 п.л. (личный вклад-0,1 п.л.)

20. Михайлычев Е.А., Кравченко В.Ф., Сафонцев С.А. Анализ процесса обучения в условиях оптимальной педагогической среды // Школа. 2001. №2. 0,4 п.л. (личный вклад - 0,3 п.л.)

21. Михайлычев Е.А., Кравченко В Ф., Сафонцев С.А. Интервальная шкала оценок потенциальных возможностей учащихся // Стандарты и мониторинг в образовании. 2001. №3. 0,5 п.л. (личный вклад- 0,4 п.л.)

22. Сафонцев С.А. Как составить тесты итогового контроля по физике // Практические советы учителю. 2001. №7. 0,6 п.л.

23. Сафонцев С.А. Дидактические тесты по физике и астрономии // Практические советы учителю. 2001. №7. 1,5 п.л.

24. Сафонцев С.А., Кравченко В.Ф. Оцените свою квалификацию // Практические советы учителю. 2001. №11. 1,0 п.л. (личный вклад - 0,9 п.л.)

25. Михайлычев Е.А., Сафонцев С.А. Технология конструирования предметного теста итогового контроля // Школа. 2001. №6. 0,6 п.л. (личный вклад - 0,4 п.л.)

26. Сафонцев С.А. Целеполагание как основной элемент образовательных технологий // Практические советы учителю. 2002. №1. 0,5 п.л.

27. Сафонцев С.А , Раскина Е.А., Попов С.В. Критериальное тестирование в системе повышения квалификации / Модернизация образования. Вып. I. Ростов н/Д., 2003. 1,0 п.л. (личный вклад -0,5 п.л.)

28. Сафонцев С.А., Раскина Е.А., Попов С.В К вопросу стандартизации критериально ориентированного теста // Стандарты и мониторинг в образовании. 2003. №3. 1,4 п.л. (личный вклад - 0,8 п.л.)

29. Сафонцев С.А. Актуализация образовательной квалиметрии в современной системе повышения квалификации / Модернизация образования. Вып. И. Ростов н/Д., 2003. 0,4 п.л.

30. Сафонцев С.А. Статистическая обработка результатов измерений / Сборник предпрофильных и электирных курсов для профильного обучения. Ч.1. Ростов н/Д., 2004. 0,3 п.л.

31. Сафонцев С.А. Подготовка учителя профильной школы // Практические советы учителю 2004. №3. 0,3 п.л.

32. Сафонцев С.А. Областные гранты развития образования // Практические советы учителю 2004. №5. 0,4 п.л.

Тезисы:

33. Сафонцев С.А. Профориентационные возможности курса физики в старших классах средней школы / Проблемы обновления содержания общего образования. Вып. II. Ч.2. Ростов н/Д., 1992. 0,1 п.л.

34. Сафонцев С.А. Методология разработки критериально ориентированных тестов / Управление качеством образования в высшей школе и стратегия подготовки нового поколения российского бизнеса. Ростов н/Д., 2001. 0,3 п.л.

35. Сафонцев С.А. Алгоритм создания системы контроля качества образовательного процесса / Управление качеством образования в высшей школе и стратегия подготовки нового поколения российского бизнеса. Ростов н/Д., 2002. 0,4 п.л.

36. Павлюц A.M., Сафонцев С.А., Шварцман М.М. Компьютерные технологии в мониторинге образования / Математика. Образование. Эко-

логия. Тендерные проблемы. T.1. M., 2003. 0,2 п.л. (личный вклад - 0,1 п.л.)

37. Сафонцев С.А. Теоретические основы образовательной квалимет-рии / Актуальные проблемы педагогической диагностики и мониторинга российской системы образования. Таганрог. 2003. 0,1 п.л.

38. Павлюц A.M., Сафонцев С.А., Шварцман М.М. Компьютеризация образовательного мониторинга / Актуальные проблемы педагогической диагностики и мониторинга российской системы образования. Таганрог. 2003. 0,2 п.л. (личный вклад-0,1 п.л.)

39. Сафонцев С.А. Максимальная скорость передачи информации в процессе обучения / Оценка эффективности образовательных инноваций и технологий. Славянск-на-Кубани, 2003. 0,2 п.л.

40. Павлюц A.M., Сафонцев С.А., Шварцман М.М. Мониторинг на базе компьютерных технологий в образовательном пространстве / Оценка эффективности образовательных инноваций и технологий. Славянск-на-Кубани, 2003. 0.2 п.л. (личный вклад-0,1 п.л.)

41. Сафонцев С.А. Образовательная квалиметрия в системе повышения квалификации / Психолого-педагогические проблемы развития современного образования. Брянск, 2003. 0,2 п.л.

42. Сафонцев С.А. Квалиметрическое основы дидактического тестирования / Единый государственный экзамен в региональной системе управления качеством образования. Ростов н/Д., 2003. 0,1 п.л.

43. Сафонцев С.А. Образовательная квалиметрия как средство оптимизации процесса обучения / Диагностика уровня достижений студентов в современной высшей школе. Ростов н/Д., 2004. 0,1 п.л.

44. Сафонцев С.А. Практика массовых обследований уровня обучен-ности учащихся общеобразовательных учреждений Ростовской области / Актуальные проблемы педагогической диагностики и мониторинга российской системы образования. Таганрог. 2004. 0,1 п.л.

Методические издания:

45. Сафонцев С.А., Шнейдер Э.Я. Методические указания по курсу физики для специализированных физических классов. Ростов н/Д., 1989. 1,9 п.л. (личный вклад- 1,8 п.л.)

46. Сафонцев С.А., Шнейдер Э.Я. Методические указания по курсу физики для специализированных физических классов (часть 2). Ростов н/Д., 1989.1,6 п.л. (личный вклад- 1,5 п.л.)

47. Сафонцев С.А. Методические указания по курсу физики для физико-математических классов (часть 1). Ростов н/Д., 1990.2,1 п.л.

48. Сафонцев С.А. Методические указания по курсу физики (часть 2). Ростов н/Д., 1990. 1,4 п.л.

49. Сафонцева Н.Ю., Сафонцев С.А. Основы современной натуральной философии. Ростов н/Д., 2001. 1,7 п.л. (личный вклад- 1,6 п.л.)

50. Сафонцева Н.Ю., Сафонцев С.А. Разработка дидактических тестов. Ростов н/Д., 2001.2,4 п.л. (личный вклад-2,2 п.л.)

51. Сафонцев С.А. Методические указания по образовательной квали-метрии. Ростов н/Д., 2003. 3,0 п.л.

52. Сафонцев С.А. Основы образовательной квалиметрии. Ростов н/Д., 2003.1,3 п.л.

53. Сафонцев С.А., Инъков М.Е., Попов А.П. Педагогический анализ содержания и результатов ЕГЭ 2003 г. Физика. Ростов н/Д., 2003. 6,3 п.л. (личный вклад - 4,4 п.л.)

54. Сафонцев С.А. Проблемы современной педагогики. Ростов н/Д., 2004. 1,5 п.л.

УОП РО ИПК и ПРО.

Усл. печ. л. 2,5. Тираж 150 экз. Заказ № 72.

344011, Ростов-на-Дону, пер.Гвардейский, 2/51 пер Доломановский.

<" Г Г A fî О " J? ^ U

Содержание диссертации автор научной статьи: доктора педагогических наук, Сафонцев, Сергей Александрович, 2004 год

Введение

Глава 1. Инвариантность образовательного процесса

1.1 Методология образовательной квалиметрии

1.2 Принцип инвариантности

1.2 Квалиметрическое образовательное пространство

1.3 Интервальная шкала уровней достижений учащихся

1.4 Потенциальные возможности учащегося

1.5 Педагогическое действие

1.6 Поле индивидуально педагогической поддержки 88 Краткие итоги первой главы

Глава 2. Дискретность образовательного процесса

2.1 Принцип дискретности

2.2 Структурный элемент образовательной программы

2.3 Формирование мотивационных пауз

2.4 Скорость передачи информации

2.5 Волновая функция учащегося

2.6 Квалиметрическая оптимизация процесса обучения 160 Краткие итоги второй главы

Глава 3. Система контроля качества образовательного процесса

3.1 Дидактическое тестирование

3.2 Квалиметрическая модель процесса обучения

3.3 Содержательная валидность дидактического теста

3.4 Надежность дидактического теста

3.5 Конструктная валидность дидактического теста 230 (fl 3.6 Критериальная валидность дидактического теста

3.7 Процедура дидактического тестирования 240 Краткие итоги третьей главы

Глава 4. Образовательная квалиметрия в системе повышения квалификации

4.1 Методы обработки результатов анкетирования

4.2 Метод расхождения медиан

4.3 Метод оценки качества образовательного процесса

4.4 Содержание курса образовательной квалиметрии для системы повышения квалификации

Краткие итоги четвертой главы

Введение диссертации по педагогике, на тему "Образовательная квалиметрия как фактор повышения эффективности контроля качества процесса обучения"

Модернизация отечественного образования невозможна без эффективной системы управления качеством. Ярким подтверждением этого факта является введение соответствующих понятий в нормативные документы, а также организация в учебных заведениях специализированных структур, основной функцией которых является осуществление контроля эффективности процесса обучения.

В последнее десятилетие в нашей стране проблема качества образования активно рассматривается с квалиметрических позиций, то есть посредством сопоставления учебных достижений обучающихся с требованиями государственных образовательных стандартов [28, 45, 173, 181, 184]. Анализируя методологический подход к количественным способам исследования образовательного процесса, следует признать наиболее перспективным аспектом управления качеством современные модели стандартов и мониторинга [21, 74, 191, 192].

Решение квалиметрических задач в образовании сопряжено с большими трудностями, обусловленными отсутствием фундаментальных работ в соответствующей области педагогического знания, а также существующими противоречиями между сторонниками внедрения математических методов в педагогике и парадигмой личностно-ориентированного обучения. Однако еще в конце 90-х годов двадцатого века появились первые попытки использования результатов контроля для развивающего личностно-ориентированного обучения [29, 30, 75, 172, 174]. Большое количество исследований в области управления качеством образования, педагогической диагностики и образовательной квалиметрии выполнены на основе идей гуманизации и гуманитаризации образования [24, 53, 67, 193].

Качественный образовательный процесс предполагает применение стандартизованных дидактических тестов, которые в последнее время особенно активно разрабатываются в нашей стране. Действенным средством ^ педагогической диагностики являются нормативно-критериальные тесты достижений, а также критериально ориентированные тесты текущего контроля знаний и умений учащихся. Сформулирована современная парадигма тестирования, на основе которой внедряется единый государственный экзамен [191]. Разрабатываемые Центром тестирования при Министерстве образования Российской Федерации контрольные измерительные материалы во многом соответствуют международным требованиям. Совмещение школьных выпускных экзаменов и вступительных экзаменов в вуз позво-£ ляет обеспечить равные возможностей для всех членов общества при получении образования, строго дифференцируя абитуриентов в соответствии с их потенциальными возможностями. Неотъемлемая социальная функция процедуры тестирования выводит отечественное образование на качественно новый уровень, обеспечивающий интеллектуальное развитие общества [68].

В связи с активным внедрением новых средств педагогической диаг-• ностики перед всеми учебными заведениями страны ставится задача обеспечения соответствия знаний и умений, приобретенных учащимися в процессе обучения, государственному стандарту общего образования. Оценка качества образовательного продукта является чисто квалиметрической задачей. Ее невозможно решить, оценивая только знаниевый компонент процесса обучения, так как важнейшим показателем эффективности образования является способность индивида продолжать обучение в избранной области знаний или смежных с нею областях. Поэтому в процессе проведе-(# ния педагогической диагностики необходимо опосредовано оценивать потенциальные возможности учащихся, используя нормативно-критериальные тесты достижений. Именно это гарантирует выпускнику среднего общеобразовательного учебного заведения, поступившему в вуз, возможность продолжать образование.

Применение тестовой диагностики на всех этапах процесса обучения сопряжено с большими трудностями, связанными с неискушенностью большинства членов общества в вопросах квалиметрии в целом и образовательной квалиметрии в частности. У многих преподавателей сохраняется устойчивая неприязнь к тестированию. Она вызвана низким качеством многих предлагаемых ранее контрольно-измерительных материалов, которые совершенно необоснованно называли тестами. Попытки неквалифицированных специалистов создать всевозможные измерители только усиливают негативное отношение педагогической общественности к процедуре ущ тестирования. Кроме того, остро стоит проблема повышения диагностической культуры, которая сводится к овладению учителем элементарными познаниями в области разработки и апробации тестовых материалов, а также простейшими методами статистической обработки результатов тестирования. Если преподаватели педагогических вузов и системы повышения квалификации возьмут на вооружение новейшие технологии педагогической диагностики и передадут их своим подопечным, то постепенно отношение к процедуре тестирования станет более позитивным [201].

В современных условиях многие учителя применяют в своей практической деятельности критериальные тесты текущего контроля, позволяющие выявить уровень обученное™. Но только педагогические измерители, обладающие нормативными свойствами, способны установить уровни достижений учащихся на соответствующей интервальной шкале и сделать вывод об их потенциальных возможностях. Однако, использование в образовательном процессе простейших диагностических средств, безусловно, по-(ф вышает его качественные показатели.

Невозможно получить объективные квалиметрические данные и сделать на их основе правильные выводы, если участники тестирования не понимают цель исследования и даже настроены враждебно к этой диагностической процедуре. Поэтому, прежде всего, необходимо провести глубокий анализ психолого-педагогических факторов, влияющих на организацию и проведение тестирования, а также выявить роль квалиметрических знаний, как элемента общепедагогического образования. Понимание неизбежности внедрения квалиметрических методов в процесс обучения и их высокой эффективности в деле повышения качества образования способствует росту диагностической культуры учителей и учащихся [105].

Понимая актуальность дальнейшей разработки квалиметрических методов в педагогике, автором проведено данное диссертационное исследование, в основу которого положены классические работы по психологи-4 ческому тестированию Ф. Гальтона [209], К. Пирсона [213], Г.Ф. Кьюдера,

М.В. Ричардсон [212] и А. Анастази [9], а также основоположника критериально ориентированного тестирования Р. Гласера [210]. Методологической основой теоретической образовательной квалиметрии являются труды виднейших натурфилософов А. Пуанкаре [134], М. Борна [31], Р. Фейнмана-[189], а также родоначальника моделирования в педагогической науке И.Ф. Гербарта [37]. ^ В качестве отправной точки квалиметрической модели оптимизации образовательного процесса использовалась работа Л.Б. Ительсона, которая анализирует возможность использования математических методов в педагогике [60]. В основу процедуры стандартизации дидактического теста положены работы С.В. Черепанова по экспертному методу [195], Е.А. Ми-хайлычева по дидактической тестологии [105] и B.C. Аванесова по композиции тестовых заданий [1], а также широко известная книга А.Н. Майорова [90].

Несмотря на то, что педагогическая диагностика и образовательная квалиметрия являются тесно связанными между собой практическими областями исследований в рамках педагогической науки, у каждой из них есть ряд существенных особенностей. Диагностика позволяет осуществить качественную или количественную оценку определенных характеристик объекта и истолковать ее в терминах данной научной дисциплины. Напри-^ мер, с помощью методов медицинской диагностики английский биолог

Френсис Гальтон в 1884 году предпринял попытку определить интеллект испытуемых, а в начале двадцатого века французский психолог Альфред Бине попытался решить эту задачу методами психодиагностики.

Педагогическая диагностика обычно проводится по проблематике обучения и воспитания с целью выработки необходимых коррекционных мер [107]. Способы диагностирования могут быть самыми разнообразными, начиная со сравнительной оценки по чисто внешним признакам и за-V) канчивая количественной оценкой объекта исследования с помощью педагогических измерителей. Однако все процедуры педагогической диагностики ориентированы на получение качественных выводов о состоянии образовательного процесса.

В отличие от педагогической диагностики образовательная квали-метрия предполагает сравнение результатов тестирования с существующими стандартами, например, государственным стандартом общего обра-& зования. Квалиметрические методы изначально нашли применение в производственной сфере, где эффективность работы любого предприятия определяется качеством производимой продукции. Рентабельность производства, прежде всего, зависит от объемов сбыта, так как товар низкого качества никогда не будет востребован большинством потребителей. Только в условиях рыночной экономики квалиметрические методы стали активно внедряться в сферу общественного потребления. Прежде всего, необходимо установить эталон данного изделия, предполагающий его соответствие всем требованиям госстандарта и потребительского рынка. Затем произведенная продукция выборочно сравнивается с эталонным изделием с целью определения соответствия по целому ряду критериев. При этом недостаточно добиться общей работоспособности устройства или применимости изделия для той или иной цели. Необходимо убедиться в стандартных показателях, как состава изделия, так и его параметров на каждом этапе выполняемых действий. Усредненные показатели нормативов установленных госстандартом также не принимаются во внимание. Только соответствие требованиям стандарта на всех этапах и контрольных точках работы тестируемого изделия может убедить метрологов в его качественных показателях. Результат измерений признается квалиметрически значимым при выполнении сравнительных операций по всем позициям, указанным в стандарте. Например, качество изготовления сложной детали, являющейся элементом высокотехнологичного устройства, тестируется по различным позициям в разнообразных режимах работы с целью выявления некондиционных параметров. Если хотя бы один показатель не вписывается в установленный стандарт, то деталь нельзя использовать в практической деятельности. При этом выбраковывается вся партия тестируемых изделий, так как сам процесс их изготовления на данном этапе работы предприятия признается некондиционным. Таким образом, квалиметрия отдельных изделий выступает показателем эффективности работы всего предприятия.

Образовательная квалиметрия призвана осуществить стандартизацию уровней достижений учащихся в конце определенного этапа обучения. Ситуация чем-то напоминает производственную сферу деятельности, так как она предполагает сравнение результатов обучения с существующими стандартами, к которым можно отнести обязательный минимум содержания образования, а также требования к знаниям и умениям учащихся. Поскольку процедура стандартизации предполагает сопоставление результатов тестирования с эталонными нормами, необходимо в процессе обследования уровня обученности проявлять необходимую требовательность, сохраняя при этом объективность. Оптимальным условием проведения любой квалиметрической процедуры является привлечение независимого диагноста, выступающего в роли метролога. Однако, аналогично ква-лиметрическим операциям, производимым при компоновке сложного технического устройства, в процессе обучения предполагается текущий контроль уровня обученности учащихся, который осуществляется преподавателем после изучения очередного вопроса или темы образовательной программы и гарантирует надежное усвоение изучаемого материала на каждом этапе обучения. Зная о предстоящем независимом обследовании уровней достижений учащихся, преподаватель должен ориентироваться на безусловное выполнение обязательного минимума содержания образования, а также стремиться к максимальной объективности выставляемых им оценок.

Создание общегосударственной системы контроля качества образования, включающей в себя централизованное тестирование и единый государственный экзамен, позволяет установить четкие и доступные для понимания каждого учащегося принципы оценки результатов обучения. Система управления качеством в каждом учебном заведении не должна сводиться только к реализации существующей нормативно-правовой базы образования, а непосредственно отслеживать позитивные и негативные тенденции деятельности отдельных преподавателей и факторы, влияющие на эффективность процесса обучения в целом. Многие образовательные учреждения успешно развивают квалиметрические методы, но им приходится продвигаться на ощупь в силу недостаточного развития теоретической базы образовательной квалиметрии.

Квалиметрически оснащенный образовательный процесс, предполагающий систематическое применение стандартизованных дидактических тестов, позволяет установить соответствие между данными мониторинга, осуществляемого сотрудниками образовательного учреждения, и результатами независимого обследования. Подобную задачу должна решать активно создаваемая в нашей стране система менеджмента качества образования, важнейшим элементом которой является квалиметрический мониторинг, отслеживающий на каждом этапе обучения степень соответствия результатов тестирования образовательным стандартам [19].

Учитывая существующие проблемы распространения современных методов образовательной квалиметрии, данное исследование представляется весьма актуальным. С его помощью любой преподаватель сможет оценить эффективность собственной педагогической деятельности, а руководитель учебного заведения - качество образовательного процесса в целом. Сложность заключается в том, что данная область исследований находится на стыке гуманитарного и естественнонаучного образования, а, следовательно, должна сочетать в себе общефилософский подход и математическую интерпретацию рассматриваемых процессов. Настороженное отношение к работам, содержащим не только вербальную составляющую, но и эле*менты математического моделирования, объясняется некоторой искусственностью привнесения в педагогику формальных математических методов. Но если эти методы являются содержательно обоснованными, а каждое формализуемое понятие и соотношение подвергаются вербальному анализу, то наиболее существенные закономерности образовательного процесса могут быть представлены в лаконичной форме с помощью математических символов. В дальнейшем это облегчает применение статистических методов в эмпирической составляющей педагогического исследования.

Решить проблему создания теоретических основ образовательной квалиметрии можно только на методологической основе современной натуральной философии, как наиболее развитой логически-обоснованной и математически формализованной сфере научного знания. Корректно используя методологические приемы, которые разрабатывались в течение двадцатого века виднейшими натурфилософами, можно быть уверенным в общенаучной значимости полученных выводов и возможности их применения в педагогической практике. Дополнительным основанием для использования методологии современной натуральной философии в образовательной квалиметрии является широкое использование статистических методов. Глубина анализа закономерностей систем, состоящих из огромного количества элементов, в естественных науках достигает очень высокого уровня. Поэтому возникает уверенность в возможности столь же глубокого анализа квал и метрических процессов в образовании, связанных с взаимодействием множества субъектов.

Поскольку квалиметрия - область научного знания, изучающая методологию и проблематику разработки комплексных, а в некоторых случаях и системных количественных оценок качества любых объектов, необходимо четко представлять себе соотношение между качественным и количественным описанием образовательного процесса [6]. Количество и качество выступают как нечто раздельное лишь в абстракции, реально они существуют в нерасторжимом единстве, в пределах которого данное качество модифицируется, варьируется в силу изменения количества и отдельных несущественных свойств, сохраняя при этом свои существенные характеристики [177]. Например, в натуральной философии широко используется трансформация вербального описания рассматриваемого процесса в математическую модель. При этом качественные показатели исследуемого процесса, сохраняя собственную содержательную значимость, получают более строгое выражение в количественных соотношениях. Подобная трансформация представляет собой сложную интеллектуальную процедуру, требующую не только логического мышления и владение методами формализации, но и подключения творческой составляющей абстрактного мышления.

Необходимость перевода качественного описания в количественное приводит к изменению методологии научного исследования, особенно, если данная дисциплина обладает непосредственным выходом на эмпирические показатели. Квалиметрический аспект педагогической науки представляет собой именно такую эмпирически обоснованную область исследования, которая может служить критерием справедливости выводов всех прочих ее отраслей. Количественные показатели, обладая статистической значимостью, позволяют провести сколь угодно глубокую интерпретацию результатов исследований в вербальном выражении.

Сочетание качественных и количественных методов исследования характерно для естественнонаучных дисциплин, но поскольку образовательная квалиметрия предполагает не только статистическую обработку результатов диагностики, необходим аналогичный подход к исследованию психолого-педагогических аспектов процесса обучения. Если педагогическая диагностика, как правило, выступает в роли вспомогательного элемента педагогических исследований, максимально проявляющегося при проведении мониторинга процесса обучения, то образовательная квалиметрия, которая также должна быть неотъемлемым элементом всякого мониторинга, способна проводить самостоятельный анализ исследуемых закономерностей на основе математического моделирования.

Главной задачей специалиста в области образовательной квалимет-рии является соблюдение чувства меры при использовании формальных методов исследования. Поскольку психолого-педагогические аспекты деятельности учебных заведений не носят строго причинно-следственного характера и могут быть подвергнуты статистическому анализу, при их описании нельзя использовать глубокую формализацию, при которой легко потерять нить логически обоснованных рассуждений. Данная ситуация напоминает исследование микропроцессов с позиций современной натуральной философии, когда невозможно приблизиться к объективной реальности и детерминировано описать существующие причинно-следственные связи. Ученые пытаются ограничиться формализацией абстрактных понятий, за которыми скрывается статистическое описание рассматриваемых явлений, приписывая им самостоятельный физический смысл, что приводит к невозможности вербальной интерпретации ряда существенных моментов тех закономерностей, которые протекают в микромире. Подобный методологический подход совершенно неприемлем в педагогике, поэтому следует очень осмотрительно обращаться со статическими величинами и математическим моделированием в целом.

Рассматривая возможности формализации педагогических знаний с помощью математического моделирования, следует учитывать два основных направления:

1) построение модели эмпирического объекта путем выделения его свойств и описание их с учетом психических процессов и свойств личности;

2) разработка методов, средств и процедур измерений свойств эмпирического объекта и приложений их в практике решения различных педагогических задач обучения [112].

Оба этих направления непосредственно связаны с экспериментом и полностью соответствуют общенаучной методологии. Но поскольку мы ставим перед собой задачу построения теоретической образовательной квалиметрии, второе направление математического моделирования представляется более предпочтительным. Понимая существующие проблемы управления качеством образования, необходимо разработать диагностические материалы, позволяющие осуществить полноценный квалиметрический контроль процесса обучения. Лучше всего подойти к решению этой задачи с наиболее общих позиций, создавая модель квалиметрической оптимизации процесса обучения с помощью содержательных методов, заимствованных из современной натуральной философии. При этом, безусловно, будет использоваться математический аппарат, но только в том объеме, который отвечает требованиям лаконичного изложения понятийно-логических взаимосвязей между строго определенными величинами, характеризую t щими как свойства отдельной личности, так и образовательного процесса в целом. Следующий этап исследований реализуется с помощью классической методики нормативного тестирования, а также авторской технологии расчета конструктной валидности теста достижений, и сводится к определению потенциальных возможностей учащихся.

Любое использование модельных представлений приводит к насилию над рассматриваемым объектом, но создание добротной теории позволяет выйти на новый уровень обобщений и обнаружить ранее неизвестные особенности исследуемого процесса, что полностью компенсирует издержки, возникающие при ее разработке. Несмотря на то, что невозможно создать модель во всех деталях отражающую исследуемый процесс, его теоретическое описание является единственным способом анализа ключевых закономерностей развития, а также причин, приводящих к тем или иным последствиям. Если же ограничиться рассмотрением эмпирических данных, то невозможно сформулировать сколько-нибудь значимую гипотезу, позволяющую вскрыть истоки исследуемого процесса. Даже когда ученый не обладает достаточным количеством экспериментальных данных и не способен произвести необходимых обобщений, он автоматически пытается найти аналогии и представить себе возможный механизм происходящего явления. Тем более, если накоплен богатый экспериментальный материал, позволяющий выдвинуть целый ряд гипотез, необходимо перейти на более высокий уровень обобщений, который выражается в модели рассматриваемого процесса.

Существующий опыт применения методов моделирования в педагогических исследованиях позволяет:

1) более четко сформулировать проблему, пренебрегая факторами не существенными при описании данного конкретного объекта;

2) установить связь данной проблемы с другими, имеющими сходное внутреннее строение;

3) проверить гипотезы исследования, так как это усиливает доказательность рассуждений [112]. Считается; что верная теория должна отличаться простотой или хотя бы красотой логических построений. Именно это позволяет установить связь создаваемой теории с аналогичными явлениями или процессами из другой научной области, отличающимися подобными закономерностями. Попытка создания теоретических основ образовательной квалиметрии на базе натурфилософских принципов инвариантности и дискретности представляется методологически обоснованной и позволяет проанализировать процесс обучения с наиболее общих позиций.

Одной из важнейших проблем, которую предстоит решить в рамках теоретической образовательной квалиметрии - это проблема латентных переменных. В отличие от производственной квалиметрии, где устанавливается степень соответствия продукта эталонному образцу только по непосредственно измеряемым параметрам, в образовательной квалиметрии приходится выявлять скрытые личностные характеристики. К таким показателям, прежде всего, относятся потенциальные возможности учащихся. Мало того, что они зависят от интегральной характеристики умственного развития индивида - интеллекта, на способность учащегося к продолжению образования существенно влияют внешние мотивационные факторы.

Только на основе инвариантного подхода к описанию образовательного процесса представляется возможным установить связь между измеряемыми в процессе тестирования величинами и скрытыми характеристиками индивида. В последнее время становится актуальным описание реальных педагогических процессов безотносительно к используемым контрольно-измерительным материалам. Например, применяемая для оценивания результатов единого государственного экзамена теория моделирования и параметризации педагогических тестов Г. Раша (IRT) [12, 118, 214] является выражением стремления исследователей получить инвариантные показатели потенциальных возможностей относительно диагностических материалов и контингента испытуемых. Совершенствование методов адаптивного тестирования также направлено на максимально возможное приближение диагностики к реальному состоянию индивида.

Настоящее диссертационное исследование ставит своей целью создание теоретических основ образовательной квалиметрии на базе методологии современной натуральной философии, а также дальнейшую разработку ключевых классических методик дидактического тестирования. Для реализации поставленной цели, прежде всего, необходимо всесторонне проанализировать инвариантность образовательного процесса, заключающуюся в том, что процесс обучения не зависит от точки зрения диагноста. Средством осуществления подобного анализа являет целый ряд важнейших понятий образовательной квалиметрии, большинство которых сформулировано автором:

1) квалиметрическое образовательное пространство — структурированная система субъектов, испытывающая корректирующее влияние извне;

2) интервальная шкала уровней достижений, основанная на данных нормативного тестирования и позволяющая производить любые математические операции с баллами, которые набирают учащиеся в результате применения педагогических измерителей;

3) потенциальные возможности учащегося, определяющие скорость изменения его умственного возраста;

4) педагогическое действие, характеризующее образовательный процесс как с точки зрения его развития в квалиметрическом образовательном пространстве, так и с точки зрения потенциальных возможностей учащихся;

5) поле индивидуальной педагогической поддержки, как способ задания в каждой точке квалиметрического образовательного пространства некоторой величины, характеризующей конструктивное влияние преподавателя на учащегося в соответствии с его потенциальными возможностями.

В основу инвариантного описания процесса обучения положены принципы относительности и эквивалентности современной натуральной философии, так как кроме релятивистского толкования процедуры педагогического измерения подчеркивается особая роль независимого диагноста. Следствием принципа инвариантности образовательной квалиметрии является возможность передачи информации между субъектами квалиметри-ческого образовательного пространства с предельно допустимой скоростью, величина которой не зависит от выбора системы отсчета. При повторении ранее пройденного материала и в процессе восприятия новой для l^i учащихся информации данная скорость принимает различные значения, которые обладают инвариантными свойствами и позволяют установить среднюю скорость передачи информации в эффективном образовательном процессе. Таким образом, на основе принципа инвариантности образовательной квалиметрии удается сформулировать первое условие оптимизации процесса обучения: передача информации между субъектами квали-метрического образовательного пространства должна осуществляться с предельно допустимой скоростью.

Чтобы количественно описать процесс передачи информации, а также выявить конкретные способы оптимизации индивидуальных образовательных траекторий учащихся, был сформулирован принцип дискретности, заключающийся в том, что педагогическое действие содержит целое число структурных элементов образовательной программы. При этом потребовалось определить новые ключевые понятия образовательной квалиметрии:

1) структурный элемент образовательной программы обладающий общепризнанной содержательной значимостью, на основе которого составляется тестовое задание для педагогического измерителя;

2) мотивационная пауза, как; специфический этап усвоения структурного элемента образовательной программы, раскрывающий целесообразность его изучения;

3) длина волны субъекта квалиметрического образовательного простран-. ства, являющаяся количественной характеристикой периодичности изложения или усвоения структурных эле*\1ентов образовательной программы.

В основу дискретного описания процесса обучения положены принципы неопределенности и наименьшего действия современной натуральной философии, так как структурирование универсального инварианта позволяет формировать оптимальные образовательные траектории учащихся, соответствующие минимально возможному значению педагогического действия. Следствием принципа дискретности образовательной квалимет-рии является необходимость создания мотивационных пауз посредством использования специальных заданий, содержание которых значимо для адаптации учащегося в социуме. Таким образом, на основе принципа дискретности образовательной квалиметрии можно сформулировать второе условие оптимизации процесса обучения: изучение каждого структурного элемента образовательной программы необходимо завершать мотивацион-ной паузой.

В результате перехода к классическому приближению квалиметри-ческой модели процесса обучения появляется возможность всесторонне проанализировать систему контроля качества образовательного процесса, которая, кроме измерения уровней достижений учащихся и возможности их сопоставления с требованиями образовательных стандартов, предполагает определение потенциальных возможностей учащихся, а также нормированного квалификационного коэффициента преподавателя. Все это позволяет оценить эффективность образовательного процесса в целом. Обязательным условием реализации системы контроля качества является применение в процессе обучения стандартизованных дидактических тестов. Таким образом, классическое приближение квалиметрической модели процесса обучения приводит к третьему условию оптимизации: для контроля учебных достижений необходимо использовать стандартизованные дидактические тесты.

Заключительным этапом диссертационного исследования является разработка процедуры стандартизации дидактического теста и методического обеспечения курса образовательной квалиметрии в системе повышения квалификации. Основными этапами создания педагогического измерителя можно признать:

1) обеспечение содержательной валидности с помощью экспертной оценки комбинированной весомости каждого вопроса образовательной программы;

2) определение надежности по взаимной согласованности тестовых заданий, апробированных на репрезентативной выборке учащихся;

3) оценку конструктной валидности путем сопоставления надежности с соответствующим показателем идеального педагогического измерителя;

4) определение критериальной валидности с помощью коэффициента корреляции тестовых и текущих оценок репрезентативной выборки учащихся.

Следует особо подчеркнуть, что теоретические основы образовательной квалиметрии позволяют ввести количественные нормы практически на все основные характеристики процесса обучения, которые были исследованы в настоящей работе:

1) средняя скорость передачи информации между субъектами квалимет-рического образовательного пространства в условиях эффективного процесса обучения равна 14 бит в секунду;

2) продолжительность сущностно-мотивационного этапа изучения структурного элемента образовательной программы при средневзвешенной величине поля индивидуальной педагогической поддержки равной 0,74 составляет около 8% учебного времени;

3) содержательная валидность дидактического теста, вычисленная на основе комбинированной весомости отдельных вопросов образовательной программы, превышает 0,30;

4) конструктная валидность теста достижений, непосредственно связанная с количеством тестовых заданий, превышает величину надежности внутренней согласованности педагогического измерителя;

5) нормированный квалификационный коэффициент, характеризующий эффективный процесс обучения, превышает единичное значение.

Актуальность исследования непосредственно связана с необходимостью фундаментального обоснования активно внедряемой федеральной системы тестирования. Реально назрела необходимость создания теоретических основ образовательной квалиметрии, позволяющих упорядочить понятийный аппарат, разработать эффективные математические модели процесса обучения и сформулировать условия его оптимизации, а также получить соответствующие количественные нормы. Важнейшим элементом системы контроля качества образовательного процесса является педагогический измеритель, поэтому особое внимание в диссертации уделено стандартизации дидактических тестов. В результате появляется возможность сравнить данные измерения уровней достижений учащихся с требованиями государственного стандарта общего образования и решить, таким образом, основную задачу образовательной квалиметрии.

Объект исследования - система контроля качества образовательного учреждения, включающая в себя оценку профессионально-педагогической квалификации преподавателя.

Предмет исследования — теоретические основы образовательной квалиметрии и процедура стандартизации дидактических тестов, позволяющих сопоставить результаты тестирования уровней достижений учащихся с требованиями государственного образовательного стандарта.

Целью исследования является теоретическое обоснование квалимет-рических методов повышения эффективности контроля качества процесса обучения, использующих методологию современной натуральной философии и позволяющих разработать педагогические измерители по различным учебным дисциплинам.

С учетом объекта, предмета и цели исследования выдвигается гипотеза о том, что образовательная квалиметрия является фактором повышения эффективности контроля качества процесса обучения при условии, что:

- инвариантное описание образовательного процесса, включающее в себя квалиметрическое образовательное пространство, интервальную шкалу уровней достижений, потенциальные возможности учащихся, педагогическое действие, а также поле индивидуальной педагогической поддержки, позволяет выявить роль независимого диагноста при проведении мониторинга образовательного процесса;

- описание дискретных свойств процесса обучения, включающее в себя структурные элементы образовательной программы, мотивационные паузы и длины волн субъектов квалиметрического образовательного пространства, позволяет оптимизировать индивидуальные образовательные траектории учащихся;

- классическое приближение квалиметрической модели процесса обучения дает возможность сформулировать основные признаки системы контроля качества образовательного процесса;

- обеспечивая содержательную валидность дидактического теста с помощью экспертного метода, его надежность посредством апробации на репрезентативной выборке, конструктную валидность путем сравнения надежности внутренней согласованности измерителя с идеальным нормативным тестом, а критериальную валидность сопоставлением результатов независимого тестирования с данными текущей аттестации, можно осуществить процедуру стандартизации педагогического измерителя;

- стандартизованный дидактический тест позволяет оценить профессионально-педагогическую квалификацию преподавателя.

Для реализации цели и проверки гипотезы были поставлены следующие задачи исследования:

- сформулировать или уточнить систему ключевых понятий образовательной квалиметрии: «квалиметрическое образовательное пространство», «интервальная шкала уровней достижений», «потенциальные возможности», «педагогическое действие», «поле индивидуальной педагогической поддержки», «структурный элемент образовательной программы», «моти-вационная пауза» и «длина волны субъекта квалиметрического образовательного пространства»;

- создать квалиметрическую модель процесса обучения, а также ее классическое приближение, с целью выявление статистических показателей эффективности образовательного процесса;

- разработать методику создания поля индивидуальной педагогической поддержки, соответствующего потенциальным возможностям учащихся, посредством установления длительности различных этапов усвоения структурных элементов образовательной программы и использования мотивационных пауз для обследования целесообразности изучения программного материала;

- разработать и апробировать процедуру стандартизации дидактических тестов, включающую в себя обеспечение содержательной, конструкт-ной, критериальной валидности и надежности педагогического измерителя;

- разработать технологию оценивания эффективности процесса обучения и профессионально-педагогической квалификации преподавателя.

Концептуальной и методологической основой исследования являются теории и идеи:

- современной натуральной философии (М. Борн [31], А. Пуанкаре [134], Р. Фейнман [189] и др.);

- структуры и качества образования (А.А. Аветисов [3], С.И. Архангельский [17], Ю.К. Бабанский [20], В.И. Байденко [21], B.C. Леднев [81], Н.А. Селезнева [173], А.И. Субетго [181], Н.Ф. Талызина [183], Ю.Г. Татур [184] и др.);

- личностно-ориентированного и развивающего образования (Е.В. Бондаревская [29], С.В. Кульневич [75], В.В. Сериков [174], В.Т. Фоменко [190] и др.);

- современных образовательных технологий (В.П. Беспалько [25], Г.К. Селевко [172] и др.);

- психологического тестирования (А. Анастази [9], П.Я. Гальперин [35], Ю.З. Гильбух [43], П. Клайн [66] и др.);

- педагогической диагностики (B.C. Аванесов [2], В.П. Бинитас [26], К. Ингенкамп [59], Е.А. Михайлычев [105], В.И. Михеев [112], Дж. Равен [138], B.C. Черепанов [194] Д.Б. Эльконин [199] и др.);

- квалиметрического мониторинга (Н.В. Акинфиева [6], Т.С. Аниси-мова [12], Н.В. Гороховатская [45], В.Е. Каплан [64], Н.А. Кулемин [74], А.Н. Майоров [89], В.И. Нардюжев [116], Ю.М. Нейман [117], В.А. Хлебников [191], Е.В. Яковлев [200] и др.);

- технологии тестового контроля (B.C. Аванесов [2], Г.С. Ковалева [67], А.Н. Майоров [88], В.И. Нардюжев [116], Ю.М. Нейман [117], В.А. Хлебников [191], М.Б. Челышкова [192] и др.);

- статистической обработки информации и математического моделирования (Л.Б. Ительсон [60], Г.Ф. Кьюдер и М.В. Ричердсон [212], К. Пирсон [213], Г. Раш [214] и др.).

В реализации поставленной цели и решении задач использовались общенаучные и специальные методы теоретического и эмпирического исследования:

- анализ и синтез основных принципов современной натуральной философии;

- теоретическое моделирование квалиметрически значимых закономерностей образовательного процесса;

- факторный анализ условий оптимизации процесса обучения;

- анализ соотношений квалиметрической модели процесса обучения на экстремум;

- стратификация генеральной совокупности учащихся общеобразовательных учреждений области и создание репрезентативной выборки;

- статистическая обработка результатов апробации дидактических тестов с целью его стандартизации;

- выявление количественных показателей эффективности процесса обучения на основе анализа статистических закономерностей распределения результатов тестирования учащихся.

Исследование проводилось в четыре этапа.

1. Изучение методов педагогической диагностики и образовательной квалиметрии параллельно с преподаванием в специализированных физико-математических классах при Ростовском государственном университете. (1989-1993 гг.)

2. Проблемно ориентированный анализ первоисточников и подготовка квалиметрической модели процесса обучения. Изучение статистических методов обработки информации. (1994-1999 гг.)

3. Проведение многофакторного педагогического анализа результатов дидактического тестирования. Разработка и апробация нормативно-критериального теста итогового контроля. Защита кандидатской диссертации по теме: «Технология критериально ориентированного тестирования потенциальных возможностей учащихся». (2000-2002 гг.) 4. Создание теоретических основ образовательной квалиметрии и их экспериментальная проверка в процессе руководства Центром педагогических измерений на базе Ростовского областного института повышениия квалификации и переподготовки работников образования. Обсуждение результатов исследования на страницах специализированного журнала «Педагогическая диагностика». Завершение редактирования основного текста диссертации. (2003-2004 гг.)

Базой исследования являются следующие учреждения и организации: Центр модернизации общего образования при Министерстве общего и профессионального Ростовской области, Ростовский областной институт повышения квалификации и переподготовки работников образования (РО ИПК и ПРО) с филиалами в городах Шахты, Каменск-Шахтинский и Волгодонск, Новороссийская государственная морская академия (Ростовский филиал) с сетью лицейских классов, районные и городские отделы народного образования, а также общеобразовательные школы Ростовской области.

Основными результатами исследования являются: создание теоретических основ образовательной квалиметрии на базе методологии современной натуральной философии; формулировка принципа инвариантности и доказательство существования предельно допустимой скорости передачи информации между преподавателем и учащимися, а также особой роли независимого диагноста в процедуре тестирования; соотношения для уровней достижений учащихся в начале и в конце данного этапа обучения, а также формула релятивистского коэффициента, позволяющая сопоставить изменения уровней достижений учащихся в различных системах отсчета; связь между потенциальными возможностями и уровнями достижений учащихся; понятие педагогического действия как универсальной инвариантной величины, характеризующей образовательный процесс в различных системах отсчета; понятие поля индивидуальной педагогической поддержки и соотношение для его средневзвешенной величины; формулировка принципа дискретности и обоснование роли мотивацион-ных пауз, являющихся специфическим этапом усвоения структурного элемента образовательной программы; понятие структурного элемента образовательной программы и формула для вычисления комбинированной весомости отдельных вопросов; вывод формулы средней скорости передачи информации между субъектами квалиметрического образовательного пространства; понятие длины волны субъекта квалиметрического образовательного пространства, позволяющее оптимизировать индивидуальную образовательную траекторию учащегося; создание квалиметрической модели процесса обучения, классическое приближение которой позволяет получить функцию распределения тестовых результатов по уровням достижений; способ оценивания профессиональной квалификации преподавателя по дисперсии статистического распределения результатов независимого тестирования его учеников; способ оценивания величины содержательной валидности дидактического теста, основанный на экспертной оценке образовательной программы; способ определения конструктной валидности теста, основанный на сравнении надежности внутренней согласованности педагогического измерителя с идеальным нормативным тестом; методы корреляционных вопросов, доверительного интервала и процентной разности ответов респондентов на позитивные и негативные вопросы, касающиеся одного и того же объекта исследования, позволяющие обеспечить объективность результатов анкетирования; метод расхождения медиан статистических распределений результатов текущей аттестации и независимого обследования с помощью стандартизованного дидактического теста, позволяющего оценить эффективность процесса обучения.

Научная новизна и теоретическая значимость исследования состоят в следующем:

- на методологической основе современной натуральной философии сформулированы принципы образовательной квалиметрии: 1) принцип инвариантности, утверждающий, что образовательный процесс не зависит от точки зрения диагноста; 2) принцип дискретности, утверждающий, что педагогическое действие содержит целое число структурных элементов образовательной программы;

- введены и теоретически обоснованы основные понятия образовательной квалиметрии: «квалиметрическое образовательной пространство», «интервальная шкала уровней достижений», «потенциальные возможности», «педагогическое действие», «поле индивидуальной педагогической поддержки», «структурный элемент образовательной программы», «моти-вационная пауза» и «длина волны субъекта квапиметрического образовательного пространства»;

- создана квалиметрическая модель процесса обучения, классическое приближение которой позволяет получить распределение тестовых результатов по уровням достижений учащихся;

- произведена нормировка квалификационного коэффициента, характеризующего профессионально-педагогическую подготовку преподавателя;

- разработана процедура обеспечения содержательной валидности дидактического теста и ее количественной оценки, в основе которой лежит экспертиза образовательной программы с целью определения комбинированной весомости отдельных вопросов;

- разработан способ количественной оценки конструктной валидности теста, основанный на сравнении надежности внутренней согласованности педагогического измерителя с идеальным нормативным тестом;

- разработаны методы корреляционных вопросов, доверительного интервала и процентной разности ответов респондентов на позитивные и негативные вопросы, касающегося одного и того же объекта исследования, дозволяющие обеспечить объективность результатов педагогического анкетирования;

- разработан метод расхождения медиан статистических распределений результатов текущей аттестации и независимого обследования с помощью стандартизованного дидактического теста, позволяющий оценить эффективность процесса обучения.

Практическая значимость исследования заключается в возможности применения теоретических выводов образовательной квалиметрии для повышения эффективности контроля качества процесса обучения. Каждый преподаватель может с помощью стандартизованного дидактического теста осуществить входной контроль потенциальных возможностей учащихся, вычислить средневзвешенное значение поля индивидуальной педагогической поддержки и правильно распределить время занятия между подготовительным и сущностно-мотивационным этапом изучения структурного элемента образовательной программы. Придерживаясь предельно допустимой скорости повторения ранее пройденного материала и изложения новой для учащихся информации, преподаватель сможет поддерживать среднюю скорость передачи информации 14 бит в секунду. Это гарантирует усвоение большинством учащихся программного материал на понятийном уровне при условии, что в конце изучения каждого структурного элемента им будет предложено мотивационное задание, которое обладает практической направленностью и позволяет обосновать целесообразность усвоения программного материала. Окончательные результаты обучения фиксируются с помощью дидактических тестов рубежного или итогового контроля, который прошел процедуру апробации. Если обеспечена необходимая надежность, а также содержательная, конструктная и критериальная валидность педагогического измерителя, то с его помощью можно не только определить потенциальные возможности учащихся, но и нормированный квалификационный коэффициент преподавателя.

На защиту выносятся следующие положения:

1. Образовательный процесс не зависит от точки зрения диагноста. На основе анализа структуры и функций квалиметрического образовательного пространства, процедуры шкалирования уровней достижений учащихся и способов определения их потенциальных возможностей вводится понятие «педагогической действие», которое характеризует образовательный процесс как с точки зрения его развития в квалиметрическом образовательном' пространстве, так и с точки зрения потенциальных возможностей учащихся. Численное значение и форма записи индивидуального педагогического действия не зависит от точки зрения диагноста, несмотря на то, что в разных системах отсчета могут быть зарегистрированы различные изменения уровней достижений учащегося.

2. Поле индивидуальной педагогической поддержки ориентируется на учащихся с низкими потенциальными возможностями. Величина поля должна совпадать с потенциальными возможностями слабых учащихся, а по отношению к сильным учащимся квалиметрическое образовательное пространство должно оставаться однородным. Такая конфигурация поля индивидуальной педагогической поддержки гарантирует стандартное перемещение большинства учащихся вдоль шкалы уровней достижений и уменьшение дисперсии статистического распределения результатов тестирования.

3. Педагогическое действие содержит целое число структурных элементов образовательной программы. Процесс усвоения структурного элемента включает в себя подготовительный этап, заключающийся в повторении ранее изученного материала, и сущностный этап, в течение которого преподаватель излагает новую для учащихся информацию. В конце изучения каждого структурного элемента образовательной программы преподаватель должен сформировать мотивационную паузу, позволяющую обосновать целесообразность усвоения переданной информации. При этом учащимся предлагаются специальные мотивационные задания, которые обладают определенной значимостью для адаптации индивида в социуме.

4. На каждом этапе изучения структурного элемента образовательной программы информация должна передавать с предельно допустимой скоростью. На подготовительном этапе скорость передачи информации между субъектами квалиметрического образовательного пространства соответствует медленному темпу произнесения слов, а на сущностном и мотивационном этапах скорость передачи информации становится приблизительно в три раза меньше, что требует секундных пауз между произносимыми словами. Определяя длительность различных этапов изучения структурных элементов образовательной программы на основе средневзвешенных потенциальных возможностей контингента учащихся, удалось установить среднюю скорость передачи информации при эффективном процессе обучения.

5. Мониторинг учебных достижений в эффективном образовательном процессе осуществляется с помощью дидактических тестов, прошедших процедуру стандартизации, то есть:

- обеспечение содержательной валидности с помощью экспертной оценки весомости отдельных вопросов образовательной программы;

- определение надежности внутренней согласованности тестовых заданий на основе данных репрезентации;

- выявление конструктных свойств педагогического измерителя путем сравнения его надежности с соответствующим показателем идеального нормативного теста;

- определение критериальной валидности по корреляции тестовых и текущих оценок участников репрезентативной выборки.

6. Процесс обучения можно считать эффективным, если нормированный квалификационный коэффициент превышает единичное значение. Индикаторным показателем эффективности процесса обучения является совпадение медиан статистических распределений данных текущей аттестации и результатов независимого обследования с помощью стандартизованного дидактического теста с доверительной вероятностью не более 5%. Затем необходимо сопоставить дисперсию распределения результатов тестирования учащихся с нормальным статистическим распределением. Полученный таким образом нормированный квалификационный коэффициент должен превышать единичное значение.

Апробация результатов исследования. Основные положения диссертационного исследования отражены в публикациях автора в виде статей в журналах и сборниках, а также в монографических изданиях: «Инвариантность образовательного процесса» (2002), «Дискретность образовательного процесса» (2003), «Система контроля качества образовательного процесса» (2002), «Образовательная квалиметрия в системе повышения квалификации» (2003).

Результаты исследования докладывались на следующих конференциях: «Проблемы обновления содержания общего образования» (Ростов-на-Дону, 1992); «Управление качеством образования в высшей школе и стратегия подготовки нового поколения российского бизнеса» (Ростов-на-Дону, 2001, 2002); «Актуальные проблемы педагогической диагностики и мониторинга системы образования» (Таганрог, 2003); «Математика. Образование. Экология. Тендерные проблемы» (Воронеж, 2003); «Оценка эффективности образовательных инноваций и технологий» (Славянск-на-Кубани, 2003); «Психолого-педагогические проблемы развития современного образования» (Брянск, 2003); «Единый государственный экзамен в региональной системе управления качеством образования» (Ростов-на-Дону, 2003); «Актуальные проблемы педагогической диагностики и мониторинга системы образования (Таганрог, 2003, 2004); «Диагностика торинга системы образования (Таганрог, 2003, 2004); «Диагностика уровня достижений студентов в современной школе (Ростов-на-Дону, 2004).

По теме диссертации опубликованы 54 печатные работы, из них 10 учебно-методических пособий, 44 научные работы, среди которых 4 монографии и 11 статей, опубликованных в журналах согласно списку ВАК.

Внедрение результатов исследований. Автор на протяжении ряда лет (2002-2004 гг.) осуществлял массовые обследования уровня обученно-сти школьников Ростовской области. Квалиметрические методики, разработанные в процессе написания диссертации, нашли свое применение при подготовке диагностических материалов, а затем были апробированы на репрезентативных выборках выпускников общеобразовательной школы. Создан областной банк педагогических измерителей, используемых в эксперименте по совершенствованию структуры и содержания общего образования, а также для проведения аттестационных мероприятий с целью присвоения квалификационной категории учителям Ростовской области. Результаты диссертационного исследования были использованы для создания системы контроля качества в РО ИПК и ПРО, а также в Ростовском филиале Новороссийской государственной морской академии.

В процессе работы над теоретическими основами образовательной квалиметрии автор участвовал в организации специализированного журнала «Педагогическая диагностика», а затем стал заместителем главного редактора. В процессе рецензирования статей для журнала по образовательной квалиметрии достигался эффект обсуждения ключевых идей исследования с ведущими специалистами в этой области педагогического знания. В результате целый ряд материалов автора, опубликованных в журнале «Педагогическая диагностика», стали достоянием широкой научной общественности. Журнал осуществляет дистанционное профессиональное педагогическое обучение учителей основам педагогической диагностики и образовательной квалиметрии в различных регионах Российской Федерации.

1. Инвариантность образовательного процесса

Заключение диссертации научная статья по теме "Общая педагогика, история педагогики и образования"

Эти выводы базируются на солидной теоретической базе основных принципов образовательной квалиметрии.

Всесторонне проанализировав инвариантность образовательного процесса, заключающуюся в том, что процесс обучения не зависит от точки зрения диагноста, удалось определить следующие ключевые понятия: «квалиметрическое образовательное пространство» (структурированная система субъектов, испытывающая корректирующее влияние извне), «интервальная шкала уровней достижений» (основана на данных нормативного тестирования и позволяет производить любые математические операции с тестовыми баллами), «потенциальные возможности» (определяют скорость изменения умственного возраста учащегося), «педагогическое действие» (характеризует образовательный процесс как с точки зрения его развития в квалиметрическом образовательном пространстве, так и с точки зрения потенциальных возможностей учащихся), «поле индивидуальной педагогической поддержки» (способ задания в каждой точке квалиметрического образовательного пространства некоторой величины, характеризующей конструктивное влияние преподавателя на учащегося в соответствии с его потенциальными возможностями). В основу инвариантного описания процесса обучения положены принципы относительности и эквивалентности современной натуральной философии. Следствием принципа инвариантности образовательной квалиметрии является возможность передачи информации между субъектами квалиметрического образовательного пространства с предельно допустимой скоростью, величина которой не зависит от выбора системы отсчета.

Чтобы количественно описать процесс передачи информации, а также с целью выявления конкретных способов оптимизации образовательного процесса был сформулирован принцип дискретности, заключающийся в том, что педагогическое действие содержит целое число структурных элементов образовательной программы. В результате определены новые ключевые понятия: «структурный элемент образовательной программы» (обладает общепризнанной содержательной значимостью, на его основе составляется тестовое задание для педагогического измерителя), «мотиваци-онная пауза» (специфический этап усвоения структурного элемента образовательной программы, раскрывающий целесообразность его изучения), «длина волны» (количественная характеристика периодичности изложения или усвоения структурных элементов образовательной программы). В основу дискретного описания процесса обучения положены принципы неопределенности и наименьшего действия современной натуральной философии. Следствием принципа дискретности образовательной квалиметрии является необходимость формирования мотивационных пауз посредством использования специальных заданий, содержание которых значимо для адаптации учащегося в социуме.

Переходя к классическому приближению квалиметрической модели процесса обучения, удалось сформулировать основные признаки системы контроля качества образовательного процесса. Кроме измерения уровней достижений учащихся и возможности их сопоставления с требованиями образовательных стандартов, она предполагает определение потенциальных возможностей учащихся и нормированного квалификационного коэффициента преподавателя. В результате возникает возможность количественной оценки эффективности образовательного процесса в целом. Обязательным условием реализации системы контроля качества является применение в процессе обучения стандартизованных дидактических тестов.

Рассматривая процедуру стандартизации дидактического теста в совокупности с методическим обеспечением курса образовательной квалиметрии для системы повышения квалификации, использовались следующие этапы создания педагогического измерителя:

1) обеспечение содержательной валидности с помощью экспертной оценки комбинированной весомости каждого вопроса образовательной программы;

2) определение надежности по взаимной согласованности тестовых заданий, апробированных на репрезентативной выборке учащихся;

3) оценка конструктной валидности путем сопоставления надежности с соответствующим показателем идеального нормативно-критериального теста достижений;

4) определение критериальной валидности с помощью коэффициента корреляции тестовых и текущих оценок репрезентативной выборки учащихся.

Теоретические основы образовательной квалиметрии позволяют установить количественные нормы практически на все основные характеристики процесса обучения. Средняя скорость передачи информации между субъектами квалиметрического образовательного пространства в условиях эффективного процесса обучения равна 14 бит в секунду. Продолжительность сущностно-мотивационного этапа изучения структурного элемента образовательной програхммы при средневзвешенной величине поля индивидуальной педагогической поддержки равной 0,74 составляет 8% учебного времени. Содержательная валидность дидактического теста, вычисленная на основе комбинированной весомости отдельных вопросов образовательной программы, превышает 0,30. Конструктная валидность теста достижений, непосредственно связанная с количеством тестовых заданий, превышает величину надежности внутренней согласованности педагогического измерителя. Наконец, нормированный квалификационный коэффициент, характеризующий эффективный процесс обучения, превышает единичное значение.

Любой этап процесса обучения сопряжен с изменениями уровней достижений учащихся. Предполагается, что в результате изучения каждого раздела программы учащийся должен переместиться вдоль шкалы уровней достижений на величину стандарта. Следовательно, между входным и рубежным контролем или двумя рубежными тестированиями нормальное статистическое распределение должно смещаться вдоль интервальной шкалы на стандартную единицу. На одной и той же интервальной шкале уровней достижений учащихся невозможно представить результаты входного и рубежного контроля, поскольку статистическое распределение итогов повторного тестирования должно быть смещено на величину стандарта. Необходимо использовать две различные шкалы, первая из которых связана с положением испытуехмого, у которого тестовый балл отличается в меньшую сторону от среднестатистического значения на величину стандарта, а нулевой уровень второй шкалы смещен относительно первой на величину стандарта в большую сторону. Подобный искусственный метод перемещения исходного уровня достижений вдоль интервальной шкалы в процессе обучения позволяет представить его в динамике, сохраняя при этом нормальный вид статистического распределения результатов тестирования.

Если учащимся удается переместиться на величину стандарта вдоль интервальной шкалы уровней достижений, то его потенциальные возможности находятся на нормальном уровне, и гарантируют сохранение интеллекта испытуемого. Потенциальные возможности характеризуют способность индивида продолжать образование в данной области знаний и определяются быстротой изменения умственного возраста. Единичные потенциальные возможности указывают на то, что изменение умственного возраста учащегося совпадает с изменением его биологического возраста. Поэтому в случае фиксации тестового результата испытуемого в моде статистического распределения можно утверждать, что его потенциальные возможности равны единице. При этом отстающие учащиеся демонстрируют недостаточные потенциальные возможности, а учащиеся, обладающие высокими результатами нормативного тестирования, превышают единичные потенциальные возможности. В отличие от изменения уровней достижений учащегося, зависящего от способа диагностирования и системы отсчета диагноста, потенциальные возможности являются инвариантной величиной и могут быть выявлены с помощью стандартизованного дидактического теста в любой системе отсчета.

Потенциальные возможности учащегося непосредственно связанны с внутренними мотивационными факторами индивида и являются показателем способности поддерживать собственный интеллектуальный уровень. Именно на этом свойстве основана технология определения потенциальных возможностей учащихся. Совмещая начало отсчета интервальных шкал уровней достижений и потенциальных возможностей, удается сопоставить эти величины, используя в качестве единого масштаба стандарт статистического распределения результатов тестирования репрезентативной выборки. Все испытуемые, тестовые результаты которых оказались в диапазоне от нуля до градации интервальной шкалы равной величине стандарта статистического распределения данных репрезентации, отстают в темпах увеличения умственного возраста, но их интеллектуальные коэффициенты могут оказаться самыми разнообразными. Перемещение учащегося в конце данного этапа обучения на уровень достижений равный стандарту является показателем единичных потенциальных возможностей.

Универсальным инвариантом образовательной квалиметрии является педагогическое действие, полученное в результате перемножения изменения уровней достижений учащегося в собственной системе отсчета и его потенциальных возможностей. Эта величина характеризует образовательный процесс как с точки зрения его развития в квалиметрическом образовательном пространстве, так и с точки зрения потенциальных возможностей индивида. Педагогическое действие характеризует количество информации, переданной преподавателем своим подопечным на данном этапе обучения.

В системе независимого диагноста индивидуальное педагогическое действие записывается аналогично, но с учетом релятивистского коэффициента. Если преподаватель стремится к оптимизации образовательного процесса, ему необходимо сориентировать поле индивидуальной педагогической поддержки только на слабых учащихся с низкими потенциальными возможностями, не искажая квалиметрическое образовательное пространство, в котором протекает процесс обучения учащихся с нормальными и превышающими норму потенциальными возможностями. В этом случае дисперсия статистического распределения результатов тестирования уменьшается, что указывает на высокую квалификацию преподавателя.

Грамотное формирование поля индивидуальной педагогической поддержки позволяет оптимизировать индивидуальные образовательные траектории учащихся. Необходимо только раскрыть сущность процедуры создания поля индивидуальной педагогической поддержки.

Добиться оптимизации образовательного процесса удается только при обеспечении обоснованной доступности изложения материала, моти-вационной состоятельности восприятия отдельных структурных элементов образовательной программы учащимися, а также создания благоприятных психологических условий в квалиметрическом образовательном пространстве. С помощью простейшего факторного анализа удалось выявить следующие объединяющие аспекты перечисленных условий:

1) заинтересованное отношение всех субъектов квалиметрического образовательного пространства к результатам обучения;

2) высокая психолого-педагогическая подготовка преподавателя;

3) использование в процессе обучения стандартизованных дидактических тестов.

Анализируя особенности структурирования образовательного процесса и различных квалиметрических процедур, мы пришли к выводу о дискретности процесса обучения. Действительно, любая образовательная программа состоит из отдельных структурных элементов, усвоение каждого из которых приводит к измерению уровней достижений учащегося на один тестовый балл. Следовательно, структурный элемент образовательной программы можно рассматривать в качестве кванта педагогического действия. Принципиально невозможно усвоить структурный элемент программы частично. Если изученный материал воспринят учащимся на понятийном уровне, то следует констатировать совершение одного кванта действия. Если с помощью формального заучивания учащийся запомнил, но не полностью понял данный материал, то педагогическое действие отсутствует. Только логически обоснованный и понятый материал остается в памяти или обобщается на более высоком уровне восприятия. Поэтому дискретный характер образовательного процесса можно считать экспериментально установленным фактом.

Результаты тестирования учащихся фиксируются в строго определенных точках расположенных на интервальной шкале уровней достижений. Чтобы выяснить каким же образом формируется соответствующий тестовый результат, необходимо приписать преподавателю и учащимся волновые функции, характеризующие дискретные свойства процесса обучения. При этом следует учесть, что длина волны активного субъекта квалиметрического образовательного пространства зависит от скорости передачи информации, а длина волны пассивного субъекта — от индивидуальной скорости усвоения материала на понятийном уровне.

Основной количественной характеристикой волновой функции, которая позволяет определить положение тестового результата испытуемого на интервальной шкале уровней достижений, является фаза, то есть отношение педагогического действия к соответствующему кванту. Временная составляющая фазы волновой функции, показывает какая часть длительности усвоения структурного элемента образовательной программы прошла к данному моменту времени. Шкалируемая составляющая фазы волновой функции, показывает какая часть объема информации, переданной активным субъектом квалиметрического пространства, была усвоена пассивным субъектом и привела к определенному уровню его достижений. Поскольку при распространении волны более удаленные от источника точки пространства оказываются вовлеченными в периодический процесс с некоторым опозданием, из временной составляющей фазы волновой функции следует вычитать шкалируемую составляющую.

Путем суперпозиции индивидуальных волновых функций учащегося, соответствующих всевозможным мыслимым образовательным траекториям, удалось получить условие регистрации тестового результата. Вывод, приведенный в рамках квалиметрической модели образовательного процесса, сводится к тому, что разность фаз волновых функций, соответствующих различным индивидуальным образовательным траекториям конкретного учащегося, должна содержать целое число периодов гармонической функции. В переводе на педагогическую терминологию условие регистрации тестового результата указывает на то, что компенсация пробелов в знаниях и умениях учащегося возможна, только если на этот процесс выделяется время равное целому количеству периодов усвоения структурных элементов образовательной программы.

Процесс изучения отдельно взятого структурного элемента можно условно разделить на подготовительный этап, в течение которого производится логическое обоснование нового материала на основе ранее изученных понятий и законов, сущностный этап, позволяющий усвоить необходимую информацию ранее неизвестную учащимся, наконец, мотивацион-ная пауза, которая требует осознания целесообразности изучения данного программного материала. Особую роль в процессе оптимизации индивидуальных образовательных траекторий учащихся играют мотивационные паузы, которые нельзя полноценно сформировать с помощью вторичных мотивационных факторов, связанных с необходимостью выполнения тестов текущего контроля. Неэффективными мотивациями следует признать мировоззренческие обоснования необходимости овладения теми или иными знаниями. Только практические и общежитейские мотивации способны стимулировать учащихся к освоению программного материала и повышению гуманитарной, математической и естественнонаучной грамотности индивида. Даже если практическая направленность учебного процесса создана искусственно, то и в этом случае она играет роль внешнего мотивационного фактора, способствующего повышению потенциальных возможностей учащихся.

Процесс формирования мотивационных пауз, связанный с подготовкой специфических заданий практической ориентации, предполагает существенное изменение методики преподаваемой дисциплины на основе глубокого,анализа ее содержания. Одним из элементов методического осмысления образовательной программы является ее экспертная оценка и подготовка спецификаций критериально ориентированных тестов текущего контроля, а также нормативных тестов входного, рубежного и итогового контроля.

Наличие мотивационных пауз в образовательном процессе является необходимым условием его дискретности. Отсутствие обоснованного восприятия учебной информации приводит к невозможности ее усвоения на понятийном уровне. Чтобы добиться оптимизации индивидуальных образовательных траекторий учащихся и процесса обучения в целом, необходимо правильно подобрать процентные соотношения между длительностью подготовительного и сущностно-мотивационного этапов усвоения структурных элементов образовательной программы. На основе квалимет-рической модели оптимизации процесса обучения было установлено, что при групповой форме обучения невозможно добиться усвоения программного материала теми учащимися, потенциальные возможности которых равны или меньше 0,7, даже если подготовительный этап оказывается гораздо больше сущностно-мотивационного. Поэтому с учащимися со столь низкими потенциальными возможностями необходимо проводить дополнительные занятия, затрачивая большее учебное время.

Эффективный образовательный процесс предполагает создание с помощью мотивационных пауз поля индивидуальной педагогической поддержки, позволяющего оптимизировать процесс обучения и добиться наименьшего возможного педагогического действия. Передавая учащимся информацию со скоростью 14 бит в секунду и акцентируя их внимание на понимании практической ценности изучаемого материала, преподаватель способен добиться максимально возможного результата. Указанная скорость передачи информации полностью соответствует условию возникновения резонанса между волновыми функциями активного и пассивного субъектов квалиметрического образовательного пространства и является ключевыми условием оптимизации индивидуальных образовательных траекторий учащихся. При этом необходимо осуществлять квалиметрический мониторинг процесса обучения с помощью стандартизованных дидактических тестов. Непрерывный контроль образовательного процесса позволяет отслеживать индивидуальные образовательные траектории учащихся, добиваясь их оптимизации. Совокупность перечисленных процедур образует систему контроля качества образовательного процесса.

Практическое применение теоретических основ образовательной квалиметрии предполагает создание систехмы контроля качества процесса обучения, включающей в себя инвариантный подход к описанию педагогического действия в рамках квалиметрического образовательного пространства,' а также дискретный характер процесса передачи инфорхмации между его субъектами. Принципы инвариантности и дискретности позволяют не только формализовать основные квалиметрические процедуры, но и осуществить классическое приближение квалиметрической модели процесса обучения на основе двух постулатов:

1) любой процесс обучения не является односторонним, в не.м равноправно существуют все субъекты квалиметрического образовательного пространства;

2) конструктивная составляющая образовательного процесса, связанная с педагогической поддержкой потенциальных возможностей учащегося, преобладает над деструктивными процессами в квалиметрическохм об-разовательно.м пространстве.

В результате была получена экспоненциальная функция распределения учащихся по уровням достижений совпадающая в пределах ошибки измерений с эмпирическими данными. Используя эту функцию, независимый диагност способен определить уровень квалификации преподавателя безотносительно к особенностям контингента учащихся, с которыми он работает. Квалификационный коэффициент не зависит от положения моды статистического распределения, а его эталонное значение соответствует нормальному статистическому распределению результатов тестирования с единичной дисперсией. Путем сравнения квалификационного коэффициента испытуемого с эталонным значением производится его нормировка.

Чтобы добиться высоких показателей, преподаватель должен овладеть основами образовательной квалиметрии, с помощью которых он сможет на любом этапе обучения установить соответствие между результатами тестирования уровней достижений учащихся и требованиями образовательных стандартов. Решить проблему повышения диагностической культуры и приобретения простейших навыков статистической обработки информации способна система повышения квалификации работников образования. Важнейшей задачей образовательной квалиметрии на данный момент является максимально возможная стандартизация диагностических материалов, как разработанных Центрами тестирования и педагогических измерений, так и составленными работниками образования.

Экспериментальная проверка теоретических основ образовательной квалиметрии проведена на базе Ростовского областного института повышения квалификации и переподготовки работников образования, а также в ряде высших учебных заведений Ростова-на-Дону и Новороссийска. Различные диагностические материалы, созданные в процессе работы над диссертацией, были апробированы на репрезентативной выборке учащихся общеобразовательных учреждений Ростовской области, стратификация которой проводилась с помощью специалистов Министерства общего и профессионального образования. При подготовке тестов текущего, рубежного и итогового контроля для студентов высших учебных заведений в качестве стандарта выступали программы соответствующих дисциплин. В системе повышения квалификации аналогичную роль играли программы дополнительного профессионального образования.

Заключение

В отечественной системе образования остро стоит проблема стандартизации знаний и умений учащихся, то есть приведения их в соответствие с требованиями государственного образовательного стандарта. Решить эту задачу невозможно методами традиционной педагогики, которая часто в недостаточной степени опирается на эмпирические данные. Поэтому столь актуальной становится процедура проведения корректного педагогического эксперимента, позволяющего сделать не только качественные выводы о результатах образовательного процесса, но и количественно оценить основные характеристики процесса обучения.

Использование для этой цели методов педагогической диагностики, выступающей в роли практической области педагогических исследований, не приводит к желаемым результатам. Формальное использование процедуры тестирования и статистических методов обработки информации не позволяет развивать в рамках традиционной педагогической науки математическое моделирование важнейших закономерностей образовательного процесса. Только принципиально новый методологический подход к данной области педагогических исследований способен привести к квалимет-рически значимому результату.

Предпринимая попытку создания теоретических основ образовательной квалиметрии, мы понимали, что это потребует введения новых основополагающих принципов и понятий, а также использование нетрадиционных методологических подходов к исследуемым процессам. Поэтому, прежде всего, необходимо было воспользоваться многовековым опытом научных исследований в различных областях знаний. Требовалось с одной стороны осуществить цепочку операций характерных для любой науки, а с другой стороны, придерживаться гуманитарной формы изложения естественнонаучного содержания. Подобным требованиям удовлетворяет кван-тово-релятивистская методология описания окружающего нас мира, одним из объектов которого является образовательный процесс. Несмотря на заимствование многих логических ходов, которые характерны для современной натуральной философии, в процессе создания теоретических основ образовательной квалиметрии потребовалась разработка фактически новой методологии, отражающей специфические особенности педагогических измерений.

Квалиметрия - это практическая область исследований в рамках одной из научных дисциплин, позволяющая сравнить характеристики изучаемого объекта с эталоном. Конечно, полученные результаты квалиметрической оценки излагаются в терминах данной научной дисциплины, что приводит к схожести квалиметрии с диагностикой. Однако процедура перевода качественных характеристик исследуемого объекта в количественные показатели является отличительной особенностью квалиметрии.

Образовательная квалиметрия - это специальная область практических исследований в рамках педагогической науки, позволяющая сопоставить результаты тестирования уровней достижений учащихся с существующими образовательными стандартами. На основе тестового контроля результатов обучения определенного контингента учащихся появляется возможность определения профессиональной квалификации преподавателя и качества процесса обучения в целом.

Действенным инструментом образовательной квалиметрии являются различные виды тестов: психосемантические, нормативные и критериальные. Осуществляя входную диагностику знаний и умений учащихся, а также их потенциальных возможностей, необходимо воспользоваться нормативным тестом достижений. Дело в том, что такой вид теста обладает необходимыми конструктными свойствами и способен оценить положение индивидуального результата относительно данных апробации на репрезентативной выборке учащихся. В процессе обучения преподаватель должен регулярно осуществлять контроль уровня обученности с помощью критериально ориентированных тестов, которые не обладают конструктными свойствами, но характеризуют освоение учащимися определенных структурных элементов образовательной программы. Распределение заданий критериального теста по уровням трудности заметно отличается от показателей нормативного теста, так как в первом превалируют простые задания, а во втором - задания средней трудности. Заканчивая изучение большой темы или раздела образовательной программы, а также всего курса, необходимо осуществить контроль с помощью нормативно-критериального теста достижений.

Для оптимизации процесса обучения кроме чисто диагностических мероприятий преподавателю для каждого структурного элемента образовательной программы необходимо:

1) подготовить мотивационные задания;

2) определить соотношения между подготовительным и сущностно-мотивационными этапами;

3) осуществлять передачу информации с предельно допустимой скоростью.

Список литературы диссертации автор научной работы: доктора педагогических наук, Сафонцев, Сергей Александрович, Ростов-на-Дону

1. Аванесов B.C. Методологические и теоретические основы тестового педагогического контроля / Автореферат докторской диссертации.1. СПб., 1994.

2. Аванесов B.C. Композиция тестовых заданий. М., 2002. 240 с.

3. Аветисов А.А. О системологическом подходе в теории оценки и управления качеством образования / Квалиметрия человека и образования: методология и практика. М., 1996.

4. Адлер Ю.П. Планирование эксперимента. М., 1978. С. 7.

5. Айзенк Г.Ю. Интеллект: новый взгляд // Вопросы психологии. 1995. № 1.С. 111-131.

6. Акинфиева Н.В. Квалиметрический инструментарий педагогических исследований // Педагогика. 1998. № 4. С. 30-35.

7. Александров Г.Н. Проблемы прогнозирования и планирования дидактических исследований с учетом взаимодействий педагогики с другими науками. М., 1974.

8. Ананьев Б.Г. Психология педагогической оценки / Избранные £ психологические сочинения. В 2 т. М., 1980. 281 с.

9. Анастази А. Психологическое тестирование. В 2 т. М., 1982. 613 с.

10. Андреев В.И. Эвристическое программирование учебно-исследовательской деятельности. М., 1981. 240 с.

11. Андреева Г.М. Современная буржуазная эмпирическая социология. М., 1968.304 с.

12. Анисимова Т.С., Маслак А.А., Осипов С.А., Пушечкин Н.П., Хлебников В.А. Исследование дифференцирующей способности модели Раша на основе имитационного эксперимента // Педагогическая диагностика. 2003. № 1.С. 103-117.

13. Антропов В.А., Масленцева С.Б. Время в педагогике. Свердловск, 1991.42 с.14