Мониторинг качества обученности учащихся в региональной системе общего образования

Чимитова, Елена Гендуновна

Темы диссертаций по педагогике » Общая педагогика, история педагогики и образования

автореферат и диссертация по педагогике 13.00.01 для написания научной статьи или работы на тему: Мониторинг качества обученности учащихся в региональной системе общего образования

Автореферат

Автор научной работы: Чимитова, Елена Гендуновна
Ученая степень: кандидата педагогических наук
Место защиты: Улан-Удэ
Год защиты: 2007
Специальность ВАК РФ: 13.00.01

Диссертация

Автореферат диссертации по теме "Мониторинг качества обученности учащихся в региональной системе общего образования"

На правах рукописи

003056375

Чимитова Елена Гендуновна *"

МОНИТОРИНГ КАЧЕСТВА ОБУЧЕННОСТИ УЧАЩИХСЯ В РЕГИОНАЛЬНОЙ СИСТЕМЕ ОБЩЕГО ОБРАЗОВАНИЯ

Специальность 13.00.01 - общая педагогика, история педагогики и образования

АВТОРЕФЕРАТ диссертации на соискание ученой степени кандидата педагогических наук

Улан-Удэ -2007

003056375

Работа выполнена в Восточно-Сибирском государственном технологическом университете.

Научный руководитель: кандидат технических наук, доцент

Бильгаева Надежда Цанжиевна

Официальные оппоненты: доктор педагогических наук, профессор

Переломова Наталья Анатольевна

кандидат физико-математических наук, доцент Халтанова Валентина Михайловна

Ведущая организация: ГОУ ВПО «Иркутский государственный педагогический университет»

Защита диссертации состоится 19 апреля 2007 года в 14.00 на заседании диссертационного совета Д 212.022.02 по защите диссертаций на соискание ученой степени доктора педагогических наук при Государственном образовательном учреждении высшего профессионального образования «Бурятский государственный университет» по адресу: 670000, г.Улан-Удэ, ул. Смолина, 24а.

С диссертацией можно ознакомиться в библиотеке ГОУ ВПО «Бурятский государственный университет».

Автореферат разослан 19 марта 2007 г.

Ученый секретарь диссертационного совета канд. пед. наук

Моргунова И.Г.

ОБЩАЯ ХАРАКТЕРИСТИКА РАБОТЫ

В девяностые годы прошлого века в российской общеобразовательной системе происходили сложные процессы обновления, связанные с созданием различных видов и типов образовательных учреждений, образование по содержанию стало вариативным и разноуровневым, в программы были введены новые учебные предметы в соответствии с изменившимися социально-экономическими условиями. Одним из преимуществ такого разнообразия стала возможность получения учащимися образования в соответствии со своими наклонностями и способностями. Другой позитивной тенденцией было то, что для объективной и независимой оценки знаний учащихся в российском образовании стали использовать стандартизированные педагогические измерители. Технология оценивания знаний учащихся была разработана Центром тестирования выпускников общеобразовательных учреждений. С созданием этого центра произошли существенные сдвиги в теории педагогического тестирования. Федеральным центром тестирования разработаны, 'апробированы и используются тесты различного целевого назначения. Естественно, что результаты тестирования можно использовать для принятия обоснованных управленческих решений органами управления образованием после их обработки и анализа.

Все эти процессы поставили перед современной школой и органами управления образованием задачу повышения качества образования. Решение этой задачи многоплановое, предусматривает повышение профессиональных компетенций работников образования и создание современной системы статистики и мониторинга качества образования, который дает возможность сопоставлять результаты образовательной деятельности на различных уровнях: общероссийском, региональном, муниципальном. На региональном уровне органы управления образованием могут анализировать состояние каждого конкретного общеобразовательного учреждения, сравнивать результаты деятельности различных типов таких учреждений, муниципальных систем образования.

Исследования в области управления качеством образования и образовательного мониторинга появились в отечественной педагогике в работах

В.П.Беспалько, А.Н.Майорова, В.А.Кальней, С.Е.Шишова, Д.Ш.Матрос, Д.М.Полева и др. Они базируются на анализе содержания, принципов и функций деятельности, которые представляют собой теоретическую базу управления образованием. Различные аспекты этой проблемы были рассмотрены В.П.Симоновым, Т.И.Шамовой, П.И.Третьяковым, A.M. Моисеевым и др. В их трудах рассматриваются принципы и функции управления, содержание управленческой деятельности.

В последние десять лет в исследованиях по проблемам управления качеством образования стали использовать новые информационные технологии и образовательный мониторинг (В.П.Панасюк, М.М.Поташник, Е.АЛмбург, Д.Ш.Матрос и др.). Эти вопросы наиболее полно рассмотрены в монографии «Управление качеством образования», изданной в 2000 г. под редакцией М.М.Поташника. В.П.Панасюк предложил методику проведения самообследования качества образования, обеспечиваемого школой, и рассматривал ее как многокомпонентную категорию, которая зависит от качества основных видов деятельности школы, ресурсов и результатов обучения. При этом его методические рекомендации в основном касаются содержания и структуры аналитического отчета о деятельности общеобразовательного учреждения. Следует также отметить, что в последние годы появляется все больше рекомендаций о необходимости применения мате-матико-статистических методов в исследованиях по проблемам педагогики (А.Я.Найн и другие).

Анализ научной литературы показывает, что уровень образования оценивается преимущественно по результату обучения, который является показателем деятельности общеобразовательного учреждения. При оценке деятельности в основном используются количественные показатели, характерные для отчетного периода и не отражающие динамики процессов. Поэтому имеющаяся информация не обладает прогностической силой, на ее основе сложно выполнить системный анализ деятельности общеобразовательного учреждения. Кроме того, в педагогической практике недостаточно широко используется региональный мониторинг с единой информационной базой контингента учащихся. Элементы такой системы имеются в рамках технологий массового тестирования учащихся: централизованное тестирование позволяет осуществлять итоговую аттестацию выпускников различных ступеней образовательной вертикали (начальной, основной и полной средней), единый государственный экзамен охватывает выпускников полной средней школы.

Использование статистических методов обработки результатов тестирования и их педагогическая интерпретация позволят органам управления образованием осуществлять сравнительный анализ результатов деятельности региональной системы общего образования для эффективного управления ею.

В процессе проводимых исследований были выявлены следующие противоречия, характерные для системы общего образования:

- необходимость непрерывного отслеживания качества обученности и недостаточная разработанность методов и средств оценки результатов;

- сложность объекта исследования и недостаточный уровень владения исследователями в области педагогики и психологии современными математическими и статистическими методами анализа эксперимента;

- потребность эффективного управления качеством обученности и ограниченный спрос на результаты системы оценки учебных достижений учащихся со стороны органов управления образованием в региональной системе общего образования;

- необходимость адекватного анализа качества обученности и низкий уровень применения математико-статистических методов при анализе результатов тестирования.

Приведенные противоречия выявляют проблему теоретического обоснования мониторинга в сфере образования, разработки средств и методов проведения. Подходы к решению этой проблемы исследованы в диссертационной работе «Мониторинг качества обученности учащихся в региональной системе общего образования».

Цель исследования: разработать технологию проведения мониторинга качества обученности учащихся общеобразовательных учреждений, обосновать и апробировать их на экспериментальных данных, полученных в ходе централизованного тестирования.

Объект исследования: мониторинг качества обученности учащихся.

Предмет исследования: модели, технологии и средства проведения мониторинга качества обученности учащихся.

Гипотеза: мониторинг учебных достижений учащихся предоставит органам управления образованием объективную информацию о состоянии учебной деятельности общеобразовательного учреждения, если:

1) обеспечить систематическое отслеживание качества обученности учащихся с использованием тестов, отвечающих требованиям образовательных стандартов;

2) разработать технологию педагогической интерпретации результатов мониторинга качества обученности с применением математико-статистических методов;

3) представить результаты мониторинговых исследований для принятия управленческих решений.'

В соответствии с целью и гипотезой были сформулированы следующие задачи:

- изучить и определить теоретические основы проведения мониторинговых исследований;

- сформировать показатели для мониторинга качества обученности учащихся общеобразовательных учреждений;

- обосновать использование педагогических тестов для оценки учебных достижений учащихся как одного из основных средств проведения мониторинга качества обученности;

- изучить методы получения выборочной совокупности;

- разработать и апробировать технологию педагогической интерпретации результатов мониторинговых исследований качества обученности учащихся в общеобразовательных учреждениях региона, обеспечивающую возможность формирования практических рекомендаций мониторинговой службы для органов управления образованием.

Теоретико-методологической основой исследования являются концепция управления качеством образования, программные и нормативно-правовые документы системы образования, методология структурного анализа и проектирования систем; методология и методы педагогического исследования и педагогической квалиметрии (И.Я.Лернер, М.Н.Скаткин, ВЛ.Беспалько, Н.А.Селезнева, А.И.Субетто, В.П.Симонов); теория системно-структурного анализа и проектирования систем управления качеством образования (М.МПоташник, В.П.Панасюк, А.О.Татур); организация и осуществление педагогического мониторинга (С.Е.Шишов, В.А.Кальней, А.Н.Майоров, Д.Ш.Матрос).

Методы исследования. Для решения поставленных задач использованы следующие методы: теоретические (анализ понятийно-терминологического аппарата); общенаучные (анализ и синтез, абстрагирование и конкретизация, классификация); эмпирические (тестирование, анкетирование, экспертные оценки); методы математической и статистической обработки экспериментальных данных.

Основные этапы исследования

На первом этапе (2000 г.) происходило теоретическое осмысление проблемы и темы исследования, изучались опыт централизованного тестирования и возможности его использования в региональной системе мониторинга качества образования.

На втором этапе (2001-2003 гг.) были уточнены цели исследования, сформулированы гипотеза и задачи исследования, изучена система показателей деятельности общеобразовательных учреждений региона, выбраны математические методы исследования.

На третьем этапе (2003-2004 гг.) обобщались результаты исследования качества обученности выпускников общеобразовательных учреждений

Республики Бурятия, были выбраны методы педагогической интерпретации результатов исследования.

На четвертом этапе (2005-2006 гг.) сделаны завершающий анализ и обобщение данных, полученных в ходе исследования, разработаны рекомендации для органов управления образованием и методических объединений учителей-предметников общеобразовательных учреждений региона.

Опытно-экспериментальной базой исследования стали общеобразовательные учреждения Республики Бурятия, выпускники которых'принимали участие в итоговой аттестации в рамках государственного централизованного тестирования в период с 1998 по 2006 год. Эти общеобразовательные учреждения различаются по типу, контингенту учащихся, месту расположения, технологиям обучения и другим показателям. Количество выпускников, охваченных централизованным тестированием в этот период, составило свыше 30000 человек. Они приняли участие в различных видах испытаний: в компьютерном абитуриентском тестировании, абитуриентском тестировании на бланках, итоговой аттестации выпускников младшей школы, 9 и 11 классов. Количество выпускников 9 и 11 классов, принявших участие в итоговой аттестации за этот же период, составило около 10000 человек.

Научная новизна исследования

1. Применен кластерный анализ для классификации исследуемой совокупности, который обеспечивает выделение однородных групп для оценки качества обученности учащихся. Это позволит органам управления образованием применять единые управляющие воздействия для выделенных кластеров.

2. Сформирована система показателей для мониторинга качества обученное™ и исследовано влияние показателей на результаты образовательной деятельности.

3. Разработана и апробирована технология педагогической интерпретации результатов мониторинга качества обученности учащихся с использованием математико-статистических методов, позволяющая органам управления образованием анализировать, оценивать, контролировать и корректировать ход образовательного процесса и прогнозировать его дальнейшее развитие.

Теоретическая значимость исследования

1. Функциональная модель системы мониторинга качества обученности учащихся, разработанная с использованием САБЕ-технологий, в которой структурированы все информационные ресурсы, управляющие воздействия, исполнительные механизмы и педагогические процессы в их взаимодействии.

2. Система показателей с исследованием влияния каждого показателя и групп показателей на результат обучения учащихся методами многофак-

торного анализа.

3. Технология педагогической интерпретации результатов мониторинга качества обученности, базирующаяся на математико-статистических методах обработки экспериментальных данных.

Практическая значимость исследования заключается в использовании результатов мониторинга качества обученности при принятии решений на уровне органов управления образованием, администраций общеобразовательных учреждений, методических объединений учителей-предметников, разработке практических рекомендаций по коррекции учебного процесса в общеобразовательных учреждениях.

Достоверность результатов исследования обусловлена теоретическим обоснованием исследуемой проблемы, адекватностью используемых методов поставленной цели, задачам исследования и экспериментальным подтверждением выдвинутой гипотезы.

На защиту выносятся следующие основные положения:

1. Разработка системы показателей для мониторинга качества обученности учащихся общеобразовательных учреждений по отдельным компонентам ресурсного обеспечения, которая отвечает принципам системности и полноты.

2. Формирование выборочной совокупности на основе применения кластерного анализа и метода случайной выборки, отвечающей требованию репрезентативности исследуемых объектов.

3. Создание технологии педагогической интерпретации экспериментальных данных, на каждом этапе которой определены показатели и необходимые для интерпретации результатов мониторинга математико-статистические методы.

4. Представление системы мониторинга качества обученности учащихся в виде функциональной модели, отражающей функциональную структуру системы и обладающей необходимой полнотой описания.

Апробация и внедрение результатов исследования. Основные положения исследования докладывались и обсуждались на научно-методической конференции «Методологические проблемы контроля качества учебного процесса при переходе к инновационному образованию» (г.Улан-Удэ, 2001), II Всероссийской научно-практической конференции «Российская школа и Интернет» (г.Санкт-Петербург, 2002), региональной научно-практической конференции «Наука и преподавание дисциплин естественного цикла в образовательных учреждениях» (г.Улан-Удэ, 2002), всероссийской научно-технической конференции «Теоретические и прикладные вопросы современных информационных технологий» (г.Улан-Удэ, 2005, 2006), международной научно-методической конференции «Роль инфокоммуникационных технологий в совершенствовании системы управления качеством образования» (г.Санкт-Петербург, 2005), II Между-

народной конференции «Образование и глобализация» (г.Улан-Удэ, 2006). Материалы исследования использовались при разработке учебных курсов «Компьютерные технологии обучения», «Обработка экспериментальных данных на ЭВМ» для студентов Восточно-Сибирского государственного технологического университета. Были разработаны методические указания по основам вычислительной математики по теме «Методы обработки экспериментальных данных». Результаты диссертационной работы использовались в работе Кяхтинского РУО Республики Бурятия и подтверждено актом об использовании результатов диссертации.

Структура диссертации состоит из введения, двух глав, заключения, списка литературы и приложений.

СОДЕРЖАНИЕ РАБОТЫ

Во введении обосновывается актуальность темы диссертационного исследования, формулируются цель, объект, предмет, гипотеза, основные задачи и методы исследования, кратко излагаются основные положения, выносимые на защиту, их научная новизна, теоретическая и практическая значимость полученных результатов.

Первая глава работы посвящена описанию проблемной области. Выполнен теоретический анализ мониторинговых исследований по оценке учебных достижений учащихся общеобразовательных учреждений в региональной системе общего образования, определены и концептуально обоснованы средства проведения мониторинга, сформулированы и исследованы показатели, влияющие на качество обученности учащихся.

Мониторинг как способ научного исследования используется в различных отраслях человеческой деятельности. В настоящее время на практике широкое применение нашли различные виды мониторинга: экологический, социологический, медицинский, педагогический, экономический и др. В перечисленных видах общим является непрерывность и получение информации в динамике об объекте мониторинга. Однако каждому виду свойственны свои технологии, свои объекты исследования, свои критерии оценивания.

Мониторинг в широком смысле представляет собой специально организованные систематические наблюдения за состоянием объектов, явлений, процессов с целью их оценки, контроля и прогноза. Проблемы мониторинга в образовании исследуются в работах В.А.Кальней, Ю.А. Конар-жевского, А.Н. Майорова, А.И.Макарова, А.Б.Сахарчука, Т.А. Стефанов-ской, А.И.Субетто, С.Ч.Шишова, И.Е.Шкабара и др. В ходе исследования выявлено, что объектами мониторинга могут быть любые структурные элементы образовательных систем различных уровней, элементы образовательного процесса, характеристики коммуникативных процессов, про-

цессы функционирования и развития образовательных систем и управления ими. Кроме того, мониторинг качества обученности на региональном уровне имеет свои особенности и осложняется различными проблемами: отсутствием системы комплексного оценивания качества образования учащихся на всех ступенях обучения; разнообразием подходов к организации мониторинга качества образования руководителями звеньев различных уровней образования; отсутствием опыта использования «обратной связи» субъектами мониторинга; использованием для оценки качества обученности нестандартизированного инструментария и другие.

В данной работе объектом мониторинговых исследований является качество обученности учащихся, которое является одним го главных критериев образовательной деятельности на различных ступенях общего образования. Под обученностью нами понимается результат овладения учащимся системой знаний, умений и навыков, установленных нормативными документами и образовательным стандартом.

В работе определены характеристики, которыми должна обладать модель системы мониторинга качества обученности:

- иметь черты как педагогического, так и образовательного мониторинга;

- отвечать принципам, применяемым к объектам мониторинговых исследований качества образования;

- являться по характеру задач комплексным, так как объединяет в себе процесс, результат и необходимую корректировку педагогической деятельности;

- быть по территориальному признаку региональным, муниципальным и внутришкольным;

- являться по этапам обучения итоговым;

- предназначаться для различных уровней образования (среднее общее образование, основное общее, начальное);

- относиться по масштабу целей образования к стратегическому, тактическому и оперативному;

- обеспечивать локальный, выборочный и, возможно, сплошной охват объектов наблюдения;

- являться по частоте периодическим.

Проведение мониторинга качества обученности в регионе позволит получить:

1 Оперативную информацию о фактическом качестве обученности учащихся;

2)информацию о качестве процесса обучения;

3)обобщенные данные уровня обученности для сопоставления результатов образовательной деятельности в различных разрезах;

4)информационную базу для принятия управленческих решений.

Для проведения мониторинга качества обученности учащихся региона использованы предметные тесты, разработанные на научной основе Федеральным центром тестирования, прошедшие экспертизу качества, обладающие известными значениями валидности и надежности, что подтверждается этапом их сертификации. Объективность результатов тестирования достигается за счет использования стандартизированной процедуры тестирования, стандартизированных процедур обработки результатов, их шкалирования, интерпретации, процедуры апелляции и т.д.

В данный момент педагогическая наука не может точно назвать параметры, критерии, показатели, по которым можно было бы определить качество и эффективность образовательной деятельности. Отсутствие единого подхода к вопросу качества подготовки учащихся затрудняет решение вопроса о выборе показателей качества образования. Разработка единой научно обоснованной системы показателей качества подготовки учащихся является сложной задачей, зависящей от свойств и региональных особенностей системы общего образования. Для определения критериев и показателей оценки качества школьного образования существует два подхода:

1) базируется на оценке образования по одному критерию, чаще всего по образовательным результатам и его показателям. В этом случае качество образования предстает лишь в одной своей характеристике - качестве результатов;

2) связан с оценкой качества образования в его широком понимании, включающем критерии оценки образовательных результатов, оценки качества образовательного процесса и условий его реализации.

Для формирования системы показателей нами выбран второй подход, так как образовательная среда рассматривается как целостная система. Кроме того, в рамках этого подхода значительно слабее представлены показатели, чаще всего они количественные и малоинформативные. Стандартизированные технология и средства оценки дали возможность выявить систему показателей для мониторинга и определить критерии. Основным критерием оценки качества обученности является степень соответствия знаний, умений и навыков учащегося требованиям Государственного стандарта. Однако оно зависит и от косвенных критериев, основными из которых являются соответствие охвата учебного материала минимуму содержания учебного предмета; соотношения «ученик-учитель» нормативному минимуму; педагога квалификационным требованиям; уровня материально-технической базы требованиям нормативных документов и другие. Критерии зависят от показателей, поэтому отбор их осуществлялся в соответствии с принципами мониторинга качества обученности, к которым относятся удовлетворение потребностей пользователей информации, сбалансированность и сопоставимость системы показателей, определение по каждому показателю источников получения соответствующей инфор-

мации и другие.

Из большого числа показателей в диссертационном исследовании были выделены те, которые относятся к отдельным компонентам ресурсного обеспечения общеобразовательного учреждения. В качестве компонентов, показатели которых существенно влияют на результаты обучения учащихся, выбраны контингент учащихся и оценки их итоговой аттестации, педагогический состав и его профессиональные достижения, а также сведения об общеобразовательном учреждении.

С этих позиций построена система показателей качества обученности в виде многоуровневой иерархической структуры (или дерева), охватывающая каждую группу характеристик. Первые два уровня и подгруппа показателей по контингенту учащихся дерева показателей представлены на рис.1. В системе показателей исследовано взаимовлияние показателей и влияние каждого показателя на результат образовательной деятельности методами многофакторного анализа.

Рис. 1. Подсистема «Контингент учащихся» в системе показателей качества обученности

Таким образом, разработанная система обоснована и включает основные показатели отдельных компонентов ресурсного обеспечения общеобразовательного учреждения. Она апробирована при мониторинговых исследованиях качества обученности учащихся в системе общего образования, что позволило оценить результаты деятельности общеобразовательных учреждений по данной системе показателей.

Во второй главе описана разработанные технология мониторинга качества обученное™ и функциональная модель системы мониторинга. Технология мониторинга включает технологию формирования репрезентативной выборочной совокупности с применением методов случайной выборки и кластерного анализа, технологию педагогической интерпретации результатов мониторинга. Также приведены некоторые результаты практической реализации разработанной технологии.

В последнее десятилетие для педагогической науки характерно расширение ее границ за счет внедрения кибернетических и математических методов оценки и измерения педагогических явлений, установления количественных зависимостей между ними, что соответствует рекомендациям ученых-педагогов. Обработка количественных данных и полученные при этом выводы дают возможность объективно доказать или опровергнуть правильность предположений, сделанных при исследовании педагогических процессов и явлений.

В связи с этим в работе применяется математико-статистический аппарат, методы которого используются почти на всех этапах предложенной в работе технологии мониторинга качества обученное™.

Технология мониторинговых исследований качества обученности

I. Подготовительный этап. Определяются цель, субъекты и объекты исследования, сроки проведения, организационные мероприятия и инструментарий для выполнения работ.

Основными целями мониторинга качества обученности на региональном уровне являются анализ состояния обученности учащихся в регионе и выработка рекомендаций, предложений по его улучшению.

Субъекты мониторинга - региональный орган управления образованием; районные и городские органы управления образованием; региональный институт повышения квалификации работников образования; общеобразовательные учреждения; различные аттестующие организации (центры тестирования, аттестационно-диагностические центры, научно-методические центры и другие).

Объекты мониторинга - образовательные учреждения региона, которые должны исследоваться в соответствии с разработанной системой показателей. Для выбора объектов мониторингового исследования разработана технология получения выборочной совокупности.

Технология формирования выборочной совокупности. В терминах статистического анализа контингент учащихся представляет собой генеральную совокупность. Ее объем в Республике Бурятия в настоящее время составляет более 200 тысяч учащихся. Формирование выборочной совокупности из генеральной в диссертационной работе проводится двумя методами: случайной выборки и кластерного анализа.

Экспериментальные данные получены на ограниченном контингенте учащихся, принявших участие в централизованном тестировании и представляющих собой выборку из генеральной совокупности. Эта выборка формируется случайным образом, так как в централизованном тестировании может участвовать любой учащийся по собственному желанию. Из математической статистики известно, что метод случайного отбора элементов генеральной совокупности обеспечивает ее репрезентативность. Кроме того, практика проведения исследований показывает, что обычно обоснованный объем выборочной совокупности составляет от 400 до 2000 единиц наблюдения, которых достаточно для получения надежной и обоснованной информации. Количественный состав участников централизованного тестирования подтверждает репрезентативность выборки.

Наряду со случайным выборочным методом для анализа качества обу-ченности учащихся использован метод кластерного анализа. Он применен для Определения репрезентативной выборочной совокупности путем классификации общеобразовательных учреждений и. выделения однородных групп с целью выработки управляющих воздействий для каждой группы,

Ниже приводится описание разработанного алгоритма классификации общеобразовательных учреждений с помощью метода кластерного анализа.

По

* '¿и- чх. г ;

Средние общеобразовательны е учреждения

-----—

ШпшМеМп

М» - -- СI - ■-" -1'. ..

Городские $вщсобразоватс.дъиые учреждения

Сельские об щюбразодатедьк учреждения

Рис. 2. Иерархическая структура базовых признаков совокупности группы «Общеобразовательное учреждение»

В качестве базовых признаков были использованы ступени образования и месторасположение общеобразовательного учреждения. Иерархическая структура базовых признаков показана на рис.2.

Генеральная совокупность имеет иерархическую структуру, состоящую из двух ступеней. К таким совокупностям обычно применяют многоступенчатый отбор. Для обеспечения репрезентативности данных можно определить объем выборки в 10%. Все дальнейшие вычисления были проведены для этого объема выборочной совокупности. Согласно одному из критериев стратификации общеобразовательные учреждения подразделяются на городские и сельские. На второй ступени были определены объемы выборки городских и сельских образовательных учреждений исходя из их общего количества: городских школ - 9, сельских — 31.

Затем выполнен типический отбор сельских и городских учебных учреждений. Принцип кластеризации предполагает, что генеральная совокупность разбивается на однотипные группы. В качестве критерия кластерного анализа для элементов генеральной совокупности использовано количество учащихся. Для формирования типических групп (кластеров), однородных в количественном отношении, для школ выделено 6 кластеров, которые приведены в Приложении 1 диссертационной работы. Расчеты выполнены в среде пакета Statistica - интегрированной системы статистического анализа и обработки данных (фирма StatSoft Inc., США).

Для включения конкретных школ в каждый кластер были выбраны школы, имеющие минимальное отклонение от среднего значения. После выбора школ определены объемы выборки учащихся по школам, вошедшим в кластера (в процентном соотношении). Результаты вычислений показаны в табл.1.

Таблица 1

Распределение объемов выборки школ и учащихся по кластерам

Количество школ Объем выборки школ Выборка учащихся

Кластер кол- % сельских город- сельских город-

во от суммы ских ских

1 13 3 1 25

2 24 6 1 50

3 51 13 4 1 62 43

4 60 15 5 1 73 50

5 120 30 10 2 148 102

6 136 33 12 3 165 115

ИТОГО 404 100 31 9 342 491

Далее доказывается репрезентативность выборочной совокупности, представленной в табл.1. Ошибки, возникающие при использовании выборочных данных, показывают, насколько хорошо характеристики выборки представляют соответствующие характеристики генеральной совокупности, и поэтому называются ошибками представительности (репрезентативности).

Величина ошибки выборки представляет собой разность между генеральной и выборочной средними. Средняя арифметическая ошибка типической выборки рассчитывается по формуле

где к - количество типических групп (6 кластеров);

X . - средняя арифметическая выборка из 1-й типической группы;

N - объем генеральной совокупности, который равен 404 общеобразовательным учреждениям;

N. - объем ¡-й типической группы.

Для вычисления средней ошибки выборки при типическом методе отбора объемов выборки, пропорциональных объемам типических групп при бесповторном отборе, используется следующая формула:

где ц - средняя ошибка выборки;

о, - среднее квадратическое отклонение ¡-й типической группы, которое вычисляется по формуле:

В результате вычислений по вышеприведенным формулам было получено значение средней ошибки выборки ц, равное 64,966, которое дает некоторое представление об ошибке репрезентативности, т. е. об ошибке, с которой выборочная средняя представляет действительное значение генеральной средней.

Предельная ошибка Д вычисляется на основе знания средней ошибки ц по формуле Д = 1-ц, где I - величина, определяемая с помощью специальной таблицы. Для ее определения необходимо задать надежность (вероятность) результатов выборочного исследования. При исследованиях социальных систем обычно задаются надежностью (вероятностью), равной

к _

0,68; 0,95 или 0, 99. При значениях надежности 0,95 значение г = 2, тогда Д = 129,933. Предельная ошибка А указывает пределы для генеральной средней. Выборочная средняя Хвыб отличается от генеральной средней не

более чем на А, т.е.

X ген X выб

^ А. Так как в нашем случае

Хген= 412,666 - среднее значение количества учащихся в общеобразовательных учреждениях республики (генеральной совокупности),

Хшб- 392,875 - среднее значение количества учащихся в общеобразовательных учреждениях, выбранных для мониторинговых исследований,

Д=129,933,

то данное условие 1412,666 - 392,875 | =19,791<А выполняется. Это означает, что выборочная совокупность репрезентативна.

Таким образом, использованные методы получения выборочной совокупности обеспечивают репрезентативность выборок. Случайный выборочный метод используется при анализе состояния системы общего образования, получения общих характеристик функционирования объектов системы. Применение кластерного анализа позволяет, во-первых, выделить однородные группы по заданным критериям кластеризации, внутри групп выполнить отбор и распространить полученные результаты на всю группу; во-вторых, подвергнуть мониторингу качества обученное™ сформированные выборки групп и по результатам мониторинга сформулировать рекомендации мониторинговой службы по отношению к каждой группе для принятия решений органами управления образованием.

II. Этап сбора информации. На данном этапе используются прямые методы получения информации на базе применения квалиметрических (оценочно-измерительных) технологий: тестирование и анкетирование. В качестве базы данных используются результаты централизованного тестирования. Для проведения анкетирования составлены анкеты, приведенные в Приложении 2 диссертационной работы.

III.Этап обработки и анализа полученной информации. Для реализации данного этапа разработана технология педагогической интерпретации результатов мониторинга качества обученности учащихся общеобразовательных учреждений, в основу которой легли статистические методы обработки и анализа экспериментальных данных.

Технология педагогической интерпретации результатов мониторинга качества обученности. Использован ряд числовых характеристик и методов статистического анализа. Наиболее значимыми из них являются математическое ожидание (или среднее арифметическое значение выборки), мода, медиана, дисперсия, среднеквадратичное отклонение от среднего, размах вариации. Приведенные числовые характеристики были использо-

ваны в следующих методах статистического анализа при разработке технологии педагогической интерпретации мониторинга качества обученно-сти:

1) группировка первичных данных как один из основных методов решения задачи классификации и основа всей дальнейшей работы с экспериментальными данными;

2) кластерный и дискриминантный анализы как методы классификации исследуемых совокупностей объектов на группы, в определенном смысле однородные, применяющиеся при наличии нескольких признаков;

3) системный анализ для изучения взаимосвязей в многомерной совокупности на основе представлений о связях между отдельной зависимой переменной и группой влияющих на нее показателей, что осуществлено посредством множественного корреляционного анализа;

4) факторный анализ для исследования процессов функционирования объектов, которые характеризуются множеством исходных признаков; эти методы позволяют отбирать наиболее существенные признаки и изучать меньший набор показателей;

5) методы множественной регрессии для детального исследования взаимозависимости признаков, их соподчиненности, силы корреляционного взаимодействия. В множественных моделях зависимая переменная у рассматривается как функция от независимых факторов х/, х2, . . ., х„. При отборе признаков, подлежащих включению в множественную модель, особое значение придавалось педагогическому анализу, в ходе которого выявляется сущность, направленность и теснота связи между факторами.

Основные стадии технологии педагогической интерпретации:

1. Определение центральной тенденции совокупности экспериментальных данных. Для получения первого представления о совокупности экспериментальных данных необходимо рассчитать показатели, т.е. математическое ожидание (или среднее арифметическое значение выборки), моду, медиану, дисперсию, среднеквадратичное отклонение от среднего, размах вариации, которые определяют центральную тенденцию ряда.

На основе этих характеристик:

- рассчитывается интегральная оценка уровня усвоения учебного материала и операционального уровня овладения знаниями;

- ранжируются общеобразовательные учреждения, что позволяет выявить рейтинг общеобразовательного учреждения в системе общего образования в регионе;

- проводится первичный сравнительный анализ успешности школ;

- определяется предварительное суждение об уровне преподавания и уровне учебных достижений любого учащегося в классе и школе.

2. Первичное исследование групп данных. Для формирования групп используются методы "интервальной группировки и кластерного анализа.

Внутри сформированных групп выполняются процессы первой стадии на основе анализа статистических показателей.

3. Углубленное исследование групп данных. На данной стадии применяются методы корреляционного анализа, множественной регрессии, факторного анализа, экспертный метод. Корреляционный анализ используется для определения парной зависимости между показателями. Метод множественной регрессии и экспертный метод позволяют оценить степень зависимости показателей, т.е. определить наиболее значимые показатели, влияющие на уровень обученности учащихся.

4. Содержательный анализ результатов выполнения тестов. В рамках данной стадии по каждому предмету и/или в разрезе вариантов теста строятся зависимости между тестовым заданием и процентом учащихся, выполнивших это тестовое задание. Построенные зависимости позволяют определить качество обученности по отдельным содержательным линиям рассматриваемого предмета и/или по каждому испытуемому. Кроме того, полученные результаты позволяют определить:

- успешность школ;

- уровень преподавания предметов в школе;

- уровень учебных достижений любого учащегося в классе и школе;

- структуру знаний конкретного учащегося по рассматриваемому предмету.

5. Формирование отчетов и разработка практических рекомендаций по категориям потребителей информации.

По разработанной технологии был выполнен анализ результатов экспериментальных данных. На первой стадии были вычислены показатели, определяющие центральную тенденцию функционирования и развития региональной системы общего образования. Так, вычисленный средний тестовый балл по предмету позволил:

- сравнить результаты итоговой аттестации, проведенной в традиционной форме, и итогового централизованного тестирования. Анализ показал согласованность результатов, т.е. адекватность оценок, полученных в итоговом централизованном тестировании;

- сравнить результаты тестирования учащихся республики с аналогичными данными по России: показатели по основным предметам находятся примерно на уровне общероссийских, кроме химии (разница в 6,6 балла). Если принять средний показатель по России за «стандарт», то полученные результаты показывают необходимость повышения уровня знаний по химии;

- выявить динамику качества обученности по предмету (табл. 2 и рис.3).

Таблица 2

Полученные баллы итогового тестирования по основной школе по годам

9 к.часе 2003 г. 2004 г. 2005 г. 2006 г.

Рус.яз. 50,46 48,07 32,12 33,0

Алгебра 50,99 56,11 64,63 56,2

Физика 47,99 51,32 47,38 46,9

Химия 50,45 51,28 58,31 53,8

70 1 60 -50 40 -30 20 10 0

2003 2004 2005 2006

Рис. 3. Результаты итог ового тестирования по основной школе но годам

Из табл ,2 видно, что показатели по русскому языку в 2005 и 2006 гг. значительно снизились, что характерно для всех испытуемых и связано с изменением структуры тестов.

На второй стадии кластеризация школ по признаку местоположения позволила выполнить сравнительный анализ результатов итогового тестирования выпускников средней школы по годам в каждом кластере. Полученные данные (рис.4) показывают, что качество обученности выпускников городских школ выше, чем в сельских школах.

На третьей стадии в процессе исследования проведен сбор данных по разработанной системе показателей.

Использование многофакторного аиализа, множественной регрессии и экспертных методов при обработке результатов анкетирования выявили факторы, влияющие как на уровень учебных достижений, так и степень их влияния на конечный результат, причем было установлено влияние отдельных факторов, а затем совместный эффект группы факторов.

О рус яз. Ралгебра

□ физика

□ химия

русский Я1ыи Мйтемагки физик» химия руетий лэь« мэтвмапмв физика ¡ммия

Обозначения; ~*~гаро'а Рис.4. Результаты итогового центратизованного тестирования по годам

В результате этих исследований было получено уравнение связи результата обучения у от факторов X{системы показателей), имеющее вид: у = 0,685*1 -0,212X2- 1,2х4+ 1,03*5, где у - качество обученности, х, - факторы:

- доля учителей, имеющих высшее образование, 0,685, х2 - средняя нафузка учителя, а2=- 0,212, хг количество учащихся на 1 учителя, а$ - - 1,4, Хц - количество учащихся, участвовавших в олимпиадах, аА = 1,2, Л"з - охват учебного материала по предмету, а; = 1,03. Необходимо отметить, что полученное уравнение регрессии позволяет прогнозировать результаты процесса обучения. Влияние полученной труппы факторов на конечный результат было оценено коэффициентом множественной регрессии К, значение которого равно 0,87. Это означает, что степень влияния на результаты обучения полученной группы факторов является сильной.

На основе полученных данных можно сделать вывод, что несмотря на вариативность образовательных программ уровень учебных достижений учащихся в первую очередь зависит от личности учителя, его квалификации, опыта, уровня его профессиональной компетентности.

Четаертая стадия - содержательный анализ результатов тестирования по предметам, который позволяет оценить качественный уровень знаний vчaщиxcя по предмету в целом, по каждому тестовому заданию, а также по

содержательным линиям: знание понятий и основных законов, теоретические знания и их практическое применение и др. Для содержательного анализа качества обученности учащихся была использована информация о структуре тестов, содержании и уровнях трудности тестовых заданий, тестовых баллах, средних значениях тестовых баллов выпускников по предметам, процентах выполнения заданий теста различными группами учащихся.

Из рис.5 видно, что наблюдается определенная тенденция успешности выполнения тестовых заданий независимо от вариантов. Это означает, что усвоение школьного курса по математике учащимися проходит примерно на одинаковом уровне. Также виден неравномерный характер знаний тестируемых. Например, 7-е задание почти во всех рассматриваемых вариантах выполнило около 30% тестируемых. В данном случае требуется обратить внимание на тему тестового задания и осущестаить коррекцию учебного процесса при изучении этой темы.

1 3 5 7 9 11 13 15 17 19 21 23 25 27 29 № тестового задания

Рис.5. График выполнения тестовых заданий по математике (7 вариантов)

Разработанная технология педагогической интерпретации может эффективно использоваться при обработке результатов массового тестирования.

IV. Этап обратной связи. На данном этапе формируются отчеты мониторинговых исследований и рекомендации, необходимые органам управления образованием для коррекции образовательной деятельности. В

работе представлены примерные рекомендации мониторинговой службы.

Таким образом, разработанная технология мониторинга качества обученное™ обеспечивает анализ учебных достижений учащихся Республики Бурятия.

Функциональная модель системы мониторинга качества обученности

При разработке функциональной модели системы мониторинга качества обученности использована современная диаграммная техника SADT (Structured Analysis and Design Technique) - наиболее распространенный метод структурного анализа и проектирования, который применяется в различных предметных областях, в том числе и педагогике. Метод SADT представляет собой совокупность правил и процедур, предназначенных для построения функциональной модели исследуемой предметной области.

Система педагогического мониторинга является сложной, содержит большое количество функций, процессов, элементов данных и сложные взаимосвязи между ними, обладает значительной временной протяженностью.

Отсутствие полных аналогов ограничивает возможность использования типовых систем мониторинга. Поэтому разработана функциональная модель системы мониторинга качества обученности в региональной системе общего образования с использованием описанного ранее метода SADT. Модель имеет иерархическую структуру, содержит бизнес-процессы, необходимые ресурсы для их выполнения, получаемые результаты на каждом уровне, исполнителей бизнес-процессов и потоки информации, под управлением которых они выполняются. На рис.6 показано три уровня дерева процессов.

Мониторинг качества обученност Ор о||

Проведение под готов ительного этапа Ор 1

Сбор информации

°В,,.„.„ ...

Обработка информации

2Ц0р

Анализ обработанной информации

° Определение целей ° Формирование °Установление связей запросов на

между субъектами выборку из БД ° Проведение ° Обработка

организационных анкет

мероприятий

'ум; ; ¡J.' у J ....-;'-;.'

° Анализ рейтинга

учащихся ° Анализ рейтинга общеобразов ат ель ных учреждений

° Определение основных показателей ° Обработка

анкетных данных ° Корреляционный ° Анализ выполненных

анализ заданий

о Множественная ° Анализ выявленных

регрессия факторов

° Кластерный анализ

Рис.6. Функциональная модель мониторинга качества обученности учащихся

Все процессы пятиуровневой функциональной модели системы описаны в работе. В дальнейшем данная модель может использоваться в качестве основы для проектирования информационной системы мониторинга качества обученности учащихся.

В процессе диссертационного исследования получены следующие основные результаты:

1. Исследована проблема качества обученности учащихся региональной системы общего образования и обосновано применение мониторинга как метода педагогического исследования проблемы, обеспечивающего данными для педагогического прогнозирования и принятия эффективных управленческих решений, направленных на улучшение результатов образовательного процесса. Это позволяет утверждать, что педагогический мониторинг качества обученности учащихся является одним из необходимых инструментов управления региональной системой общего образования на современном этапе.

2. Выявлена и обоснована система показателей по отдельным компонентам ресурсного обеспечения общеобразовательного учреждения, исследовано с привлечением методов многофакторного анализа влияние каждого показателя на результат образовательной деятельности, выделены показатели, существенно влияющие на качество обученности учащихся.

3. Показано, что педагогические тесты, являясь одним из средств измерения уровня обученности учащихся, составляют основу мониторинга для получения объективных результатов. Анализ полученных результатов обеспечивает возможность сравнения качества обученности в различных типах общеобразовательных учреждений в регионе, отслеживания результатов педагогической деятельности и осуществления коррекции учебного процесса.

4. Использованы методы кластерного анализа и случайной выборки для формирования выборки из генеральной совокупности для проведения мониторинговых исследований. Оба метода обеспечивают репрезентативность выборочной совокупности.

5. Обоснованы и экспериментально проверены основные статистические показатели и математико-статистические методы применительно к технологии педагогической интерпретации результатов образовательного процесса. При этом определены статистические показатели и математико-статистические методы для каждого этапа технологии педагогической интерпретации результатов мониторинга.

6. Разработана функциональная модель системы мониторинга качества обученности учащихся в региональной системе общего образования, в которой определены бизнес-процессы и необходимые ресурсы для их выполнения; результаты, получаемые в ходе выполнения каждого процесса;

исполнители бизнес-процессов; потоки информации, под управлением которых выполняются бизнес-процессы. Педагогический мониторинг является сложной системой, содержащей достаточно большое количество функций, процессов, элементов данных и сложные взаимосвязи между ними, а также обладающей значительной временной протяженностью. Функциональная модель, разработанная в виде пространственной иерархии диаграмм, позволила наглядно представить и структурировать работу этой сложной системы.

7. Полученные результаты мониторинговых исследований использованы некоторыми органами управления образованием для качественного дидактического и содержательного анализа по всем ступеням образовательной вертикали согласно разработанной технологии педагогической интерпретации. Результатами качественного анализа явились выводы, заключения, практические и методические рекомендации, на основе которых принимаются управленческие решения.

В результате выполненной работы можно сделать вывод о том, что цель исследования достигнута, гипотеза подтверждена, поставленные задачи решены. Полученные результаты имеют теоретическую и практическую значимость и могут быть применены в работе системы общего образования с целью повышения качества обученности, а также для разработки диагностических тестов по предметам и содержательным линиям, по которым наблюдается недостаточно высокое качество обученности. Диагностические тесты позволят в дальнейшем определить причины низкого уровня и скорректировать учебно-воспитательный процесс.

Результаты диссертации отражены:

а) в рецензируемых научных изданиях:

1. Чимитова, Е.Г. Мониторинг качества образования в общеобразовательных учреждениях региона [Текст] / Е.Г. Чимитова, Н.Ц. Бильгаева / Вестник Бурятского университета. Сер.7: Педагогика. Вып.14 - Улан-Удэ: Изд-во Бурятского госуниверситета, 2006. - С.159-167. ISBN 5-85213-420-1

б) в других научных и научно-методических изданиях:

1. Чимитова, Е.Г. Мониторинг как инструмент управления качеством общего образования [Текст] / Е.Г. Чимитова, Н.Ц. Бильгаева // Единство обучения и воспитания в профессиональной подготовке студента: сб. на-уч-метод. ст. Вып. 13 - Улан-Удэ, 2007. - С.65-68.

2. Чимитова, Е.Г. Кластерный анализ региональной системы общего образования [Текст] / Е.Г. Чимитова, Н.Ц. Бильгаева, С.Д. Данилова // Теоретические и прикладные вопросы современных информационных технологий: материалы VII всерос. науч-тех. конф. - Улан-Удэ, 2006. -С.282-287.

3. Чимитова, Е.Г. Статистический подход к анализу региональной системы образования [Текст] / Е.Г. Чимитова, Н.Ц. Бильгаева // Образование и глобализация: материалы П Байкальской междунар.конф.: в 2 ч. - 4.2 -Улан-Удэ: Изд-во Бурятского госуниверситета, 2006. - С.146-149.

4. Чимитова, Е.Г. Функциональная модель мониторинга качества обучения на региональном уровне [Текст] / Е.Г. Чимитова // Роль инфокомму-никационных технологий в совершенствовании системы управления качеством образования. - СПб., 2005. - С. 110-112.

5. Чимитова, Е.Г. Мониторинг готовности выпускников общеобразовательных учреждений Республики Бурятия к участию в ЕГЭ [Текст] / Е.Г. Чимитова, Н.Ц. Бильгаева // Теоретические и прикладные вопросы современных информационных технологий: материалы VI всерос. науч-тех. конф. - Улан-Удэ, 2005. - С. 345-349.

6. Чимитова, Е.Г. Использование элементов информационных технологий в самостоятельной работе студентов [Текст] / Е.Г. Чимитова // Современные технологии проведения самостоятельной работы в вузе: материалы науч-метод. конф. Вып,11 - Улан-Удэ, 2004. - С. 150-152.

7. Чимитова, Е.Г. Методические основы использования информационных ресурсов в реальном учебном процессе на основе применения интернет-технологий [Текст] I Е.Г. Чимитова, И.С. Евдокимова // Российская школа и Интернет: материалы II Всерос. науч-практ. конф. СПб, 2002. -С.27-28.

8. Чимитова, Е.Г. Методика проектирования мультимедийных обучающих систем [Текст] / Е.Г. Чимитова, Л.В. Найханова, Ю.А. Атутов // Теоретические и прикладные вопросы современных информационных технологий: материалы всерос. науч-тех. конф. - Улан-Удэ, 2001. - С.277-282.

9. Чимитова, Е.Г. Методы обработки экспериментальных данных: метод. указания по курсу "Основы вычислительной математики". Вып. 4. [Текст] / Е.Г. Чимитова, Д.Ш. Ширапов. - Улан-Удэ: Изд-во ВСГТУ, 1998. -43с.

Подписано в печать 16.03.2007. Формат 60 х 84 1/16. Усл. печ. л. 1,5. Тираж 100 экз. Заказ № 2025

Издательство Бурятского госуниверситета 670000, г. Улан-Удэ, ул.Смолина, 24а

Содержание диссертации автор научной статьи: кандидата педагогических наук, Чимитова, Елена Гендуновна, 2007 год

Введение.

1 Теоретические основы мониторинговых исследований в образовании.

1.1 Научные основы мониторинга в сфере образования.

1.2 Система показателей мониторинга качества обученности в региональной системе общего образования.

1.3 Роль педагогических тестов в оценке качества обученности.

1.4 Выводы по первой главе.

2 Мониторинг качества обученности учащихся: технология, апробация, модель.

2.1 Технология мониторинга качества обученности учащихся.

2.1.1 Технология получения выборочной совокупности.

2.1.1.1 Метод случайной выборки.

2.1.1.2 Кластерный анализ формирования однородных групп в системе образования.

2.1.2 Технология педагогической интерпретации результатов мониторинговых исследований.

2.1.2.1 Основные характеристики анализируемой совокупности данных.

2.1.2.2 Методы для оценки и анализа качества обученности.

2.1.2.3 Стадии технологии педагогической интерпретации результатов мониторинговых исследований.

2.2 Апробация основных методов, входящих в технологию педагогической интерпретации результатов мониторинга.

2.2.1. Формирование основной совокупности данных по результатам централизованного тестирования.

2.2.2. Определение центральной тенденции совокупности экспериментальных данных.

2.2.3. Первичное исследование групп данных.

2.2.4. Углубленное исследование групп данных.

2.2.5. Содержательный анализ результатов выполнения тестов.

2.3 Примерные рекомендации мониторинговой службы.

2.4 Модель системы мониторинга качества обученности в региональной системе общего образования.

2.5 Выводы по второй главе.

Введение диссертации по педагогике, на тему "Мониторинг качества обученности учащихся в региональной системе общего образования"

Актуальность исследования. Концепция модернизации российского образования на период до 2010 года и решения правительства Российской Федерации, утвержденные 21 декабря 2005 года по вопросам образования, предусматривают ряд приоритетных мер по обеспечению качества образования. Качество образования напрямую зависит от качества государственных образовательных стандартов, при разработке которых требуется рассмотрение множества аспектов. К ним относятся определение критериев и показателей качества образовательных систем различного уровня, процедуры получения достоверной и объективной информации результатов обучения, организация мониторинга качества обучения как инструмента управления региональной системой образования и др. Из вышеизложенного следует, что для современной педагогической науки и практики задача педагогического мониторинга, обеспечивающего непрерывное системное отслеживание состояния образовательного процесса, является одной из актуальнейших задач.

Во второй половине девяностых годов в российском образовании стала использоваться система оценки знаний учащихся с помощью стандартизированных педагогических измерителей. Технология оценивания знаний учащихся была разработана Центром тестирования выпускников общеобразовательных учреждений (в настоящее время Федеральный центр тестирования). С созданием этого центра произошли качественные сдвиги в теории педагогического тестирования, разработаны, апробированы и в настоящее время используются тесты различного целевого назначения с известными параметрами качества, надежности и валидности. Естественно, что результаты тестирования можно использовать для принятия обоснованных управленческих решений органами управления образованием. Мониторинг качества образования обеспечивает сопоставимость результатов обучения на различных уровнях: общероссийском, региональном, муниципальном. На региональном уровне органы управления образованием могут анализировать состояние качества образования в каждом конкретном общеобразовательном учреждении, сравнивать результаты образовательной деятельности различных типов общеобразовательных учреждений, муниципальных систем образования.

Исследования в области управления качеством образования и образовательного мониторинга появились в отечественной педагогике в 90-х годах (В.П. Беспалько, А.Н. Майоров, В.А. Кальней, С.Е. Шишов, Д.Ш. Матрос, Д.М. Полев и др.). Они базируются на анализе содержания, принципов и функций управленческой деятельности, которые представляют собой теоретическую базу управления образованием. Различные аспекты этой проблемы были рассмотрены В.П. Симоновым, Т.И. Шамовой, П.И. Третьяковым, A.M. Моисеевым и др. В их трудах обсуждаются принципы и функции управления, содержание управленческой деятельности.

В последние десять лет объектом нового направления исследований стали проблемы управления качеством образования с использованием новых информационных технологий и образовательного мониторинга (В.П.Панасюк, М.М.Поташник, Е.А.Ямбург, Д.Ш.Матрос и др.). Проблемы управления качеством образования наиболее полно раскрыты в монографии «Управление качеством образования», изданной в 2000 г. под редакцией М.М.Поташника. Авторы книги судят о качестве образования в основном по качеству результатов образовательного процесса. Так, В.П. Панасюк предложил методику проведения самообследования качества образования, обеспечиваемого школой. Качество образования им рассматривается как многокомпонентная категория, которая зависит от качества основных видов деятельности школы, ресурсов и результатов обучения. При этом его методические рекомендации в основном касаются содержания и структуры аналитического отчета о деятельности общеобразовательного учреждения. Следует также отметить, что в последние годы появляется все больше рекомендаций о необходимости применения математико-статистических методов в исследованиях по проблемам педагогики (А.Я.Найн и другие).

Анализ научной литературы показывает, что качество образования оценивается преимущественно по результату обучения, который является показателем деятельности общеобразовательного учреждения. При оценке деятельности общеобразовательных учреждений в основном используются количественные показатели, характерные для отчетного периода и не отражающие динамики процессов. Поэтому имеющаяся информация не обладает прогностической силой, и на ее основе сложно выполнить системный анализ деятельности общеобразовательного учреждения. Также в педагогическую практику недостаточно широко введено понятие регионального мониторинга, построенного на использовании единой информационной базы контингента учащихся. Элементы такой системы присутствуют в рамках централизованного тестирования, которое позволяет осуществлять итоговую аттестацию выпускников различных ступеней образовательной вертикали в системе общего образования - начальной, основной и полной средней.

Оценка деятельности общеобразовательных учреждений региона базируется на традиционной статистической отчетности школ. Информация, собранная в рамках статистической отчетности, оказывается недостаточной для объективного анализа и оценки качества образования, осуществления сравнительного анализа деятельности общеобразовательных учреждений.

В настоящее время Бурятским региональным представительством Федерального центра тестирования при Восточно-Сибирском государственном технологическом университете (ВСГТУ) накоплена достаточно обширная база статистических данных, начиная с 1998 года, об уровне учебных достижений учащихся, которая является основой регионального педагогического мониторинга. Использование статистических методов обработки результатов тестирования и их педагогическая интерпретация дают возможность органам управления образованием осуществлять сравнительный анализ результатов деятельности региональной системы общего образования, эффективно управлять качеством образования.

В результате анализа научной литературы и состояния системы общего образования региона установлено, что в регионе имеют место следующие противоречия:

- между необходимостью непрерывного отслеживания качества обученности и недостаточной разработанностью методов и средств оценки качества обучения;

- между сложностью объекта исследования и низким уровнем владения исследователями в области педагогики и психологии современными математическими и статистическими методами анализа эксперимента;

- между необходимостью эффективного управления качеством обученности и ограниченным спросом на результаты системы оценки учебных достижений учащихся со стороны органов управления образования в региональной системе общего образования;

- между необходимостью адекватного анализа качества обученности и низким уровнем применения математико-статистических методов для анализа результатов тестирования.

Анализ научной литературы, недостаточный уровень разработанности проблемы, выявленные противоречия в системе общего образования позволили сформулировать проблему теоретического обоснования мониторинговых исследований в сфере образования, разработки средств и методов проведения мониторинга качества обученности, обеспечивающих эффективное управление качеством обучения. Возможные подходы к решению этой проблемы даны в диссертационном исследовании «Мониторинг качества обученности учащихся в региональной системе общего образования».

Цель исследования: разработка технологии мониторинга качества обученности учащихся общеобразовательных учреждений и ее обоснование на основе анализа экспериментальных данных, полученных в регионе в ходе централизованного тестирования

Объект исследования: мониторинг качества обученности учащихся.

Предмет исследования: модели, технологии и средства проведения мониторинга качества обученности учащихся.

Гипотеза: мониторинг учебных достижений учащихся предоставит органам управления образованием объективную информацию о состоянии качества результатов учебной деятельности общеобразовательного учреждения, если:

3) представить результаты мониторинговых исследований для принятии управленческих решений.

В соответствии с целью и гипотезой были сформулированы следующие задачи:

- исследовать и определить теоретические основы проведения мониторинговых исследований в педагогике;

- разработать и исследовать показатели оценки качества обученности учащихся общеобразовательных учреждений;

- обосновать использование педагогических тестов для диагностики учебных достижений учащихся как одного из основных средств проведения мониторинга;

- разработать технологию получения выборочной совокупности;

- разработать и апробировать технологию педагогической интерпретации результатов мониторинговых исследований качества обученности в общеобразовательных учреждениях региона, обеспечивающую возможность формирования практических рекомендаций мониторинговой службы для органов управления образованием.

Теоретико-методологической основой исследования являются концепция управления качеством образования; программные и нормативно-правовые документы системы образования; методология и методы педагогического исследования и педагогической квалиметрии (И.Я.Лернер, М.Н.Скаткин, В.П.Беспалько, Н.А.Селезнева, А.И.Субетто, В.П.Симонов); теория системно-структурного анализа и проектирования систем управления качеством образования (М.М.Поташник, В.П.Панасюк, А.О.Татур); методология структурного анализа и проектирования систем; организация и осуществление педагогического мониторинга (С.Е.Шишов, В.А.Кальней, А.Н.Майоров, Д.Ш.Матрос).

Основные этапы исследования

На первом этапе (2000 г.) проводилось теоретическое осмысление проблемы и темы исследования, изучались опыт централизованного тестирования и возможности его использования в региональной системе мониторинга качества образования.

На третьем этапе (2003-2004 гг.) обобщались результаты исследования качества обученности выпускников общеобразовательных учреждений Республики Бурятия, были выбраны методы педагогической интерпретации результатов исследования.

На четвертом этапе (2005-2006 гг.) проведены завершающий анализ и обобщение данных, полученных в ходе исследования, разработаны рекомендации для органов управления образованием и методических объединений учителей-предметников общеобразовательных учреждений региона.

Опытно-экспериментальной базой исследования стали общеобразовательные учреждения Республики Бурятия, выпускники которых принимали участие в итоговой аттестации в рамках государственного централизованного тестирования в период с 1998 по 2005 годы. Общеобразовательные учреждения, выпускники которых были протестированы, различаются по типу, контингенту учащихся, месту расположения, технологиям обучения и другим показателям. Количество выпускников, принявших участие в централизованном тестировании в период с 1998 года по 2005 годы, составило свыше 30000 человек, которые приняли участие в различных видах испытаний: в компьютерном абитуриентском тестировании, абитуриентском тестировании на бланках, итоговой аттестации выпускников младшей школы, 9-х и 11-х классов. Количество выпускников 9-х и 11-х классов, принявших участие в итоговой аттестации за этот же период, составило около 10000 человек.

Научная новизна исследования:

1. Разработан на основе кластерного анализа способ классификации исследуемой совокупности, который обеспечивает выделение однородных групп для оценки качества обученности учащихся. Это позволит органам управления образованием применять единые управляющие воздействия для выделенных кластеров.

2. Разработана система показателей оценки качества обученности и выявлено влияние показателей на результаты мониторинговых исследований.

Теоретическая значимость исследования:

1. Функциональная модель системы мониторинга качества обученности учащихся, разработанная с использованием СА8Е-технологий, в которой структурированы все информационные ресурсы, управляющие воздействия, исполнительные механизмы и педагогические процессы в их взаимодействии.

2. Система показателей с исследованием влияния каждого показателя и групп показателей на качество обученности учащихся методами многофакторного анализа.

3. Технология педагогической интерпретации результатов мониторинговых исследований качества обученности, базирующаяся на математико-статистических методах обработки экспериментальных данных.

Практическая значимость исследования заключается в использовании результатов мониторинга качества обученности при принятии управленческих решений на уровне органов управления образованием, администраций общеобразовательных учреждений, методических объединений учителей-предметников, при разработке практических рекомендаций по коррекции учебного процесса в общеобразовательных учреждениях.

Достоверность результатов исследования обусловлена теоретическим обоснованием исследуемой проблемы, адекватностью используемых методов поставленной цели исследования, задачам исследования и экспериментальным подтверждением выдвинутой гипотезы.

На защиту выносятся следующие основные положения:

1. Система показателей и способы ее формирования, отражающие степень влияния показателей на качество обученности.

2. Способы формирования выборочной совокупности, основанные на применении кластерного анализа и метода случайной выборки, отвечающие требованию репрезентативности исследуемых педагогических объектов, что позволяет выделять однородные группы и принимать для них одинаковые управленческие решения.

3. Технология педагогической интерпретации экспериментальных данных, для каждого этапа которой определены показатели и математикостатистические методы, обеспечивающие эффективный содержательный анализ результатов педагогической деятельности.

4. Функциональная модель системы мониторинга качества обученности учащихся, отражающая бизнес-процессы образовательного мониторинга и обладающая необходимой полнотой описания, что является основой для разработки информационной среды для проведения мониторинга.

Апробация результатов исследования. Основные положения исследования докладывались и обсуждались на научно-методической конференции «Методологические проблемы контроля качества учебного процесса при переходе к инновационному образованию» (г.Улан-Удэ, 2001), второй Всероссийской научно-практической конференции «Российская школа и Интернет» (г.Санкт-Петербург, 2002), региональной научно-практической конференции «Наука и преподавание дисциплин естественного цикла в образовательных учреждениях» (г.Улан-Удэ, 2002), Всероссийской научно-технической конференции «Теоретические и прикладные вопросы современных информационных технологий» (г.Улан-Удэ, 2005, 2006), Международной научно-методической конференции «Роль инфокоммуникационных технологий в совершенствовании системы управления качеством образования» (г.Санкт-Петербург, 2005), второй Международной конференции «Образование и глобализация» (г.Улан-Удэ, 2006). Материалы исследования использовались при разработке учебных курсов «Компьютерные технологии обучения», «Обработка экспериментальных данных на ЭВМ», «Вычислительная математика» для студентов Восточно-Сибирского государственного технологического университета. Были разработаны методические указания по основам вычислительной математики по теме «Методы обработки экспериментальных данных». Результаты диссертационной работы использовались в работе Кяхтинского РУО Республики Бурятия, что подтверждено актами об использовании результатов диссертации.

Структура диссертации: диссертация состоит из введения, двух глав, заключения, библиографии и приложений.

Заключение диссертации научная статья по теме "Общая педагогика, история педагогики и образования"

2.5 Выводы по второй главе

Сбор и обработка результатов анкетирования в целях формирования системы показателей выявили факторы, которые в наибольшей степени оказывают влияние на качество обученности учащихся общеобразовательных учреждений. Анализ показал, что на качество обученности влияет профессиональная компетентность учителя.

Для качественного анализа результатов деятельности системы общего образования региона разработана технология педагогической интерпретации экспериментальных данных, основанная на применении математико-статистических методов. Разработанная технология педагогической интерпретации экспериментальных данных включает следующие этапы: определение основных статистических показателей выборочных данных, использование кластерного анализа для классификации и получения групп однородных объектов мониторинга, использование корреляционного анализа для формирования системы показателей качества обученности, изучение влияния выявленных факторов на результат образовательной деятельности на основе многофакторного анализа, выделение группы объектов из совокупности экспериментальных данных с использованием дискриминантного анализа, использование множественной регрессии для изучения влияния совокупности факторов на результат образовательной деятельности, содержательный анализ выполнения тестовых заданий по предметам, вариантам, учащимся.

Для реализации разработанной технологии в системе общего образования Республики Бурятия обработаны и проанализированы результаты централизованного тестирования за несколько лет, проведен сравнительный анализ по годам, общеобразовательным учреждениям, кластерам, проведен содержательный анализ результатов выполнения тестов в разрезе вариантов тестов и тестовых заданий. Этот анализ является основой для практических рекомендаций, формулируемых мониторинговой системой для ее пользователей.

Мониторинг качества обученности является сложной системой, для которой характерно наличие большого числа функций, процессов, данных со сложными взаимосвязями между ними. Поэтому для описания и формализации системы мониторинга разработана функциональная модель, имеющая пятиуровневую иерархическую структуру, на входе которой сосредоточены результаты централизованного тестирования. При разработке модели системы мониторинга использованы современные технологии моделирования, что соответствует современному уровню развития информационных технологий, международному и отечественному стандарту в области проектирования технических, экономических и социальных систем. Разработанная модель может служить основой при создании информационной системы мониторинга качества обученности в регионе.

Заключение

В процессе диссертационного исследования получены следующие основные результаты:

1. Исследована проблема качества обученности, и обосновано применение мониторинга как метода педагогического исследования качества обученности, обеспечивающего данными для педагогического прогнозирования, принятия эффективных управленческих решений, направленных на улучшение результатов образовательного процесса, что позволяет утверждать о том, что педагогический мониторинг качества обученности учащихся является одним из необходимых инструментов управления системой общего образования на современном этапе.

2. Показано, что педагогические тесты, являясь одним из распространенных средств измерения уровня обученности учащихся, составляют основу мониторинга для получения объективных результатов, анализ которых дает возможность сравнения качества обучения в различных регионах, различных типах общеобразовательных учреждений внутри региона, а также отслеживать результаты педагогической деятельности и производить коррекцию учебного процесса.

3. Разработана функциональная модель системы мониторинга качества обученности учащихся в региональной системе общего образования, в которой определены: бизнес-процессы, необходимые ресурсы для их выполнения; результаты, получаемые в результате выполнения каждого процесса; исполнители бизнес-процессов; потоки информации, под управлением которых они выполняются. Педагогический мониторинг является сложной системой, содержащей достаточно большое количество функций, процессов, элементов данных и сложные взаимосвязи между ними, а также обладающей значительной временной протяженностью. Функциональная модель, разработанная в виде пространственной иерархии диаграмм, позволила наглядно представить и структурировать работу этой сложной системы.

4. Выявлены и обоснованы показатели качества, влияющие на уровень обученности учащихся. Разработанная система показателей включает основные характеристики отдельных компонентов ресурсного обеспечения общеобразовательного учреждения, и она апробирована при оценивании качества обученности учащихся в ряде районов Республики Бурятия.

5. Изучены и выявлены факторы, влияющие наибольшим образом на результаты учебного процесса.

6. Использованы методы кластерного анализа и случайной выборки для получения выборки из генеральной совокупности для проведения мониторинговых исследований. Оба метода обеспечивают репрезентативность выборочной совокупности.

7. Обоснованы и экспериментально проверены основные статистические показатели и математико-статистические методы применительно к технологии педагогической интерпретации результатов образовательного процесса: математическое ожидание или среднее арифметическое, мода, медиана, дисперсия, среднее квадратическое отклонение, размах вариации, кластерный анализ, факторный анализ, сравнительный анализ, корреляционный анализ, метод множественной регрессии. При этом определены статистические показатели и математико-статистические методы относительно каждого этапа технологии педагогической интерпретации результатов мониторинга.

8. Полученные результаты мониторинговых исследований использованы органами управления образованием для качественного дидактического и содержательного анализа по всем ступеням образовательной вертикали согласно разработанной технологии педагогической интерпретации. Результатами качественного анализа явились выводы, заключения, практические и методические рекомендации, на основе которых принимаются управленческие решения.

В результате проведенной работы можно сделать вывод о том, что цель исследования достигнута, гипотеза подтверждена, поставленные задачи решены. Полученные результаты имеют теоретическую и практическую значимость и могут быть применены в работе системы общего образования с целью повышения качества обученности, а также для составления диагностических тестов по предметам, имеющих неудовлетворительное качество обученности, которое выявлено в процессе мониторинговых исследований. Диагностические тесты позволят в дальнейшем определить структуру знаний учащихся и принять соответствующие управляющие решения по улучшению учебного процесса.

Список литературы диссертации автор научной работы: кандидата педагогических наук, Чимитова, Елена Гендуновна, Улан-Удэ

1. Анастази, А. Психологическое тестирование. Текст. / А. Анастази В 2 кн. - М.: Педагогика. 1982.

2. Аванесов, B.C. Основы научной организации педагогического контроля в высшей школе. Текст. / B.C. Аванесов М.: Исслед. Центр. 1989. -167с.

3. Аванесов, B.C. Теоретические основы разработки заданий в тестовой форме. Текст. / B.C. Аванесов М.: МИСиС. 1989. - 167с.

4. Аванесов, B.C. Контроль за знаниями студентов: метод валидных тестов. Текст. / B.C. Аванесов М. 1983.

5. Аванесов, B.C. Математические модели педагогического измерения. Текст. / B.C. Аванесов М. 1994. - 26с.

6. Аванесов, B.C. Научные проблемы тестового контроля знаний. Текст. / B.C. Аванесов М.: Исследовательский центр проблем качества подготовки специалистов. 1994. - 123с.

7. Актуальные проблемы педагогики и психологии высшей военной школы. Текст. / Под.ред. А.В.Барабанщикова. М.: ВПА, 1980. 21с.

8. Александров, В. Анализ данных на ЭВМ (на примере системы СИТО). Текст. / В.Александров, А.И.Алексеев, Н.Д.Горский М.: Финансы и статистика. 1990

9. Арефьев, И.П. Профориентация: ученик; учитель; вуз. Текст. / И.П. Арефьев//Педагогика. №3. 1995. с.65-69.

10. Армутлийска, Д. Количественные оценки успеваемости. Текст. /

11. Д.Армутлийска// Советская педагогика. № 10. 1986, с.49-52.

12. Архангельский, С.И. Учебный процесс в высшей школе, его закономерные основы и методы. Текст. / С.И. Архангельский М.: Высш. шк. 1980.-368 с.

13. Асмолов, А.Г. Нестандартное образование в изменяющемся мире: культурно-историческая перспектива. Текст. / А.Г. Асмолов, М.С. Нырова Новгород. 1993. - 24с.

14. Бабанский, Ю.К. Интенсификация процесса обучения. Текст. / Ю.К. Бабанский М.: Знание. 1987. - 78 с.

15. Бабанский, Ю.К. Педагогика: учеб. пособие для студентов пед. ин-тов. Под ред. Ю.К. Бабанского. 2-е изд., доп. и перераб. Текст. / Ю.К. Бабанский, В.А. Сластенин, H.A. Сорокин и др. - М. Просвещение. 1988.

16. Бабанский, Ю.К. Проблемы повышения эффективности педагогических исследований: (Дидактический аспект). Текст. / Ю.К. Бабанский М.: Педагогика. 1982.

17. Бершадский, М.Е. Дидактические и психологические основания образовательной технологии. Текст. / М.Е. Бершадский, В.В. Гузеев -М.: Центр "Педагогический поиск". 2003. 134 с.

18. Беспалова, P.JI. Статистика: Теория и практика: Учебное пособие. Текст.

19. Р.Л. Беспалова Тула: Изд-во Тул. гос. пед. ун-та им. Л.Н.Толстого. 1999.

20. Беспалько, В.П. Основы теории педагогических систем. Текст. / В.П. Беспалько Воронеж: Изд-во ВГУ. 1977. - 304 с.

21. Беспалько, В.П. Педагогика и прогрессивная технология обучения. Текст. / В.П. Беспалько М.: Изд-во института профобразования мин-ва обр-ия. 1995.-336 с.

22. Беспалько, В.П. Программированное обучение (дидактические основы). Текст. /В.П. Беспалько-М.: Высш.шк., 1970.

23. Беспалько, В.П. Слагаемые педагогической технологии. Текст. / В.П. Беспалько М.: Педагогика. - 1989. - 192 с.

24. Беспалько, В.П. Стандартизация образования: основные идеи и понятия. Текст. / В.П. Беспалько // Педагогика. 1993. №5. М. с.16-25.

25. Беспалько, В.П., Системно-методическое обеспечение учебно-воспитательного процесса подготовки специалистов: Учеб.-метод. пособие. Текст. / В.П. Беспалько, Ю.Г. Татур М.: Высш.шк. 1989. -144 с.

26. Бешелев, С.Д., Гуревич Ф.Г. Математико-статистические методы экспертных оценок. Текст. / С.Д. Бешелев, Ф.Г. Гуревич М.: «Статистика». 1980.-263с.

27. Бильгаева, Н.Ц. Некоторые подходы к управлению качеством образования в образовательных учреждениях Республики Бурятия. Текст. / Н.Ц. Бильгаева, Е.Д. Чимитова, Р.Г Хулукшинов Улан-Удэ: Издательство ВСГТУ. 2003. - 38с.

28. Бильгаева, Н.Ц. Централизованное тестирование и проблемы качества обучения в общеобразовательной школе. Сборник научно-методических статей. Текст. / Н.Ц. Бильгаева Улан-Удэ: Издательство ВСГТУ. 2002.- 181-186 с.

29. Битинас, Б.П. Многомерный анализ в педагогике и педагогической психологии. Текст. / Б.П. Битинас Вильнюс. 1971. -347с.

30. Битинас, Б.П. Педагогическая диагностика: Сущность, функции, перспективы. Текст. / Б.П. Битинас, Катаева Л.И // Педагогика. N2. 1993. с.10-15.

31. Бобков, Н.Е. Контроль за усвоением учебного материала. Текст. / Н.Е. Бобков, Л.И Катаева // Советская педагогика. N9. 1984. с.53-56; N8. 1985. с.82-86.

32. Боровиков, В. Statistical искусство анализа данных на компьютере. Для профессионалов. Текст. / В.Боровиков СПб.:Питер. 2001.

33. Бурмистров, A.B. Педагогические измерения в форме тестирования. Электронный ресурс. / С.А. Ворошилов, Г.Ю.Науменко, А.Ю. Трынин, С.С. Хмелев, O.A. Шаманова, http://www.quality21.ru/index.php7module =subjects tezis&func =printpage&pageid=417&scope=all.

34. Введение в научное исследование по педагогике: Учеб. пособие для студентов пед. ин-тов. Под ред. В.И. Журавлева. Текст. / М.: Просвещение. 1988.

35. Вендров, A.M. Проектирование программного обеспечения экономических информационных систем: Учебник. Текст. / A.M. Вендров М.: Финансы и статистика. 2000. - 352 с.

36. Вройенстийн, А.И. Внешняя оценка качества образования: некоторые вопросы и ответы. Текст. / А.И. Вройенстийн // Высшее образование в Европе. T.XVII. -№3. 1993. с.66-88.

37. Гальперин, П.Я. О психологических основах программированного обучения. Вып.1У. Текст. / П.Я. Гальперин-М. 1965.

38. Гетманская, И.А. Педагогические условия развития профессиональной компетентности инженерно-педагогических работников. Автореферат дисс. на соискание ученой степени кандидата педагогических наук. Текст. / И.А. Гетманская Иркутск. 2006.

39. Глас, Дж. Статистические методы в педагогике и психологии. Текст. / Дж. Глас, Дж. Стэнли М.: Прогресс. 1976. - 495 с.

40. Гмурман, В.Е. Теория вероятностей и математическая статистика: Учеб.

41. Пособие для вузов/- 9-е изд. Текст. / В.Е. Гмурман. М.:Высш. шк., 2003.-479 е.: ил.

42. Горбатов, Д.С. Тестирование учебных достижений: критериально-ориентированный подход. Текст. / Д.С. Горбатов // Педагогика. №4. 1995. с.105-111.

43. Грабарь, М.И. Факторный анализ контрольных работ. Текст. / М.И. Грабарь // Советская педагогика. N3. 1991. с.49-55.

44. Грабарь, М.И. Применение математической статистики в педагогических исследованиях. Непараметрические методы. Текст. / М.И. Грабарь, К.А. Краснянская М. 1977.

45. Граничина, О.А. Статистические методы психолого-педагогических исследований: Учебное пособие. Текст. / О.А. Граничина СПб.: Изд-во РГПУ им. А.И.Герцена. 2002.-48 е.; ил.

46. Громыко, Ю. Концепция прогноза и развития образования до 2015 г. Текст. / Ю. Громыко и др. // Народное образование. №1. 1993. с. 17-27.

47. Гузаиров М.Б. Проектирование региональной системы мониторинга качества общего образования. Текст. / М.Б. Гузаиров, Т.Г. Михалева -М.: Исследовательский центр проблем качества подготовки специалистов. 1998. 28 с.

48. Давыдов, В.П. Воспитание курсантов высших пограничных училищ в процессе обучения: Учебное пособие. Текст. / В.П. Давыдов М. МВПККУ. 1988.-275 с.

49. Данилова, С.Д. Модель данных компонента «Управление учебной деятельностью». Текст. / С.Д. Данилова // Сб. науч. тр. Серия: Технические науки. Вып.7. Т. 1. -Улан-Удэ: ВСГТУ. 2000. - с. 9-16.

50. Данилова, С.Д. Система удаленного тестирования и контроля знаний учащихся Текст. / С.Д. Данилова, Ц.Ц. Шайдоров // Российская школа и Интернет: Сборник трудов Второй Всероссийской научно-практической конференции. СПб. - 2002. с.20-21.

51. Даринский, А.В. Региональный компонент содержания образования. Текст. / А.В. Даринский //Педагогика N1. 1996. с.18-20.

52. Денисова, Л.Г. Об итоговом контроле обученности иностранным языкам. Текст. / Л.Г. Денисова, В.Н. Симкин // Ин. язык в школе. N2. 1995.

53. Дормидонова, А.Д. Диагностика обученности. Электронный ресурс. -http://www.socspb.ru/edu/spetialist/publication/doc4721/

54. Дубров, A.M. Многомерные статистические методы: Учебник. Текст. / A.M. Дубров, B.C. Мхитарян, Л.И. Трошин М. Финансы и статистика. 1998. -352с.:ил.

55. Дуброва, Т. А. Факторный анализ с использованием ППП «STATISTICA». Учебное пособие / Московский государственный университет экономики, статистики и информатики. Текст. / Т.А. Дуброва, Д.Э. Павлов, Н.П. Осипова-М. 2002.

56. Дуплик, С.В. Классификация моделей тестирования. Электронныйресурс. / C.B. Дуплик // Интернет-форум «Проблемы и перспективы открытого образования». http://www.tisbi.ru/science/forum/default.php?p=l&s=5.

57. EXCEL 7.0.: общие и экономические расчеты. Текст. / В.М. Матюшок -М. 1997.

58. Ермолаев, О.Ю. Математическая статистика для психологов: Учебник. 2-е изд., исп. Текст. / О.Ю. Ермолаев. М. Московский психолого-социальный институт: Флинта. 2003.-336 с.

59. Ефремова, Н.Ф. Мониторинг качества подготовки учащихся по результатам централизованного тестирования. Текст. / Н.Ф. Ефремова -Вестник ДГТУ. 2001. т. 1. №1(7).

60. Загвязинский, В.И. Методология и методика дидактического исследования. Текст. / В.И. Загвязинский М.: Педагогика, 1982.

61. Закон Российской Федерации «Об образовании» (редакция 13.01.96) Текст.

62. Ингенкамп, К. Педагогическая диагностика. Текст. / К. Ингенкамп М.: Педагогика. 1991.-239 с.

63. К работе над единой городской научно-методической темой. // Образовательный мониторинг и стандарты: Метод.рекомендации. Текст. Челябинск. 1994. - 45 с.

64. Каган, М.С. Системный подход и гуманитарное знание. Текст. / М.С. Каган-Л.: ЛГУ. 1991.-384 с.

65. Казаринов, A.C. Методы и модели экспериментальной педагогики -Текст. / A.C. Казаринов Глазов: Глазовский государственныйпедагогический институт. 1997. 89с.

66. Касьяненко, М.Д. Комплексный контроль учебной деятельности. М.Д. Касьяненко // Советская педагогика. N 10. 1986. с.46-49.

67. Качество знаний учащихся и пути его совершенствования. / Под ред. М.Н.Скаткина, В.В.Краевского. Текст. -М.: Педагогика. 1978.-208 с.

68. Кинелев, C.B. Философско-социологические аспекты обеспечения качества образования в регионе. 8 симпозиум: квалиметрия человека и образования. ЧастьШ. Квалитативное образование и квалитативные технологии. Текст. / C.B. Кинелев-М. 1999.

69. Кириличев, Б.В. Фундаментальный подход к созданию системы моделей оценивания результатов тестирования в интеллектуальных компьютерных обучающих комплексах. // Сб. научных трудов МГИУ. Текст. / Б.В. Кириличев, Л.А. Широков М.: МГИУ. 1996. - с. 166-171.

70. Кларин, М.В. Инновации в мировой педагогике. Текст. / М.В. Кларин -Рига: НПЦ Эксперимент. 1995. 176 с.

71. Кларин, М.В. Инновационные модели обучения в зарубежных педагогических поисках. Текст. / М.В. Кларин М., 1994.

72. Кобардин, О.Ф. Тестирование знаний и умений учащихся. Текст. / О.Ф. Кобардин, А.Н. Земляков // Советская педагогика. N12. 1991. -с.26-33.

73. Коджаспирова, Г.М. Педагогический словарь: для студентов высших и сред.пед.учеб.заведений. 2 издание. Текст. / Г.М.Коджаспирова,

74. A.Ю.Коджаспиров-М.: Изд.центр «Академия». 2005. 176 с.

75. Кокрен, У. Методы выборочного исследования. Пер. с англ. И.М.Сонина. Под ред. А.Г.Волкова. Текст. / У. Кокрен М. Статистика. 1976.-440 с.

76. Компьютерная технология обучения. Словарь-справочник /Под ред.

77. B.И.Гриценко, А.М.Довгяло, А.Я.Савельева. Текст. Киев: Наукова думка. 1992.-652 с.

78. Конаржевский, Ю.А. Совершенствование функций внутришкольногоуправления. Текст. / Ю.А. Конаржевский Челябинск: ЧГПИ. 1988. -133 с.

79. Крамер, Г. Математические методы статистики. Текст. / Г. М. Крамер -М. 1975.

80. Ксензова, Г.Ю. Оценочная деятельность учителя. Уч-мет. пос. Текст. / Г.Ю. Ксензова М.: Пед. общество России. 1999. - 28с.

81. Кулаичев, А.П. Методы и средства анализа данных в среде Windows. Изд. 3-е, перераб. и доп. Текст. / А.П. Кулаичев М: ИнКо. 1999.

82. Кыверялг, А.А. Методы исследований в профессиональной педагогике. Текст. / А.А. Кыверялг Таллин. Валгус. 1980.

83. Лернер, И.Я. Дидактические основы методов обучения. Текст. / И.Я. Лернер М.: Педагогика. 1981.

84. Лернер, И.Я. Задачи и содержание общего и политехнического образования. // Дидактика средней школы: Некоторые проблемы современной дидактики: Учебное пособие. Текст. / И.Я. Лернер, М.Н. Скаткин М.: Просвещение. 1982. - с.90-129.

85. Лернер, И.Я. Качества знаний учащихся. Какими они должны быть? Текст. / И.Я. Лернер -М.: Знания. 1978. 112 с.

86. Луцевич, Л.В. Вопросы эффективного использования ЭВМ в учебном процессе // Автоматизированные системы научных исследований обучения и управления в вузах. Межвузовский сборник научных трудов. Текст. / Л.В. Луцевич Новосибирск: НГУ. 1986. - с. 33-39.

87. Майоров, А.Н. Мониторинг в образовании. Текст. / А.Н. Майоров -Спб.: Издательство «Образование-Культура». 1998. 344 с.

88. Майоров, А.Н. Теория и практика создания тестов для системы образования. Текст. / А.Н. Майоров М.:, «Интеллект-центр». 2002. -296 с.

89. Майоров, А.Н. Элементы педагогического мониторинга и региональных стандартов в управлении. Текст. / А.Н. Майоров и др. СПб. 1992. - 79 с.

90. Маклаков, C.B. CASE-средства разработки информационных систем BPWin&ERWin. Текст. / C.B. Маклаков М.: ДИАЛОГ-МИФИ. 1999. -с. 256.

91. Малькова, З.А. Качество образования в массовой школе. Текст. / З.А. Малькова// Перспективы: вопросы образования. №1. 1990. с.25-37.

92. Машбиц, Е.И. Компьютеризация обучения: Проблемы и перспективы. Текст. / Е.И. Машбиц М.: Знание. 1986. - 80 с.

93. Мелник, М. Основы прикладной статистики /Пер. с англ. Текст. / М. Мелник-М. 1983.

94. Мельникова, М.Б. Теория и практика конструирования педагогических тестов. Текст. / М.Б. Мельникова М. 2002.

95. Методы системного педагогического исследования. Учебное пособие. /Под ред. Проф. Н.В. Кузьминой. Текст. / Ленинград, Изд-во Ленинградского ун-та. 1980.

96. Методы системного педагогического исследования: Учебное пособие. Текст. / М.: Народное образование. 2002.

97. Михайлычев, Е.А. Дидактическая тестология. Текст. / Е.А. Михайлычев М.: Народное образование. 2001. - 432с.

98. Михеев, В.И. Моделирование и методы теории измерений в педагогике. Текст. / В.И. Михеев М. Высшая школа. 1987. - 198с.

99. Моисеев, В.Б. Принципы формирования образовательной квалиметрии. X симпозиум: квалиметрия в образовании. Методология и практика. Книга 2. Текст. / В.Б.Моисеев, Л.Н.Пятирублевый, К.Р.Таранцева -Москва. 2002.

100. Монахов, В.М. Технологические основы проектирования и конструирования учебного процесса. Текст. / В.М. Монахов -Волгоград: Перемена. 1995.

101. Мониторинг и контроль качества образования: развитие методологии и опыт. Книга З/Материалы X Симпозиума «Квалиметрия в образовании: методология и практика». Под науч. ред. д.т.н., профессора

102. Н.А.Селезневой и д.филос. и экон. наук А.И.Субетто. Текст. / М.: Исследовательский центр проблем качества подготовки специалистов, 2002.-335 с.

103. Наин, А.Я. Рефлексивное управление образовательным учреждением: теоретические основы/Монография. Текст. / А.Я. Наин Шадринск: Изд-во ПОИсеть. 1999. - с. 117-118.

104. Нардюжев, В.И. Модели и алгоритмы информационно-вычислительной системы компьютерного тестирования. Текст. / В.И.Нардюжев, И.В.Нар дюжев -М. 2000.

105. Нейман, Ю. Вводный курс теории вероятностей и математической статистики. Текст. / Ю. Нейман М: Изд-во Наука. 1968. - с. 448.

106. Новое качество высшего образования в современной России. Концептуально-программный подход. Под ред. Селезневой H.A., Субетто А.И. Текст. /- М. 1995.

107. Образование города Улан-Удэ в цифрах и фактах. Текст. / Улан-Удэ. 2002. - 78с.

108. Образцов, П.И. Дидактические аспекты эффективного применения компьютерных средств обучения в вузе. Сб.научн.трудов ученых Орловской области. Выпуск № 2. Текст. / Орел: ОрелГТУ. 1996. -с.468-475.

109. Образцов, П.И. Научно-методические подходы к разработке компьютерных педагогических технологий на основе формирования системы динамических образов. Сб.научн. трудов ВИПС. Текст. / П.И.Образцов, С.Н. Шляпцев Орел. 1996. №6.-с.18-21.

110. Общая психодиагностика. Под редакцией Бодалева А.А. Текст. / М.: Изд-во МГУ. 1987.

111. Овакимян, В.О. Опыт применения вероятностной модели обучения. Текст. //Педагогика. 1993. №2. с.24-26.

112. Осипов, Г.В. Методы измерения в социологии. Текст. / Г.В. Осипов, Э.П. Андреев-М.: Наука. 1977.- 183 с.

113. Оценка согласованности мнений экспертов с применением коэффициента конкордации. Электронный ресурс. -http://www.biostat.kiev.ua/konkord.html.

114. Панасюк, В.П. Методика проведения школой самообследования по качеству обеспечиваемого ею образования ./Под научн.ред. А.И.Субетто 3-е изд. Текст. / В.П. Панасюк СПб; М.: Исследовательский центр проблем качества подготовки специалистов. 2000. - 31с.

115. Питишикин-Потанич, В. Контроль знаний учащихся. Текст. / В. Питишикин-Потанич // Народное образование. N3. 1985. с.68-71.

116. Поллард, Дж. Справочник по вычислительным методам статистики /Пер. с англ. Текст. / Дж.Поллард М. 1982.

117. Полонский, В.М. Словарь по образованию и педагогике. Текст. / В.М. Полонский М.: Высшая школа. 2004. - 512 с.

118. Попов, В.Г. Мониторинг развития региональной системы образования Текст. / В.Г. Попов, П.В.Голубков // Ж.Стандарты и мониторинг в образовании. №2. 2002. с.32-45.

119. Психолого-педагогический словарь для учителей и руководителей общеобразовательных учреждений. Текст. Ростов-н/Д. 1998. - 446с.

120. Пфанцагль, И. Теория измерений. Текст. / Пфанцагль И. - М: Мир. 1976.- 166с.

121. Развитие системы тестирования в России. Тезисы докладов 3 Всероссийской научно-методической конференции / Под. Ред. Л.С. Гребнева. Текст. М.: Центр тестирования МО РФ. 2001.

122. Репин, С.А. Опыт реализации региональной программы управленияобразованием. Текст. / С.А. Репин // Педагогика. №6. 1995. с.32-36.

123. Рисе, B.JI. Контроль знаний учащихся. Текст. / B.JI. Рисе М. 1982.

124. Рыжаков, М. Стандарты образования и современная российская школа. Текст. / М. Рыжаков // Народное образование. №8-9. 1995. с.8.

125. Садков В.Г., Силаева O.A., Брехова Т.Б. Система управления качеством высшего образования в регионах России. Электронный ресурс. -hli))://quali!.v.ei!r).ni/MÄTEKIALY5/ satlkov.hl.mt

126. Севрук, А.И. Информационное обеспечение управления качеством общего образования. Автореферат дисс. на соискание ученой степени доктора педагогических наук. Текст. / А.И. Севрук Тюмень. 2004.

127. Севрук, А.И. Централизованное тестирование в системе областного образовательного мониторинга // Тезисы материалов Всерос. конференции «Развитие системы тестирования в России». Часть 1. Текст. / А.И. Севрук-М.: Прометей. 1999.

128. Селезнев, Н.В. Роль педагогической оценки. Текст. / Н.В. Селезнев // Советская педагогика. N10. 1986. с.52-55.

129. Селезнева, H.A. Качество высшего образования как объект системного исследования. Лекция-доклад. Текст. / Н.А.Селезнева М.: Исследовательский центр проблем качества подготовки специалистов. Изд. 4-е, стереотипное. 2004. - 95 с.

130. Серебрякова, JI.A. Мониторинг качества общего среднего образования в региональной образовательной системе. Автореферат дисс. на соискание ученой степени кандидата педагогических наук. Текст. / JI.A. Серебрякова Великий Новгород. 2000.

131. Сидоренко, Е.В. Методы математической обработки в психологии. Текст. / Е.В. Сидоренко Спб.: ООО «Речь», 2000. - 350 е., ил.

132. Симонов, В.П. Образовательный минимум: Измерения, достоверность, надежность. Текст. / В.П. Симонов, Е.Г. Черненко // Педагогика. N4. 1994. -с.30-33.

133. Симонов, В.П. Педагогический менеджмент. Учебное пособие. Текст. /

134. В.П. Симонов-М.:РПА. 1997.

135. Система образования города. Информационно-аналитический справочник. Текст. Улан-Удэ. 2003. - 60с.

136. Скаткин, М.Н. Проблемы современной дидактики. Текст. / М.Н. Скаткин М.: Педагогика. - 1980. - 96с.

137. Сластенин, В.А. Общая педагогика: Учебное пособие для студ. высш. учеб. заведений. Под ред.В.А.Сластенина: В 2 ч. Текст. / В.А. Сластенин, И.Ф. Исаев, Е.Н. Шиянов М.: Гуманит. изд. центр ВЛАДОС. 2002.

138. Структурная схема мониторинга. Электронный ресурс. -http://iro.hse.ги/гигаЬ/соп1еп1рЬр?С= 103&РНР8Е55ГО=5Ь£2<Ш7Ь5с2707092885ас34503888

139. Стрюков, Т.А. Стандартизация уровня подготовки и оценивания знаний учащихся. Текст. / Т.А. Стрюков // Педагогика. №6. 1995. с. 12-18.

140. Субетто, А.И. Квалитология образования (основания и синтез). Текст. / А.И. Субетто [Текст] / А.И. Субетто СПб., М.: Исследовательский центр проблем качества подготовки специалистов. 2000. - 220с.

141. Субетто, А.И. Технологии сбора и обработки информации в процессе мониторинга качества образования (на федеральном уровне). Текст. / А.И. Субетто СПб.-М.: Исследовательский центр проблем качества подготовки специалистов. 2000.

142. Суппез, П. Основы теории измерений, Текст. / П. Суппез, Дж. Зиасс -М: Мир. 1987.

143. Сучкова, Л.А. Централизованное тестирование как средство экспертизы качества образования. Автореферат дисс. на соискание ученой степени кандидата педагогических наук. Текст. / Л.А. Сучкова Ростов-на-Дону. 2000.

144. Талызина, Н.Ф. Психолого-педагогические основы автоматизации учебного процесса / Психолого-педагогические и психофизиологические проблемы компьютерного обучения // Сб.научн.тр. Текст. / Н.Ф.

145. Талызина М.: Изд-во АПН СССР, МГУ. 1985. - с. 15-26.

146. Талызина, Н.Ф. Теоретические проблемы программированного обучения. Текст. / Н.Ф. Талызина -М.: Изд-во МГУ. 1969.

147. Талызина, Н.Ф. Управление процессом усвоения знаний. Текст. / Н.Ф. Талызина М.: Изд-во МГУ. 1975. - 141 с.

148. Татур, А.О. Стандарты и тесты в образовании. Текст. / Б.У.Родионов,

149. A.О. Татур М.: МИФИ. 1995. - 48 с.

150. Тюрин, Ю.Н. Статистический анализ данных на компьютере / Под. ред.

151. B.Э. Фигурнова. Текст. / Ю.М.Тюрин, А.А. Макаров М.: ИНФРА-М. 1998.

152. Управление качеством образования: Практикоориентированная монография и методическое пособие / Под ред.М.М.Поташника. Текст. М.: Педагогическое общество России. 2000. - 448с.

153. Усанов В. Проверка и оценка знаний и умений школьников // Народное образование. N6. 1985. с.74-77; Совершенствовать проверку и оценку знаний учащихся. Текст. / В. Усанов, А. Кузнецова, Э. Красновский // Советская педагогика. N10. 1986.-с.42-46.

154. Харман, Г. Современный факторный анализ. Текст. / Г. Харман М. 1972.

155. Хижняк, О.С. Управление качеством образования как педагогическая проблема. Текст. / О.С. Хижняк, P.M. Феденева, В.Г. Рындак // Завуч. 2001. №5.

156. Хлебников, В.А. Введение в теорию моделирования и параметризации педагогических тестов. Текст. / Ю.М.Нейман, В.А.Хлебников М: Прометей. 2000.-с. 169

157. Хохлова, C.B. Мониторинг качества школьного образования. Автореферат дисс. на соискание ученой степени кандидата педагогических наук. Текст. / C.B. Хохлова Тюмень. 2003.

158. Худоминский, П.В. Управление школой в условиях рынка. Текст. / П.В. Худоминский // Педагогика. №3. 1995. с. 124-126.

159. Челышкова, М. Б. Вопросы организации адаптивного тестового контроля знаний студентов: Тезисы докл. // Школа-семинар "Научные проблемы тестового контроля знаний". Текст. / М.Б. Челышкова М.: Исслед. Центр. 1994.-с. 14-16.

160. Челышкова, М.Б. Применение математических моделей для разработки педагогических тестов. Учебное пособие. Текст. / М.Б. Челышкова -М.: Исследовательский центр. 1995. 48 с.

161. Челышкова, М.Б. Теория и практика конструирования педагогических тестов: Учебное пособие. Текст. / М.Б. Челышкова М.: Исследовательский центр проблем качества подготовки специалистов. 2001.

162. Черепанова, B.C. Экспертные оценки в педагогических исследованиях. Текст. / B.C. Черепанова-М.: Педагогика. 1989.

163. Чимитова, Е.Г. Методы обработки экспериментальных данных. Метод, указ. по курсу "Основы выч. мат.", вып. 4. Текст. / Е.Г.Чимитова, Д.Ш.

164. Ширапов Улан-Удэ: Изд-во ВСГТУ. 1998. - 43с.

165. Шашкина, М.Б. Критерии качества педагогического теста по математике. Текст. / М.Б. Шашкина // Современное образование. 2001. №3.-С. 97-101.

166. Шишкин, И.Ф. Квалиметрия и управление качеством: Учебник для вузов. Текст. / И.Ф. Шишкин, В.М. Станякин -М.: Изд-во ВЗПИ. 1992.

167. Шишов, С.Е. Мониторинг качества образования в школе. Текст. / С.Е.Шишов, В.А. Кальней -М.: Педагогическое общество России. 1999. 354 е., приложения.

168. Шкабара, И.Е. Роль аналитической деятельности в педагогическом мониторинге. Текст. / И.Е. Шкабара // Ж.Стандарты и мониторинг в образовании. №1. 2004. с.34-37.

169. Школа как системообразующий фактор устойчивого развития сельского сообщества. Материалы республиканской научно-практическойконференции. 4.2. Текст. / Улан-Удэ: Издательство «Бэлиг». 2004. -64с.

170. Шмелев, А.Г. Многомерный статистический анализ межкультурных и дифференциальных педагогических исследований. //Статистические методы в общественных науках. Сборник обзоров. Текст. / А.Г. Шмелев -М. 1982. с. 63-96.

171. Шолохович, В.Ф. Дидактические основы информационных технологий обучения в образовательных учреждениях: Автореф. дис. .док. пед. наук. Текст. / В.Ф. Шолохович Екатеринбург: УГППУ. 1995. - 45 с.

172. Электронный учебник StatSoft. Электронный ресурс. -http: //www, statsoft .ru/home/textbook/

173. Энциклопедия профессионального образования: в 3-х т./Под ред. С.Л.Батышева. Текст. АПО. 1999.

174. Якиманская, И.С. Личностно-ориентированное обучение в современной школе М.: Сентябрь, 2000. - 110 е.; Технология личностно-ориентированного образования. Текст. / И.С. Якиманская - М.: Сентябрь. 2000.- 176 с.

175. Мижериков, В. А. Психолого-педагогический словарь для учителей и руководителей общеобразовательных учреждений. Текст. / В.А.Мижериков Феникс. 1998. - 544с.