автореферат и диссертация по педагогике 13.00.01 для написания научной статьи или работы на тему: Внутривузовская диагностика качества обучения на основе автоматизированной экспертной системы

Автореферат диссертации по теме "Внутривузовская диагностика качества обучения на основе автоматизированной экспертной системы"

□03 1711Ю На правах рукописи

Левина Елена Юрьевна

ВНУТРИВУЗОВСКАЯ ДИАГНОСТИКА

КАЧЕСТВА ОБУЧЕНИЯ НА ОСНОВЕ АВТОМАТИЗИРОВАННОЙ ЭКСПЕРТНОЙ СИСТЕМЫ

13.00.01 - общая педагогика, история педагогики и образования

АВТОРЕФЕРАТ

диссертации на соискание ученой степени кандидата педагогических наук

О 5 кюн 2008

Казань-2008

003171110

Работа выполнена в лаборатории естественно-математической и общепрофессиональной подготовки Института педагогики и психологии профессионального образования Российской академии образования

Научные руководители:

доктор технических наук, профессор Белавин Владимир Алексеевич

кандидат педагогических наук, доцент Щербаков Виктор Степанович

Официальные оппоненты: доктор педагогических наук, профессор

Журбенко Лариса Никитична

кандидат педагогических наук, доцент Голышев Игорь Геннадьевич

Ведущая организация: Российский государственный

профессионально-педагогический университет

Защита состоится « Z У » июня 2008 года в 11 часов на заседании диссертационного совета Д 008 012.01 по защите диссертаций на соискание ученой степени доктора педагогических наук и доктора психологических наук при Инсппуге педагогики и психологии профессионального образования РАО по адресу. 420039, г. Казань, ул. Исаева, д. 12.

С диссертацией можно ознакомиться в библиотеке ИПП ПО РАО. Электронная версия автореферата размещена на официальном сайте Института педагогики и психологии профессионального образования РАО «23» мая: http://www ken ru/tat_ru/science/ispo_rao

Автореферат разослан «23» мая 2008 года.

Ученый секретарь L

диссертационного совета /I/ /у А Р. Масалимова

ОБЩАЯ ХАРАКТЕРИСТИКА РАБОТЫ

Актуальность исследования. За последнее десятилетие высшее профессиональное образование в России приобрело широкомасштабный характер, в связи с чем остро встал вопрос об обеспечении качества обучения. Качество обучения как научно-теоретическая проблема включает в себя экономические, социальные, познавательные, культурные аспекты образования и является интегральной характеристикой образовательной деятельности и ее результатов. Для предоставления гарантий качества во всех сферах деятельности вуза, в соответствии с предъявляемыми требованиями к результату обучения со стороны потребителей необходимо наличие современных систем управления качеством

Управление развитием образования йак приоритетное направление выделяет создание системы внутривузовского мониторинга с охватом всех его объектов и различных измерительных средств, отслеживающей совокупность характеристик педагогических технологий Ратификация Болонского соглашения, международные требования соответствия общеобразовательному стандарту ISO 9000 и Концепции модернизации российского образования ставят перед системой диагностики учебного процесса в высших учебных заведениях проблему выработки таких показателей (индикаторов) качества, которые отражали бы не только достигнутый уровень знаний обучаемых, но и параметры использования технологий обучения и контроля

Информационный поток данных оценки знаний, его множественная структурированность, обусловили необходимость разработки нового аппарата педагогических измерений, который обеспечил бы выявление несоответствий, прогнозирование результатов, оптимизацию задач мониторинга, то есть технологию алгоритма диагностики качества высшего профессионального образования с количественной оценкой полученных результатов на каждом этапе

Концептуальные основы качества образования сформулированы в правительственных программах, направленных на реформирование образовательной системы и призванных повысить качество и эффективность образования, это «Концепция модернизации образования России до 2010 п>, федеральная целевая программа «Элеиронная Россия 2002 -2010го>, федеральная целевая программа развития образования щ2006 -2010 гг

Методологические подхода к мониторингу высшего образования с охватом всех «объектов мониторинга» и различных измерительных средств разработаны А И Субетго, В В Чекмаревым в

конце 90-х годов в «Концепции 'мониторинга качества ВПО», где был проведен анализ существующих показателей качества, действующих оценочных систем и существующих статистических систем учета данных мониторинга Исследование вопросов мониторинга качества учебной деятельности и анализ результатов диагностики знаний осуществляются в работах В С Аванесова, С Е Шилова, А Ю Александрова, Л В Колясниковой, О И Федоршцевой идр

Последнее десятилетие характеризуется развитием идеи глобальной информатизации, как необходимого признака прогресса, применение информационных технологий в педагогическом процессе для решения задач оптимизации и повышения эффективности образовательного процесса проводилось Ю К. Бабанским, В П Беспалько, Г В Ившиной, В С Ильиным, ГЛ. Кириловой, В.В Краевским, Е И. Машбиц.

Однако, несмотря на наличие научных работ по проблемам мониторинга, диагностики качества обучения и использования информационных средств в этой области, результативный и стандартизированный механизм измерения и оценки качества обучения, в том числе, образовательных программ, методов и результатов обучения недостаточно разработан в российской системе образования Отсутствие объективных норм уровня образовательной деятельности приводит к тому, что существующая оценка качества объектов образовательной системы представляет собой недостаточный индикатор для принятия соответствующих управленческих решений Кроме того, слабо отражены возможности использования информационно-технических средств и математических методов в работе систем управления качеством образовательной деятельности Корректная оценка качественных показателей и их анализ возможны лишь на основе квалиметрического подхода, который позволит от нечетких и зачастую субъективных оценок перейти к математически обоснованным, объективным выводам.

Таким образом, анализ научной литературы и результатов теоретических исследований позволил выявить противоречия

- между необходимостью обеспечения гарантированного вузом качества обучения и неэффективностью совокупности применяемых методов диагностики и оценки качества образовательного процесса

- между качественным характером оценивания и необходимостью измерения количественных показателей качества обучения для привлечения объективных математических методов обработки и анализа данных

Выявленные противоречия обусловили проблему исследования' каковы научная основа и система диагностики качества

обучения на основе информационных средств и математических методов

Цель исследования заключается в разработке внутривузовской системы диагностики качества обучения на основе информационных средств и математических методов

Объект исследования: диагностика качества учебного процесса

в вузе.

Предмет исследования: структурно-функциональная модель внутривузовской диагностики качества обучения на основе информационных и математических методов

В основу исследования положена гипотеза: качество профессионального обучения в вузе может быть повышено значительно, если при организации внутривузовской диагностики качества обучения на основе автоматизированной экспертной системы будут системно реализованы функции

- сбора данных текущего и итогового контроля знаний и их хранения в базе данных,

- управления базами данных для осуществления процедур исследования и анализа статистики результатов учебного процесса,

- определения значимых показателей качества обучения, отражающих уровень усвоенных знаний и параметры преподавания учебной дисциплины,

- оценивания показателей качества обучения в соответствии с системой математических методов,

- выработки рекомендаций для принятия управленческих решений по обеспечению качества образования.

В соответствии с целью исследования и гипотезой были выдвинуты следующие задачи

1) Провести анализ состояния теории, практики и проблем диагностики качества обучения в вузе,

2) Разработать концепцию системы диагностики качества обучения в вузе на основе автоматизированной экспертной системы,

3) Теоретически разработать и практически реализовать индикативные показатели качества обучения и методы их оценки,

4) Экспериментально показать эффективность разработки методов внутривузовской диагностики качества обучения

Теоретико-методологическую основу исследования

составили работы отечественных и зарубежных авторов, касающиеся вопросов оценки качества обучения, мониторинга образования,

квалиметрических и математических методов диагностики качества образовательной деятельности вуза

Переход к мировым стандартам качества образования (ISO 9000) инициировал разработку положений методологической базы системы управления качества обучения в вузе (В В Бойцов, А В Гличев, А А Азгальдов, В.Я. Белобрашн, Г.В. Мухаметзянова, НИ Селезнева и др) Процесс обучения перечисленными авторами рассматривается как технология, включающая в себя приемы его оптимизации и управляемости для повышения его эффективности (В П Беспалько, Н Ф Талызина)

Особенности применения методов математической статистики в педагогических исследованиях и способов педагогических измерений и диагностики рассматривалась в работах В С Аванесова, А И Орлова, И Д Рудинского и др

Инновационный подход к организации информационных ресурсов и технологий поддержки учебного процесса применен в работах В П Беспалько, Г И Ибрагимова, Г К Селевко, В И Соддаткина, МА Чошанова

Современные исследования в области математического моделирования тестирования знаний и выявления реального уровня обученности студентов представлены в исследованиях В Б Моисеева, JIГ Пятирублевого, К Р Таранцевой, С Д Ионе, Н И Лимановой, ИИ Павловой, АВ Одиноковаидр

Для решения поставленных задач использовались следующие методы исследования- системный анализ психолого-педагогической литературы, учебно-программной документации, моделирование и дидактическое тестирование, наблюдение, анализ результатов самостоятельных, проект но-конструктивных работ студентов, итоги сдачи экзаменов, проверка остаточных знаний, методы анализа педагогических явлений и статистической обработки экспериментальных педагогических данных, методика организации баз данных контроля знаний, методика выборочного контроля качества, численные методы математического моделирования и способы имитационного моделирования на ЭВМ

Экспериментальной базой послужили статистические и оперативные данные текущего и итогового контроля знаний студентов вузов различного профиля ТГГПУ (Татарский государственный гуманитарный педагогический университет), РГТУ (Российский государственный гуманитарный университет), КГТУ (Казанский государственный технический университет), КГТУ (Казанский государственный технологический университет), КГУ (Казанский

государственный университет), КГЭУ (Казанский государственный энергетический университет).

Этапы исследования.

Первый этап (2003-2005гг.) - поисковый и диагностический Изучались вопросы диагностики и оценивания качества обучения, проблемы модернизации качества высшего профессионального образования, сложившаяся практика проведения внутривузовского мониторинга, квалиметрические подходы к оценке качества обучения, определялись и уточнялись возможные показатели качества образовательной деятельности, осуществлялось накопление экспериментальных данных

Второй этап (2005-2006гг ) - разработка теоретической базы, квалиметрического аппарата, адаптация математических методов для организации внутривузовской диагностики качества обучения на базе автоматизированной экспертной системы.

Третий этап (2006-2008гг.) - создание целостной системы диагностики качества обучения для решения некоторых задач оценки и повышения качества образовательной деятельности преподавателей и студентов Произведет апробация, экспериментальное внедрение и обобщение результатов исследования.

Научная новизна исследования состоит в том, что

- Определена роль и обозначено место внутривузовской автоматизированной системы диагностики качества обучения в управлении качеством образования в вузе, как средства обнаружения дефектов образовательной деятельности в вузе, осуществляющее стандартизацию качества обучения посредством мониторинга образовательного процесса и анализа признаков, характеризующих наличие отклонений в обучении

- Разработан способ реализации индикативных критериев качества обучения основанного на данных статистического наблюдения, оценки образовательных достижений, обработки результатов контроля знаний посредством совокупности методов математической статистики и математического моделирования, подтверждающих возможность количественного оценивания качества образовательной деятельности в вузе

- Предложена система внутривузовской диагностики качества обучения на базе средства искусственного интеллекта -автоматизированной экспертной системы, отличающейся достоверностью оценок и высоким уровнем оперативности контроля, результаты работы которой с данными образовательных достижений студентов вуза обеспечивают основу для принятия объективных

управленческих решений по 'совершенствованию образовательной деятельности, реализации педагогических технологий обучения

Теоретическая значимость исследования состоит в теоретическом обосновании технологии функционирования системы диагностики качества обучения в вузе на основе квалиметрического подхода и информационного обеспечения, включающей сбор и хранение данных о процессе обучения, расчет показателей качества, методы анализа индикаторов качества для выявления недостатков процесса обучения, оценку педагогических условий учебного процесса адаптированными методами математической статистики, формирование диагностического заключения для организационно-управленческих структур вуза по повышению качества образовательной деятельности преподавателей и студентов в вузе

Практическая значимость исследования заключается в том, что создана диагностика качества обучения на основе автоматизированной экспертной системы, осуществляющая информирование организационно-управленческих структур вуза о качестве обучения. Оценка качества ведется на основе расчета индикативных показателей качества (дескриптивных статистик), рассчитанных по результатам контроля знаний в студенческих группах

Данная гибкая информационная система диагностики качества обучения также предназначена для оценки применения педагогических технологий в образовании, самооценки и самокоррекции преподавательской деятельности, проверки эффективности внедрения новых методов и средств обучения, выявления уровня усвоения учебных дисциплин, аттестации преподавателей, для дальнейших исследовательских и практических работ в области управления сферой высшего образования Созданная автоматизированная система диагностики качества отвечает принципу минимакса, имеет открытый характер, позволяет вводить дополнительные параметры измерений и математический инструментарий. Элементы представленной системы диагностики качества образовательной деятельности реализованы в ряде вузов и могут быть использованы в корпоративной информационной системе вуза На защиту выносятся:

1) Концепция создания системы диагностики качества обучения в вузе, включающей в себя аналитические и квалиметрические методы оценки

2) Система внутривузовской диагностики качества обучения на основе автоматизированной экспертной системы

3) Индикативные показатели качества обучения и методы их оценки, позволяющие автоматизировать и объективизировать диагностику качества обучения в целях педагогического управления

Достоверность и обоснованность результатов исследования

обеспечиваются соответствующим методологическим подходом к решению данной проблемы, изучением научной литературы и нормативных актов, репрезентативностью выборки экспериментальных данных и их статистической обработкой, использованием методов педагогической квалиметрии, математической статистики, математического моделирования для оценивания качества педагогических процессов, количественным и качественным анализом результатов эксперимента, личным опытом работы автора в должности преподавателя вуза

Апробация и внедрение результатов исследования.

Основные положения и выводы были доложены в семнадцати публикациях и получили одобрение на международных , всероссийских и региональных научных конференциях и семинарах Международной научно-методической конференции «Инновационное образование в техническом университете», 2004 г, Международной конференции «Математические методы в технике и технологиях», 2005 г; Региональной научно-пракпмеской конференции «Инновации в обучении и образовании», 2005 г, Международной научно-методической конференции «Управление качеством профессионального образования от проблемы к системе», 2005 г, Всероссийской научно-пракшческой конференции профессорско-преподавательского состава РГГУ, 2006г; Международной научно-практической конференции «Информационные технологии в образовании и науке», 2007г; Региональной научно-практической конференции «Предпринимательство в туризме и социально-культурной сфере», 2008 г

Результаты диссертационного исследования внедрены в Казанском государственном техническом университете им АН Туполева и в Казанском государственном энергетическом университете.

Структура диссертации.

Работа состоит из введения, двух глав, содержащих 8 параграфов, заключения, содержащего выводы исследования, списка литературы, включающего 166 наименований и 8 приложений Основное содержание работы изложено на 160 страницах машинописного текста, содержит 12 схем, 14 таблиц, 18 формул, 86 рисунков

ОСНОВНОЕ СОДЕРЖАНИЕ ДИССЕРТАЦИИ

Во введении дано обоснование актуальности избранной темы, показано современное состояние проблемы создания методов и средств оценки качества обучения, обозначены существующие противоречия в научных подходах к решению задач диагностики качества обучения в профессиональном образовании, сформулированы цели и задачи диссертационной работы, методологические и теоретические основы диссертации, ее информационная база, определены объект и предмет исследования, раскрыты научная новизна и практическая значимость, проведена апробация результатов исследования, представлена структура диссертации

В первой главе - «Теоретико-методологические проблемы и практика диагностики качества обучения в вузе» представлен аналитический обзор мировых стандартов, опыта и международных концепций управления качеством обучения, исследована специфика организации внутривузовскош мониторинга и методики оценки качества образовательной деятельности в системе высшего профессионального образования, оценены возможности реализации в российских условиях мировых стандартов опыта и международных концепций управления качеством образования Анализ состояния проблемы качества обучения осуществлен с учетом мировой тенденции распространить методы и средства международного стандарта ISO 9000 и системы качества TQM, применявшихся ранее в сфере услуг и в промышленности, в систему управления качеством образования Тенденция имеет рыночную направленность, ориентирована на поиски и оперативное устранение слабых мест в образовательном процессе, инициирует опору на интуицию, широкие исследования и анализ качественно новых идей, с тем, чтобы обеспечить максимальное соответствие достигаемых уровней обучения государственным образовательным стандартам

В соответствии с мировым опытом и с точки зрения российских исследователей (Байденко В И, Ибрагимова Г И, Миклушевского В В., Селезневой НА., Субепо А.И, Чумакова В Г, Щипанова В В ) система управления качеством в вузах нашей страны может быть выстроена на базе синтеза подходов по ISO 9000 и по концепции «Всеобщего управления качеством» Разработки по проектированию систем управлением качеством в вузах ведутся в России с 70-х годов Создана методологическая база (Бойцов ВВ, Гличев АВ, Азгальдов А А, Белобрагин В.Я, Мухаметзянова Г В, Субетто А И и др), которая не противоречит концепции ISO 9000, а по ряду принципов - опережает эту концепцию Опыт внедрения систем управления качеством в МИСиС,

МГТУ им Н Э Баумана, в Санкт-Петербургском государственном техническом институте, в Санкт-Петербургском государственном университете финансов и экономики,и в других вузах подтверждает эффективность и перспективность этого направления государственной политики в сфере качества высшего образования

В 1998-1999 гг такими деятелями педагогической науки, как А И Субетто, В В Чскмарев и др, разработана «Концепция мониторинга качества ВПО», которая базируется на комплексном подходе к мониторингу с охватом всех «объектов мониторинга» и различных измерительных средств Признается необходимым, а ведущими вузами России - планомерно осуществляется, приспособление и внедрение стандарта ISO 9000 с учетом особенностей функционирования и развития высшей школы России Концепция российского высшего образования опирается на параметрическую модель качества и систему мониторинга, как в общенациональном, так и в региональном масштабах регистрация и анализ показателей, проводимый в мониторинге в реальном масштабе времени, может обеспечить основу не только для управленческих решений (Аванесов В С, Шишов С Е, Александров А.Ю, Федорищева О И и др), но также и для дальнейших исследовательских и практических работ в области управления сферой высшего образования, в области исследований вопросов мониторинга качества учебной деятельности и анализа результатов диагностики знаний

В публикациях отмечается отсутствие законченного инструментария, обеспечивающего мониторинг и диагностику качества образовательной деятельности, это делает процесс сбора и обработки информации трудоемким и затратным Задача по созданию гибких систем диагностики качества обучения, отличающихся достоверностью оценок, наивысшим (высоким) уровнем оперативности контроля реализации современных педагогических технологий, в настоящее время находится в стадии формирования технологических решений

В качестве основной идеи исследований (Моисеев В Б, Пятирублевый Л Г, Таранцева К Р , Ионе С Д, Лиманова Н И, Павлова И Н, Одиноков А В, Рудинский ИД и др) в данном направлении выступает проблема оптимизации итогового тестового контроля в учебной деятельности, которая позволила бы свести затраты на организацию и проведение мониторинга к приемлемому уровню.

В связи с вышеизложенным, в качестве проблемы, требующей первостепенного решения, следует указать разработку методического и

информационного обеспечения мониторинга и диагностики, то есть, инструмента, позволяющего наблюдать и оперативно анализировать статистические данные о ходе процесса обучения, прогнозировать тенденции, оценивать перспективы учебной деятельности и последствия корректирующих воздействий без дополнительных измерений

Для решения этой проблемы необходимо разработать систему ' показателей качества обучения, осуществить экспериментальные и теоретические исследования с привлечением средств математического моделирования и статистического анализа объемных массивов данных сложной структуры, выявить систематические взаимосвязи с тем, чтобы их можно было в последующем применить к прогнозированию педагогических ситуаций и в выработке решений, управляющих педагогическим процессом Выбранный метод построения диагностической системы качества обучения основывается на определении цели диашостики и принятия управленческих решений по выявленным показателям

Предложенный авторами алгоритм внутривузовской системы диагностики качества обучения включает в себя

1) Оценку показателей подготовки и проведения образовательного процесса,

2) Выбор и определение значений базовых показателей качества обучения на основе выбора базовых образцов процесса,

3) Определение значений единичных показателей качества обучения на основе данных испытаний измерений и при необходимости, расчетов,

4) Выбор метода оценки качества обучения исходя из анализа возможностей математики, логики, кибернетики с учетом применения информационной технологии,

5) Оценку достигнутого качества образовательной деятельности и принятие управленческого решения.

Система разработки индикаторов качества образования отличается от разработки аналогичных показателей в экономической или социальной сферах, поскольку не существует определения эффективности или неэффективности этого процесса, а имеется лишь группировка по показателям условий осуществления образовательной деятельности, показателям процесса, показателям результата достижения уровня образования, показателям трудоустройства. Для диагностики качества обучения необходимо оценивать все внутривузовские компоненты качества высшего образования, в том числе и качество деятельности преподавателя, поскольку именно он является создателем образовательной услуги

Параметрами системы внугривузовского мониторинга в данном исследовании выбрана оценка успеваемости студентов, как отображение результата достижения конечной цели и показателей качества обучения, поскольку основная черта контроля знаний - отражение в нем всех закономерностей и характеристик образовательной деятельности педагога и студента. С одной стороны - это единственный показатель обратной связи с обучаемыми, с другой стороны - некий числовой показатель, принимающий одно из четырех значений («отлично», «хорошо», «удовлетворительно», «неудовлетворительно») Оценивание каждого студента в отдельности может дать характеристику только ему лично, но оценивание группы студентов, как некоторой системы, где каждому элементу предоставлялись одни и те же процедуры обучения и контроля способствует оценке самого процесса обучения, классификации преподавателя, отлаженности технологии обучения и контроля знаний в целом При этом в роли индикативных показателей качества предложен комплекс дескриптивных статистических параметров (средний балл для группы, дисперсия, среднеквадратическое отклонение, коэффициенты асимметрии и эксцесса) отражающие тенденцию статистического распределения в результатах образовательной деятельности Квалиметрический подход, включающий в себя измерения в числовой форме или в условных показателях, сочетание методов исследования, нацеленных на получение разносторонних сведений об объекте и отслеживание динамики изменения его показателей, подбор методов исследования, позволяющих проанализировать логику исследовательского процесса, его результаты, а также осуществить прогноз обеспечит переход от качественного, одностороннего описания явлений к объективным, точным методам проверки и обобщению результатов педагогической деятельности в вузе для моделирования, диагностики, прогнозирования, и в конечном итоге -принятию адекватных управленческих решений, способных повысить уровень образовательного процесса в высшей школе

Для исследования процесса образовательной деятельности в высшей школе, нахождения индикативных количественных показателей качества обучения, к которым возможно примешпъ квалиметрические подходы, был произведен сбор экспериментальных данных - степень обученности учащихся, основанная на статистике оценок, полученных учащимися при текущем или итоговом контроле В качестве экспериментальных данных были использованы статистические данные не только государственных, но и коммерческих вузов и групп, в том числе, результаты контроля знаний по дисциплинам технических, инженерных, математических, педагогических, экономических и гуманитарных специальностей студентов вузов различного профиля

ТГПГУ, РГГУ, КГТУ им Туполева (КАИ), КГТУ (КХТИ), КГЭУ, КГУ (3000 наборов ведомостей контроля)

Опьгт показывает, что в результате мероприятий, систематически проводимых в рамках мониторинга знаний, в одном вузе, за несколько семестров, накапливаются огромные массивы данных, организация хранения и анализа которых, требует использования компьютерной техники и систем управления базами данных При современных возможностях математического моделирования, развитие педагогических измерений неизбежно связано с разработкой автоматизированных систем, методов и математических моделей педагогических явлений для решения задач управления качеством педагогической системы

Для унификации процедур хранения, сортировки экспериментальных данных в различных аспектах создана база данных, обеспечившая также возможность создания срезов по любым интересующим аспектам для дальнейшего анализа Такие известные базы данных, как «Деканат», «Электронный деканат», «Студент» и т д , используются вузами уже достаточно давно и хорошо себя зарекомендовали Аппарат стандартных баз данных используется в основном как средство хранения систематизированной информации, облегчающее и ускоряющее поиск.

Применительно к задачам мониторинга образования для того, чтобы осуществлять специфические математические операции, в том числе - статистические оценки, разработана специально организованная структура и соответствующая система управления базой данных, которая выполнена в открытой, доступной для любых видоизменений форме в оболочке MS Excel с использованием языка программирования VBA Составляющие базу данных результаты контроля знаний и алгоритмы расчета использованы для получения типовых характеристик, разработки математических моделей и исследования статистики результатов учебного процесса

Для анализа поступающей в базу данных информации и полученных в результате автоматизированного статистического расчета показателей, ввиду большого разнообразия и изменчивости массивов данных, поступающих в процессе мониторинга, для компьютерной поддержки системы мониторинга представляется необходимым использование экспертной системы, концепция которой предлагается в данной работе

Диагностическая экспертная система предполагает замену функций специалистов-экспертов автоматизированной системой, обученной на модели знаний предметной области и позволяющей осуществлять эвристический поиск решения Основные компонента экспертной системы -база знаний, механизм логического вывода (решатель) и подсистема

объяснений Такие системы используются в областях, когда требуется на основании входных данных осуществил, диагностику текущего состояния объекта и предложил, возможные пути шменения этого состояния.

Технология экспертных систем недостаточно полно используется в информационной системе управления вузом, в разработанных информационных комплексах вуза экспертные системы выступают только как средство накопления и сбора данных в автоматизированном обучении, предлагая разнообразный информационный или котрольпый материал учащемуся в соответствии с зафиксированным им уровнем знаний При этом сам смысл инструментария искусственного интеллекта, как системы полностью заменяющей человека, объективизирующего и значительно уменьшающего трудозатраты средства, теряется, приобретенная в результате взаимодействия пользователя с системой информация носит формально-качественный характер, не дает квалиметричсских оценок происходящему процессу образовательной деятельности, подсистема объяснений происходящей ситуации тоже представлена весьма слабо

Для достижения объективной диагностики качества обучения авторами предлагается синтезировать в единую систему различные возможности управляющих информационных систем «Добыча данных» (Data Mining), системы искусственного интеллекта (artificial intelligence), экспертных систем (expert systems), цель которых - программными средствами при решении сложных задач достичь результатов, не уступающих по качеству и эффективности решениям, получаемым экспертом

Аппарат экспертных систем предлагается использовать во многих сферах управления вузом (рис 1), как средство, осуществляющее объективную диагностику текущего состояния объекта на основании параметров мониторинга и обеспечивающее основания для принятия адекватных управленческих решений для совершенствования образовательной деятельности

Основной задачей системы диагностики качества обучения является непрерывная интерпретация данных в реальном масштабе времени, сигнализация о выходе тех или иных параметров за допустимые пределы и выдача возможных причин таких отклонений.

В процессе мониторинга данные, поступающие в компьютерную базу, обрабатываются электронным экспертом, рассчитываются статистические параметры и создается виртуальная модель учебного процесса. На заданном наборе уровней достоверности строятся коридоры «нормальных» флуктуаций параметров явлений чтобы, сопоставляя модель с новыми поступающими результатами мониторинга, выявлять несоответствия, анализировать степень и причины расхождений между ожидаемыми и реальными результатами обучения. При этом

обнаруживаются ситуации, отличающиеся по существу своими рассчитываемыми характеристиками от ситуаций типичных, и, если это необходимо, выдаются рекомендации для более подробного исследования специалистами-экспертами

Организационно-управленческие структуры вуза

Информация для принятия управленческого решения по I 1 оптимизации качества обучения |

Научная работа

N

Данные ниШтЧфййга

V

Экспертная

система диагностика качества

И

Учебный процесс

Данные Мониторинга

ч

Дачные: моиито-рк«га

Персонал

Рис. 1. Схема автоматизации системы управления качеством в вузе на основе экспертной системы

В качестве решающих правил ЭС использованы методы математической статистики, а подсистема объяснений включает в себя знания специалистов-экспертов По мере того, как в базу вкладывается все больше фактического материала и знаний опытных специалистов, создаются предпосылки для более тонкой дифференциации педагогических явлений и повышения эффективности управления

Схема системы диагностики качества обучения на основе ЭС представлена на рис 2

РЕЗУЛЬТАТЫ ПЕДАГОГИЧЕСКОГО МОНИТОРИНГА

"V-

Контроль остаточных знаний

Данные компьютерного тестирования

Оценки проверочных работ

Экчамсна-ционпые ведомости

Осредненные характеристики

Виртуальная модель процесса

Алгоритмы обработки

Диагностика качества процесса обучения

Заключение о качестве процесса обучения для принятия управленческого решения

Рис.2 Диагностика качества обучения на базе автоматизированной экспертной системы

При таком подходе соответствующий программный продукт является гибким инструментом исследований учебного процесса, способным к самообучению в составе функционирующей системы мониторинга и позволяет автоматизировать и объективизировать диагностику качества обучения.

Во второй главе - «Разработка и реализация системы квашиетрических методов снутриеумеской диагностики качества обучения» проведено дескриптивное исследование экспериментальных данных, включающее в себя расчеты статистических параметров и их анализ адаптированными к педагогическим измерениям методами математической статистики

Набор баллов, отражающий распределение уровней знаний среди студентов, был помещен в диашостическую базу данных, составляющую ядро экспертной системы, где были вычислены несмещенные статистические параметры средний балл для группы, дисперсия, среднеквадратическое отклонение, коэффициенты асимметрии и эксцесса. Расчет соответствующих характеристик сопровождался построением распределений баллов в виде гиспклрамм, отображающих процентные соотношения баллов (оценок различною достоинства) в группе Определены интервалы значений, в которых сосредоточены основные доли записей данных, исследованы редко встречающиеся сочетания значений статистических параметров, найдены и проанализированы педагогические причины этих отклонений При анализе значений дескриптивных статистик был использован метод моментов, построен график зависимости коэффициента эксцесса от коэффициента асимметрии (рис 3)

Рис.3. Результаты диагностики качества обучения по методу моментов

Исследуя большие массивы результатов кошроля знаний, можно заметить тенденцию группировки точек в области парабол, характерных для биномиального распределения, при этом выявлено, что если точка, то есть результат контроля по одной студенческой группе, значительно отклоняется от графика, то это свидетельствует об аномалиях, возникающих в учебном процессе

Дополнительный качественный анализ нетипичных показателей наборов оценок образовательных достижений, показал, что, например, на занятиях по геометрии недостаточно внимания уделялось самостоятельному решению задач, поэтому в группе достигнут низкий уровень практических умений; экзамен по философии проходил в форме защит рефератов (рис.4).

100%

50%

100%

50%

72%

sj /о и /о

3(2) 2(3) 1(4) 0(5)

Балл (Оценка)

а) Распределение баллов в студенческой группе, предмет -геометрия

0% 4

3(2) 2(3) 1(4) 0(5)

Балл (Оценка)

б) Распределение баллов в студенческой группе, предмет - философия

Рис. 4. Распределение баллов для нетипичных результатов экзаменационного контроля в ТГГПУ

Для дополнительного статического анализа был использован и метод трех сигм, для которого те значения параметров, которые не укладываются в интервал За, принимаются условно за серьезные отклонения от стандартного распределения (нормы). Бьши рассчитаны соответствующие коридоры типичных значений, исследованы редко встречающиеся сочетания значений статистических параметров и проанализированы психолого-педагогические причины этих отклонений. Рассмотрение условий, при которых соответствующие экстремальные отклонения данных имели место, показало, что причинами отклонений действительно являются сочетания обстоятельств, достаточно нетипичных для учебного процесса и требующих легального анализа педагогической ситуации для корректировки процесса обучения или контроля. Определены верхняя и нижняя пределы, предложена методика расчета границ, выход значений показателей за указанные границы свидетельствует, по результатам настоящего исследования, о наличии дисбалансов и нарушении качества дидактического процесса (рис.5).

а) распределение среднего балла

0.25 0.75 1.25 1.75 2.25 27Ь

б)распределение ереднекиа (ратичсскога отклонения

30.0% 25,0%-

го, 0%

Р,% 15,0%

ю,о%-

5.0% 0,0%

-3-2-2-1-1 -0 0 0, 1 1, 2 2, 3 3, 4 4, 5 5.

в) распределение а) распределение

коэффициента асимметрии коэффициента эксцесса

Рис.5. Результаты анализа качества обучения по методу «трех сигм»

Показано, что применение комплекса статистических параметров можно использовать как индикативные показатели качества, характеризующих отлаженность учебного процесса, а статистические методы их оценки могут быть решающими правилами в ЭС, по мере накопления данных уточняются коридоры значений, возникает дифференциация по дисциплинам.

Для оценки достоверности экспериментальных данных по успеваемости, им поставлена в соответствие теоретическая модель, которая включает в качестве основных механизмы, строящиеся на статистических законах распределения показателей уровней обучения в группах студентов. Критерий достоверности «хи-квадрат» (Пирсона) подтвердил данные о преобладающем вкладе в распределения баллов студенческих групп биномиального и гапсргеометрического статистического закона распределения. Имеет место количественное и качественное согласие осредненных расчетных и экспериментальных данных (рис.6). На оси абсцисс указаны границы диапазонов средних величин ш, связанных с баллами Ь соотношением: Ь= 5-т, где 2 < Ь < 5 - количественное выражение средней оценки в ведомости (левому краю диаграммы соответствуют высокие средние оценки).

Интервала средних баллов

Рис. 6. Сопоставление осредненных данных эксперимента и теоретической модели, основанной на гипергеометрическом распределении баллов в студенческих группах

Из рисунка видно, например, что в экзаменационных ведомостях, средний балл в которых выше 4,5 (область гп < 0,5), количество оценок «отлично» составляет в среднем около 70%, «хорошо» — 30%, «удовлетворительно» и «неудовлетворительно» - единицы процентов

Исследование устойчивости в распределениях оценок в группах студентов, показало, что разброс данных контроля в группе студентов не является случайным, изменение хотя бы одной оценки ведет к качественным изменениям статистических параметров, что свидетельствует о чувствительности уровней данных, регистрируемых мониторингом, к условиям проведения испытаний. Выявленные статистические механизмы, лежащие в основе данных контроля позволили адаптировать и использовать в компьютерном тестировании при оценивании знаний студентов представленную в ГОСТ схему последовательного плана выборочного контроля качества промышленных изделий массового производства.

В последовательном плане кошроля знаний, который предлагается применить в оценивании студента по большому числу вопросов теста, размер частной выборки вопросов заранее не устанавливается. При этом ориентировочная оценка качества считается известной уже после малого количества вопросов, с каждым новым вопросом (испытанием) оценка уточняется Решение о прекращении тестирования принимается исходя из заданных минимальных рисков преподавателя - выставил, завышенную оценку, и студента - получить заниженную оценку Применение программного

блока обеспечило оценки достоверности наряду с существенным сокращением трудоемкости текущего контроля знаний в схемах мониторинга, требующих регистрации больших массивов данных оценивания знаний.

Результаты исследования подтвердили необходимость и целесообразность разработки внугривузовской диагностики качества обучения на основе автоматизированной экспертной системы, внедрение которой дало возможность объективизировать и ошимизировать оценку качества образовательной деятельности преподавателей и студентов, и как следствие, на основании заключения экспертной системы, внести коррективы в учебный процесс вуза для повышения качества профессиональной подготовки студентов Таким образом, шпотеза подтверд илась и задачи решены

Основные результаты, полученные в процессе исследования, изложены в заключении в виде следующих выводов

1 Определены место и роль системы диагностики качества обучения в управлении качеством образования в вузе, как средства педагогического мониторинга, выявляющего отклонения в образовательной деятельности преподавателей и студентов по одинаковой системе показателей и методике, дающей точную количественную оценку качества образовательной деятельности. На основе анализа теории и практики измерения и оценивания качества обучения в высшем профессиональном образовании выявлена необходимость создания системы диагностики качества обучения, отличающейся объективностью оценок и оперативностью анализа данных, что возможно только при внедрении в педагогические измерения математических методов и информационных средств.

2 Разработана концепция и система внугривузовской диагностики качества обучения на базе автоматизированной экспертной системы позволяющей- вести регистрацию данных образовательных достижений, обеспечивать их хранение и сортировку, рассчитывать индикаторы качества учебной деятельности на основе педагогических измерений успеваемости в студенческих группах, анализировать показатели качества обучения посредством математических методов, предоставлять данные о ходе процесса обучения в виде рекомендации для организационно-управленческих структур вуза по повышению качества и эффективности образовательной деятельности Экспериментально внедрена в образовательный процесс автоматизированная экспертная система диагностики качества обучения для оценки применения современных педагогических технологий, эффективности внедрения новых методов и средств обучения, уровня усвоения учебных дисциплин, аттестации преподавателей

3 Разработан и практически реализован комплекс индикативных показателей качества на основе дескриптивных статистических показателей (среднее значение, среднеквадратическое отклонение, коэффициенты эксцесса и асимметрии) для зарегистрированных промежуточных и итоговых оценок образовательных достижений в студенческих группах Адаптированы к педагогическим ишерениям и введены в экспертную систему методы оценки показателей качества (метод «трех сигм» и метод моментов), позволяющие оценить результаты контроля по каждому предмету и обеспечивающие точность, надежность и валидность измерений, с точки зрения диагностики качества обучения

4 Впервые поставлены и решены задачи статистического контроля данных текущих и итоговых оценок образовательных достижений студенческих групп посредством анализа статистических показателей педагогических измерений методами математической статистики Выявлены новые статистические закономерности в педагогических измерениях, в частности, влияние обстоятельств педагогической деятельности на значения показателей качества Проведено исследование устойчивости экспериментальных данных педагогического контроля, показавшее значительное изменение индикаторов качества при незначительной модификации педагогических измерений, что свидетельствует о чувствительности уровней данных регистрируемых педагогическим мониторингом к условиям проведения испытаний

5 На основании выявленных статистических закономерностей усовершенствованна методика проведения автоматизированного тестового контроля знаний по дисциплинам на базе адаптации теоретических основ планов контроля качества промышленных изделий, зарегистрированных в государственных стандартах качества продукции к условиям тестирования студентов в вузе Данный метод на основании статистического анализа позволяет минимизировать риски ошибок в педагог ических измерениях при автоматизированном оценивании уровня знаиий и существенно сократить трудоемкость процедуры тестирования

Результаты диссертационного исследования внедрены в Казанском государственном техническом университете им А Н Туполева и в Казанском государственном энергетическом университете

Дальнейшее исследование проблемы диагностики качества обучения в вузе может быть продолжено в направлении разработки квалиметрических показателей устанавливающих взаимосвязь между качеством абитурие1ггов вуза, студентов, преподавательского состава, и трудоустройством выпускников на основании статистических данных

Основное содержание диссертационного исследования отражено в следующих публикациях:

1 Левина ЕЮ Диагностика качества обучения в современном вузе на основе информационно-экспертной системы /ЕЮ Левина, В С Щербаков // Казанский педагогический журнал Казань, ИПППО РАО, 2008 - № 3 С 42-46-0,4 печ л

2 Левина ЕЮ Некоторые аспекгы информационной культуры студентов / ЕЮ Левина // Инновационное образование в техническом университете сб докл международной научно-методической конференции -Казань, КГТУ им Туполева, 2004 -С 535-538 0,2 печ л

3 Левина ЕЮ Математическое моделирование надежности в оценках уровня знаний групп студентов / ЕЮ Левина, СП Мезенцев // Математические методы в технике и технологиях. Материалы международной научно-методической конференции -Казань, К1 ТУ, 2005 -С 87-88 -0,1 печ л

4 Левина ЕЮ Использование статистических методов выборочного контроля в оперативных оценках качества знаний студентов /ЕЮ Левина, С П Мезенцев // Математические методы в технике и технологиях Материалы международной научно-методической конференции - Казань, КГТУ, 2005 -С 88-90 - 0,12 печ л

5 Левина Е Ю Метод моментов в оценках параметров распределения знаний в пределах студенческих групп / ЕЮ Левина, СП Мезенцев // Управление качеством профессионального образования от проблемы к системе Материалы международной научно-методической конференции - Казань, КГЭУ, 2005 -С.240-242 - 0,12 печ л

6 Левина ЕЛО Статистическая обработка данных мониторинга знаний / ЕЮ Левша // Управление качеством профессионального образования от проблемы к системе Материалы международной научно-методической конференции - Казань, КГЭУ, 2005 -С 220-221.- 0,15 печ л

7. Левина ЕЮ База данных мониторинга знаний с элементами статистической обработки и прогнозирования /-ЕЮ Левина // Инновации в обучении и образовании Материалы региональной научно-практической конференции - Альметьевск, Альметьевский государственный нефтяной институт, 2005 -С 152-153 -0,15 печ л

8 Левша Е Ю Специализированная экспертная система для решения задач мониторинга знаний /ЕЮ Левина, С П Мезенцев // сборник материалов конференции профессорско-преподавательского состава Российского гуманитарного университета. - Москва, РГГУ, 2006 -С 28-30 -0,15 печ л

9 Левина Е Ю Система повышения качества образовательных услуг в вузе / Е.Ю Левша // Инновационное образование проблемы, поиски,

решения сб докл. международной научно-методической конференции. -Казань,КГЭУ,2006 -С 18-19 -0,15печ л

10 Левина, ЕЮ Индикативные показатели качества для мониторинга высшего профессионального энергетического образования / ЕЛО Левина // Известия высших учебных заведений Проблемы энергетики. - Казань Издательство КГЭУ, 2006 -№5-6 -С. 93-97 - 0,6 печ л.

11 Левина ЕЮ Экспертная квалиметрическая оценка качества образования /ЕЮ Левина // Информационные технологии в образовании и науке Материалы международной научно-практической конференции (ИТО-Поволжье2007).-Казань,ТГГПУ,2007 -С 243-246 -0,5печ л.

12 Левина ЕЮ Диагностика образовательной деятельности вузов социально-культурной сферы / ЕЮ Левина, ВС Щербаков // Предпринимательство в туризме и социально-культурной сфере сб докл региональной научно-практической конференции. - Казань, Экоценгр, 2008

С 36-42 -0,4 печ л

13 Левина ЕЛО Информационные технологии в системе управления вузом / ЕЮ Левина // Предпринимательство в туризме и социально-культурной сфере сб докл региональной научно-практической конференции. -Казань, Экоценгр, 2008 г - С 66-76 -0,9 печ л

14 Левина ЕЛО Диагностика качества обучения в современном вузе учебное пособие /ЕЮ Левина, В С Щербаков - Нижнекамск. ИПЦ «Гузель», 2008 -140 с-4,3 печ л

Лицензия № 205 от 30 10 2000 г

Подписано к печати 14 05 2008 г Формат 60x84/16

Гарнитура «Times» Вид печати RIZO Бумага офсетная

Физ печ Л 1 63 Уел печ Л 1 63 Уч -изд л 1 63

Тираж 130 экз Заказ 57

Отпечатано ООО «Волга Пресс» Тел (843)2-381-081

Содержание диссертации автор научной статьи: кандидата педагогических наук, Левина, Елена Юрьевна, 2008 год

Введение.

Глава 1. Теоретические и методологические проблемы, диагностики качества обучения

1.1. Международные и российские концепции управления качеством высшего профессионального образования.

1.2. Методы оценки качества обучения в высшей школе.

1.3. Квалиметрический анализ данных внутривузовского мониторинга для оценки качества обучения.

1.4. Разработка структуры экспертной системы для решения задач диагностики качества обучения.

Выводы по главе 1.

Глава 2. Разработка и реализация системы квалиметрических методов для внутривузовской диагностики качества обучения.

2.1. Праксеологические аспекты разработки системы диагностики качества обучения в высшей школе на основе методов математической статистики.

2.2. Анализ данных педагогического мониторинга методами математического моделирования.

2.3. Применение планов выборочного контроля знаний в системе тестирования для оценки уровня знаний студентов.

2.4. Эмпирическая интерпретация статистических законов распределения в исследовании результатов тестирования.

Выводы по главе 2.

Введение диссертации по педагогике, на тему "Внутривузовская диагностика качества обучения на основе автоматизированной экспертной системы"

Актуальность исследования. За последнее десятилетие высшее профессиональное образование в России приобрело широкомасштабный характер, в связи с чем остро встал вопрос об обеспечении качества обучения. Качество обучения как научно-теоретическая проблема включает в себя экономические, социальные, познавательные, культурные аспекты образования и является интегральной характеристикой образовательной деятельности и ее результатов. Для предоставления гарантий качества во всех сферах деятельности вуза, в соответствии с предъявляемыми требованиями к результату обучения со стороны потребителей необходимо наличие современных систем управления качеством.

Управление развитием образования как приоритетное направление выделяет создание системы внутривузовского мониторинга с охватом всех его объектов и различных измерительных средств, отслеживающей совокупность характеристик педагогических технологий. Ратификация Болонского соглашения, международные требования соответствия общеобразовательному стандарту ISO 9000 и Концепции модернизации российского образования ставят перед системой диагностики учебного процесса в высших учебных заведениях проблему выработки таких показателей (индикаторов) качества, которые отражали бы не только достигнутый уровень знаний обучаемых, но и параметры использования технологий обучения и контроля.

Информационный поток данных оценки знаний, его множественная структурированность, обусловили необходимость разработки нового аппарата педагогических измерений, который обеспечил бы выявление несоответствий, прогнозирование результатов, оптимизацию задач мониторинга, то есть технологию алгоритма диагностики качества высшего профессионального образования с количественной оценкой полученных результатов на каждом этапе.

Концептуальные основы качества образования сформулированы в правительственных программах, направленных на реформирование образовательной системы и призванных повысить качество и эффективность образования, это: «Концепция модернизации образования России до 2010 г», федеральная целевая программа «Электронная Россия 2002 - 2010 гг.», федеральная целевая программа развития образования на 2006 - 2010 гг.

Методологические подходы к мониторингу высшего образования с охватом всех «объектов мониторинга» и различных измерительных средств разработаны А.И. Субетто, В.В. Чекмаревым в конце 90-х годов в «Концепции мониторинга качества ВПО», где был проведен анализ существующих показателей качества, действующих оценочных систем и существующих статистических систем учета данных мониторинга. Исследование вопросов мониторинга качества учебной деятельности и анализ результатов диагностики знаний осуществляются в работах B.C. Аванесова, С.Е. ТТТитова, А.Ю. Александрова, JI.B. Колясниковой, О.И. Федоршцевой и др.

Последнее десятилетие характеризуется развитием идеи глобальной информатизации, как необходимого признака прогресса, применение информационных технологий в педагогическом процессе для решения задач оптимизации и повышения эффективности образовательного процесса проводилось Ю.К. Бабанским, В.П. Беспалько, Г.В. Ившиной, B.C. Ильиным, Г.И. Кириловой, В.В. Краевским, Е.И. Машбиц.

Однако, несмотря на наличие научных работ по проблемам мониторинга, диагностики качества обучения и использования информационных средств в этой области, результативный и стандартизированный механизм измерения и оценки качества обучения, в том числе, образовательных программ, методов и результатов обучения недостаточно разработан в российской системе образования. Отсутствие объективных норм уровня образовательной деятельности приводит к тому, что существующая оценка качества объектов образовательной системы представляет собой недостаточный индикатор для принятия соответствующих управленческих решений. Кроме того, слабо отражены возможности использования информационно-технических средств и математических методов в работе систем управления качеством образовательной деятельности. Корректная оценка качественных показателей и их анализ возможны лишь на основе квалиметрического подхода, который позволит от нечетких и зачастую субъективных оценок перейти к математически обоснованным, объективным выводам.

Таким образом, анализ научной литературы-, и результатов теоретических исследований; позволил выявить противоречия:

- между необходимостью обеспечения гарантированного вузом качества обучения и неэффективностью совокупности применяемых методов диагностики и оценки качества образовательного процесса.

- между качественным характером оценивания и необходимостью измерения количественных показателей качества обучения для привлечения объективных математических методов обработки и анализа данных. ■•'./■•

Выявленные противоречия обусловили проблему исследования: каковы научная основа и система диагностики качества обучения на основе информационных средств и математических методов.

Цель исследования заключается в разработке внутривузовской системы диагностики качества обучения на основе информационных средств и математических методов.

Объект исследования: диагностика качества учебного процесса в вузе.

Предмет исследования: структурно-функциональная модель внутривузовской диагностики качества обучения на основе информационных и математических методов.

В основу исследования положена гипотеза: качество профессионального обучения в вузе может быть повышено значительно, если при организации внутривузовской диагностики качества обучения на основе автоматизированной экспертной системы будут системно реализованы функции:

- сбора данных текущего и итогового контроля знаний и их хранения в базе данных;

- управления базами данных для осуществления процедур исследования и анализа статистики результатов учебного процесса;

- определения значимых показателей качества обучения, отражающих уровень усвоенных знаний и параметры преподавания учебной дисциплины;

- оценивания показателей качества обучения в соответствии с системой математических методов;

- выработки рекомендаций для принятия управленческих решений по обеспечению качества образования.

В соответствии с целью исследования и гипотезой были выдвинуты следующие задачи:

1) Провести анализ состояния теории, практики и проблем диагностики качества обучения в вузе;

2) Разработать концепцию системы диагностики качества обучения в вузе на основе автоматизированной экспертной системы;

3) Теоретически разработать и практически реализовать индикативные показатели качества обучения и методы их оценки;

4) Экспериментально показать эффективность разработки методов внутривузовской диагностики качества обучения.

Теоретико-методологическую основу исследования составили работы отечественных и зарубежных авторов, касающиеся вопросов оценки качества обучения, мониторинга образования, квалиметрических и математических методов диагностики качества образовательной деятельности вуза.

Переход к мировым стандартам качества образования (ISO 9000) инициировал разработку положений методологической базы системы управления качества обучения в вузе (В.В. Бойцов, A.B. Гличев, A.A. Азгальдов, В.Я. Белобрагин, Г.В. Мухаметзянова, Н.И. Селезнева и др.). Процесс обучения перечисленными авторами рассматривается как технология, включающая в себя приемы его оптимизации и управляемости для повышения его эффективности (В.П. Беспалько, Н.Ф. Талызина).

Особенности применения методов математической статистики в педагогических исследованиях и способов педагогических измерений и диагностики рассматривалась в работах B.C. Аванесова, А.И. Орлова, И. Д. Рудинского и др.

Инновационный подход к организации информационных ресурсов и технологий поддержки учебного процесса применен в работах В.П. Беспалько, Г.И. Ибрагимова, Г.К. Селевко, В.И. Солдаткина, М.А. Чошанова.

Современные исследования в области математического моделирования тестирования знаний и выявления реального уровня обученности студентов представлены в исследованиях В.Б. Моисеева, Л.Г. Пятирублевого, KP. Таранцевой, С.Д. Ионе, Н.И Лимановой, И.Н. Павловой, A.B. Одинокова и др.

Для решения поставленных задач использовались следующие методы исследования: системный анализ психолого-педагогической литературы, учебно-программной документации; моделирование и дидактическое тестирование; наблюдение; анализ результатов самостоятельных, проектно-конструктивных работ студентов, итоги сдачи экзаменов; проверка остаточных знаний; методы анализа педагогических явлений и статистической обработки экспериментальных педагогических данных; методика организации баз данных контроля знаний; методика выборочного контроля качества; численные методы математического моделирования и способы имитационного моделирования на ЭВМ.

Экспериментальной базой послужили статистические и оперативные данные текущего и итогового контроля знаний студентов вузов различного профиля: ТГГПУ (Татарский государственный гуманитарный педагогический университет), РГТУ (Российский государственный гуманитарный университет), КГТУ (Казанский государственный технический университет), КГТУ (Казанский государственный технологический университет), КГУ (Казанский государственный университет), КГЭУ (Казанский государственный энергетический' университет).

Этапы исследования.

Первый этап (2003-2005гг.) - поисковый и диагностический. Изучались вопросы диагностики и оценивания качества обучения, проблемы модернизации качества высшего профессионального образования, сложившаяся практика проведения внутривузовского мониторинга, квалиметрические подходы к оценке качества обучения, определялись и уточнялись возможные показатели качества образовательной деятельности, осуществлялось накопление экспериментальных данных.

Второй этап (2005-2006гг.) — разработка теоретической базы, квалиметрического аппарата, адаптация математических методов для организации внутривузовской диагностики качества обучения на базе автоматизированной экспертной системы.

Третий этап (2006-2008гг.) - создание целостной системы диагностики качества обучения для решения некоторых задач оценки и повышения качества образовательной деятельности преподавателей и студентов. Произведена апробация, экспериментальное внедрение и обобщение результатов исследования.

Научная новизна исследования состоит в том, что:

Определена роль и обозначено место внутривузовской автоматизированной системы диагностики качества обучения в управлении качеством образования в вузе, как средства обнаружения дефектов образовательной деятельности в вузе, осуществляющее стандартизацию качества обучения посредством мониторинга образовательного процесса и анализа признаков, характеризующих наличие отклонений в обучении.

Разработан способ реализации индикативных критериев качества обучения основанного на данных статистического наблюдения, оценки образовательных достижений, обработки результатов контроля знаний посредством совокупности методов математической статистики и математического моделирования, подтверждающих возможность количественного оценивания качества образовательной деятельности в вузе. Предложена система внутривузовской диагностики качества обучения на базе средства искусственного интеллекта -автоматизированной экспертной системы, отличающейся достоверностью оценок и высоким уровнем оперативности контроля, результаты работы которой с данными" образовательных достижений студентов вуза обеспечивают основу для принятия объективных управленческих решений по совершенствованию образовательной деятельности, реализации педагогических технологий обучения.

Теоретическая значимость исследования состоит в теоретическом обосновании технологии функционирования системы диагностики качества обучения в вузе на основе квалиметрического подхода и информационного обеспечения, включающей: сбор и хранение данных о процессе обучения; расчет показателей качества; методы анализа индикаторов качества для выявления недостатков процесса обучения; оценку педагогических условий учебного процесса адаптированными методами математической статистики; формирование диагностического заключения для организационно-управленческих структур вуза по повышению качества образовательной деятельности преподавателей и студентов в вузе.

Практическая значимость исследования заключается в том, что создана диагностика качества обучения на основе автоматизированной экспертной системы, осуществляющая информирование организационно-управленческих структур вуза о качестве обучения. Оценка качества ведется на основе расчета индикативных показателей качества (дескриптивных статистик), рассчитанных по результатам контроля знаний в студенческих группах.

Данная гибкая информационная система диагностики качества обучения также предназначена для оценки применения педагогических технологий в образовании, самооценки и самокоррекции преподавательской деятельности, проверки эффективности внедрения новых методов и средств обучения, выявления уровня усвоения учебных дисциплин, аттестации преподавателей, для дальнейших исследовательских и практических работ в области управления сферой высшего образования. Созданная автоматизированная система диагностики качества отвечает принципу минимакса, имеет открытый характер, позволяет вводить дополнительные параметры измерений и математический инструментарий. Элементы представленной системы диагностики качества образовательной деятельности реализованы в ряде вузов и могут быть использованы в корпоративной информационной системе вуза.

На защиту выносятся:

1) Концепция создания системы диагностики качества обучения в вузе, включающей в себя аналитические и квалиметрические методы оценки.

2) Система внутривузовской диагностики качества обучения на основе автоматизированной экспертной системы. ,

3) Индикативные показатели качества обучения и методы их оценки, позволяющие автоматизировать и объективизировать диагностику качества обучения в целях педагогического управления.

Достоверность и обоснованность результатов исследования обеспечиваются соответствующим методологическим подходом к решению данной проблемы, изучением научной литературы и нормативных актов, репрезентативностью выборки экспериментальных данных и их статистической обработкой, использованием методов педагогической квалиметрии, i математической статистики, математического моделирования для оценивания качества педагогических процессов, количественным и качественным анализом результатов эксперимента, личным опытом работы автора в должности преподавателя вуза.

Апробация и внедрение результатов исследования.

Основные положения и выводы были доложены в семнадцати публикациях и получили одобрение на международных, всероссийских и региональных н научных конференциях и семинарах: Международной научно-методической конференции «Инновационное образование в техническом университете», 2004 г.; Международной конференции «Математические методы в технике и технологиях», 2005 г.; Региональной научно-практической конференции «Инновации в обучении и образовании», 2005 г., Международной научно-методической конференции «Управление качеством профессионального образования: от проблемы к системе», 2005 г.; Всероссийской научно-практической конференции профессорско-преподавательского состава РГГУ, 2006г.; Международной научно-практической конференции «Информационные технологии в образовании и науке», 2007г.; Региональной научно-практической конференции «Предпринимательство в туризме и социально-культурной сфере», 2008 г.

Результаты диссертационного исследования внедрены в Казанском ' государственном техническом университете им. А.Н. Туполева и в Казанском государственном энергетическом университете.

Структура диссертации.

Работа состоит из введения, двух глав, содержащих 8 параграфов, заключения, содержащего выводы исследования, списка литературы, включающего 166 наименований и 8 приложений. Основное содержание работы изложено на 160 страницах машинописного текста, содержит 12 схем, 14 таблиц, 18 формул, 86 рисунков.

Заключение диссертации научная статья по теме "Общая педагогика, история педагогики и образования"

Выводы по главе 2

1. Проведено исследование экспериментальных данных педагогических измерений, представляющих собой результаты текущего и итогового контроля знаний студентов вузов различного профиля (около 3000 наборов ведомостей контроля) с позиций математической статистики для выявления статистических закономерностей для нахождения критериев отлаженности учебного процесса. Оценены вычисленные дескриптивные статистические величины для каждого набора оценок (ведомости), и определены интервалы значений, исследованы редко встречающиеся сочетания значений статистических параметров.

2. Разработан комплекс индикативных показателей качества обучения, представляющих собой дескриптивные статистические показатели (средний балл, среднеквадратическое отклонение, коэффициенты асимметрии и эксцесса), показано, что комплексный анализ статистических параметров можно использовать как характеристики уровней знаний студенческих групп для оценки отлаженности учебного процесса.

2. Произведена проверка экспериментальных данных педагогических измерений (3000 значений) по критерию «трех сигм», измеренные значения х, выходящие за пределы трех сигм, дополнительно изучены. Показано, что причинами указанных отклонений являются сочетания обстоятельств, достаточно нетипичных для учебного процесса, например, повторная сдача экзамена, нетрудный материал в виде задач, использующийся при составлении заданий для автоматического тестирования и т.п. Полученный индикатор (степень отклонения результатов статистической обработки от стандартных результатов) использован в алгоритме экспертной системы как показатель, сигнализирующий о необходимости обратить внимание на аномальность количественных значений регистрируемых мониторингом параметров учебного процесса и исследовать подробно его качественные характеристики.

3. Произведена проверка экспериментальных данных педагогических измерений (3000 значений) по адаптированному к педагогическим измерениям методу моментов. Выявлено, что если результаты расчетов отклоняются от вычисленных типичных параметров распределения, то это соответствует, ситуациям нетипичным в образовательной деятельности, например, использованием невалидных тестов, некорректно составленным вопросам к экзаменационным билетам, низкой посещаемости студенческой группой занятий, то есть, ситуациям, требующим корректировки технологии обучения и контроля.

4. Введены в автоматизированную экспертную систему, как решающие правила диагностики качества обучения, индикативные показатели (дескриптивные статистики вычисленные для наборов экзаменационных баллов в группе) и статистические методы их оценивания («метод моментов» и «метод трех сигм»), то есть, предложены квалиметрические методы, позволяющие оценить результаты контроля с точки зрения диагностики качества обучения, для корректировки процессов обучения и контроля.

5. Проверена гипотеза о возможности использования показателей и методов математической статистики для зафиксированных документально уровней успеваемости в студенческих группах. Получено количественное и качественное согласие осредненных расчетных и экспериментальных данных по критерию согласия «хи-квадрат» (Пирсона) для выдвинутой гипотезы о законах распределения данных и присутствия в них биномиальной и гипергеометрической составляющей, а следовательно, и возможности использования предложенных методов (метода «трех сигм» и метода моментов) к педагогическим измерениям.

6. Проведено исследование устойчивости данных педагогических измерений (статистических параметров распределений баллов студенческих групп). Оценены возможные разбросы данных методами математического моделирования, показано, что разброс данных контроля в группе студентов не является случайным, изменение хотя бы одной оценки ведет к качественным изменениям статистических параметров, что свидетельствует об устойчивости, иллюстрирующей чувствительность уровней данных, регистрируемых педагогами, к условиям проведения испытаний.

7. Проведена адаптация к условиям автоматизированного тестирования в вузе теоретических основ планов контроля качества утвержденных в государственных стандартах и используемых в промышленности. Разработано несколько программных средств, реализующих стандартную методику планов выборочного и последовательного контроля качества и осуществляющую расчет рисков выставления ошибочных оценок в процессе оценки знаний. Применение (проведено более 5000 испытаний) разработанного программного блока в учебном процессе показало, что более чем в 75% случаев, удается сократить процедуру проверки уровней усвоения материала в два раза и более.

8. Проведено исследование результатов тестирования ЕГЭ с использованием выявленных статистических закономерностей и построенных математических моделей распределения знаний в группах обучаемых для фильтрации случайных факторов (угаданных ответов). Получено ранжирование дисциплин по выраженности элементов знания, умения и творческих навыков в итоговых оценках, а также по степени валидности экзаменационных тестов ЕГЭ.

ЗАКЛЮЧЕНИЕ

Исследованиями педагогических явлений, анализом значительного объема экспериментальных данных об уровне обученности в группах студентов, как в совокупности субъектов подвергаемых единому преобразованию посредством обучения, расчетными исследованиями с использованием методов квалиметрии, математической статистики и математического моделирования решены следующие педагогические задачи:

1) Осуществлен анализ современных тенденций в области высшего профессионального образования о распространении методов и средств международных стандартов качества международного стандарта ISO 9000 и системы качества TQM, применявшихся в сфере управления качеством на производстве, в систему управления качеством образования. Данный курс имеет рыночную направленность, ориентированную на повышение конкурентоспособности российских вузов и инициирует поиск и устранение слабых мест в образовательной деятельности вуза. Ориентированность на доступность образования активизировала открытие многих коммерческих вузов и новых направлений обучения в государственных вузах, где процесс образовательной деятельности еще не отлажен и не гарантирует наличие необходимого качества образования.

Необходимость создания современных систем управления качеством в вузе показана во многих публикациях. Функции управления качеством включают в себя установление стратегии управления, обеспечение регулировки качества, мониторинг качества образования, который осуществляется регулярным наблюдением за качеством деятельности вуза в течение определенного интервала времени по одинаковой системе показателей и методике. Поставлена проблема создания системы оценки качества обучения, входящей в систему управления, транспарентной стандартам и экспериментальное доказательство ее состоятельности и адекватности.

2) Рассмотрены и проанализированы существующие методы оценки качества обучения. Показана необходимость наличия такой оперативной информации для решения задач диагностики качества обучения, которая отражала бы результаты педагогической деятельности, позволила реально осуществить анализ сведений об образовательной деятельности вуза с использованием квалиметрического количественного подхода объективизирующего и автоматизирующего процесс диагностики качества обучения.

Сложность при разработке индикаторов (показателей) качества обучения заключается в том, что не существует определения эффективности или неэффективности процесса обучения, а имеются только показатели условий осуществления образовательной деятельности, результата достижения уровня образования и трудоустройства, во многом подверженные различным факторам. Сформирована задача по созданию гибких систем диагностики учебного процесса, отличающихся наивысшим (высоким) уровнем оперативности и технологичностью контроля, позволяющих оценить с высокою степенью достоверности деятельность субъектов образовательного процесса - преподавателей и студентов. Показана необходимость инструмента, позволяющего наблюдать и анализировать ход происходящих изменений, прогнозирующего тенденции и перспективы учебной деятельности, последствия корректирующих воздействий и избавляющего от рутинной работы по обработке информации.

3) Выбраны параметры системы диагностики качества обучения на основе показателей статистической обработки документально зафиксированных результатов обучения в студенческих группах, как совокупности студентов, которым предоставлен один и тот лее набор составляющих процесс обучения технологий. Ключевым фактором современных педагогических технологий, совокупности и последовательности методов и процессов преобразования с заданными параметрами и свойствами является сам факт достижения конечного результата и контроль точности его достижения. В образовательной деятельности, оценка итогового контроля знаний, несмотря на некоторую субъективность, является отображением освоения учащимися знаний, умений и навыков, показателем обратной связи с обучаемыми имеющим числовое выражение, заключающееся в количестве набранных студентами баллов при любом виде итогового контроля. Показано, что анализ уровня усвоения знаний в студенческих группах, как некоторой в некоторой совокупности элементов системы, где каждому из них предоставлялись одни и те же процедуры обучения и контроля, способствует оценке самого процесса обучения, классификации преподавателя, отлаженности технологии обучения и контроля знаний в целом.

4) Предложена концепция внутривузовской системы диагностики качества обучения, включающая в себя:

1. Оценку показателей подготовки и проведения образовательного процесса;

2. Выбор и определение значений базовых показателей качества обучения на основе выбора базовых образцов процесса;

3. Определение значений единичных показателей качества на основе данных испытаний измерений и при необходимости, расчетов;

4. Выбор метода оценки качества процесса исходя из возможностей математики с учетом применения информационной технологии;

5. Оценку достигнутого качества образовательной деятельности и принятие управленческого решения.

5) Осуществлен сбор и хранение экспериментальных данных для решения задачи создания системы диагностики качества обучения - степень обученности учащихся, основанная на статистике оценок, полученных при текущем или итоговом, контроле, использованы результаты достижения уровней знаний в студенческих группах вузов различного профиля (ТГГПУ (Татарский государственный гуманитарный педагогический университет), РГГУ (Российский государственный гуманитарный университет), КГТУ (Казанский государственный технический университет), КГТУ (Казанский государственный технологический университет), КГУ (Казанский государственный университет), КГЭУ (Казанский государственный энергетический университет)) по дисциплинам технических, инженерных, математических, педагогических, экономических и гуманитарных специальностей.

Создана база данных (БД) для оптимизации хранения, сортировки и анализа экспериментальных данных обеспечивающая группировку экспериментальных данных по любому параметру. Разработана специально организованная структура и соответствующая система управления базой данных (СУБД), которая выполнена в открытой, доступной для любых видоизменений форме в оболочке MS Excel с использованием языка VBA, для осуществления специфических математических операций. Составляющие БД результаты контроля знаний и алгоритмы расчета использованы в настоящей работе для получения типовых характеристик, разработки математических моделей и исследования статистики результатов учебного процесса.

6) Разработана автоматизированная экспертная система, ввиду большого разнообразия и изменчивости массивов данных, поступающих, в процессе мониторинга и требующих оперативного анализа для компьютерной поддержки системы диагностики качества обучения.

Данное средство, с элементами искусственного интеллекта, выбрано исходя из основной задачи мониторинга - непрерывной интерпретации данных в реальном масштабе времени, сигнализация о выходе тех или иных параметров за допустимые пределы и выдача возможных причин таких отклонений. В качестве решающих правил ЭС использованы методы математической статистики, а подсистема объяснений включает в себя знания специалистов-экспертов. По мере того, как в базу данных вкладывается все больше фактического материала и знаний опытных специалистов, создаются предпосылки для более тонкой дифференциации педагогических явлений и повышения эффективности управления. При таком подходе программный продукт является гибким инструментом исследований учебного процесса, способным по мере разрешения сложных ситуаций к самообучению в составе функционирующей системы информационной системы вуза.

7) Определен пакет индикативных показателей качества обучения -основные дескриптивные показатели, отражающие специфику распределения знаний в студенческих группах (средний балл, среднеквадратическое отклонение, коэффициенты асимметрии и эксцесса), их использование обосновано количественной мерой неравномерностей в регистрируемых распределениях баллов.

Выявлено, что основная доля экспериментальных данных сосредоточена в определенной области, в несколько раз более узкой по сравнению с теоретически рассчитанными значениями, полученными на математической модели учебного процесса. Этот факт свидетельствует о том, что при формировании распределений баллов в группах действуют определенные ограничения, кривые не являются произвольно изрезанными, т.е. результаты, показываемыми в испытаниях знаний различными студентами, являются с точки зрения статистики взаимозависимыми. Показано, что комплексный анализ статистических параметров можно использовать как индикативные показатели качества, характеризующие наборы оценок студенческих групп, для оценки отлаженное™ учебного процесса.

8) Проведен статистический анализ экспериментальных данных (3000 наборов зафиксированных уровней знаний) по критерию «трех сигм» и адаптированному к педагогическим измерениям методу моментов, измеренные значения показателей качества обучения дополнительно изучены.

Выявлено, что причинами указанных отклонений являются сочетания обстоятельств, достаточно нетипичных для учебного процесса, например, повторная сдача экзамена, нетрудный материал в виде задач, использующийся при составлении заданий для автоматического тестирования, использование невалидных тестов, неотлаженная технология обучения, низкий уровень студентов, то есть, ситуации, требующие корректировки технологии обучения или контроля.

Рассмотрение педагогических условий, при которых соответствующие экстремальные отклонения данных имели место, показало, что степень отклонения результатов статистической обработки от типичных, составляющих около 80% результатов, может быть использована в алгоритме экспертной системы как индикатор, сигнализирующий о необходимости обратить внимание на аномальность количественных значений регистрируемых мониторингом параметров качества обучения и исследовать подробно его качественные характеристики для повышения эффективности образовательной деятельности.

9) Проверена гипотеза о возможности использования показателей и методов математической статистики для педагогических измерений (зафиксированных документально уровней успеваемости в студенческих группах).

Показано методами математического моделирования, что значительный вклад (не менее 50%) в законы распределения исследуемых значений оценок контроля уровня знаний при исследовании массива экспериментальных данных вносят гипергеометрические и биномиальные составляющие, проверка критерием согласия «хи-квадрат» (Пирсона) подтвердило данное положение, получено хорошее количественное и отличное качественное согласие осредненных расчетных и экспериментальных данных, а следовательно, показана возможность использования методов математической статистики (метода «трех сигм» и метода моментов) для экспериментальных данных педагогических измерений.

Проведено исследование устойчивости в распределения оценок в группах студентов, которое показало степень модификации индикативных параметров качества при варьировании на один балл одной или нескольких оценок в экзаменационной ведомости, что позволило сделать следующий вывод - разброс данных контроля в группе студентов не является случайным, изменение хотя бы одной оценки ведет к качественным изменениям статистических параметров, что свидетельствует об устойчивости, и чувствительности уровней' данных, регистрируемых мониторингом, к условиям проведения испытаний, существуют определенные закономерности в их формировании и взаимосвязи в пропорциях. Следовательно, совместное использование метода моментов и метода «трех сигм», как способа оценки г качества обучения, с целью выявления ситуаций требующих дальнейшей проверки экспертами, возможно в качестве решающего правила в экспертной системе.

10) Экспериментально обоснованы и введены в автоматизированную экспертную систему, как решающие правила диагностики качества учебного процесса, индикативные показатели качества образовательной деятельности (дескриптивные показатели, вычисленные для наборов экзаменационных баллов в группе) и статистические методы их оценки («метод моментов» и «метод трех сигм»), то есть, разработаны квалиметрические методы, позволяющие оценить результаты контроля с точки зрения диагностики качества обучения, для корректировки процессов обучения и контроля.

На заданном наборе уровней достоверности строятся интервалы изменений типичных параметров контроля, чтобы, сопоставляя модель с новыми поступающими результатами мониторинга, выявлять несоответствия, анализировать степень и причины расхождений между ожидаемыми и реальными результатами обучения. При этом обнаруживаются ситуации, отличающиеся по существу своими рассчитываемыми характеристиками от ситуаций типичных, и, если это необходимо, выдаются рекомендации для более подобного исследования специалистами-экспертами. По мере того, как в базу вкладывается все больше фактического материала и знаний опытных специалистов, создаются предпосылки для более тонкой дифференциации педагогических явлений и повышения эффективности управления.

11) Произведена оптимизации процедур тестирования знаний обучаемых на базе адаптации теоретических основ планов контроля качества промышленных изделий к условиям автоматизированного тестирования студентов в вузе. На основании достигнутых математическим моделированием результатов об исследовании характера распределений в оценках контроля, возможно использование методов последовательного контроля качества группы объектов, утвержденные в государственных стандартах и используемые в промышленности. Использование последовательного плана выборочного контроля с оценкой риска преподавателя (выставить завышенную оценку) и риска студентов (получить заниженную оценку) в системе тестового контроля проводится впервые. Осуществлено имитационное моделирование планов выборочного контроля, разработано программное обеспечение процедуры тестирования с оценками рисков преподавателя и обучаемого, практика применения которого показала значительное сокращение времени на процедуру тестирования.

12) Разработаны математические модели педагогических контрольных процедур, позволяющие производить коррекцию показателей уровней знаний в студенческих группах и оптимизировать временные затраты. Выявленные статистические закономерности и построенные математические модели распределения знаний в группах студентов применены к результатам компьютерного тестирования в вузе и к результатам проверки знаний на ЕГЭ для фильтрации случайных факторов (угаданных ответов). Получены объективные показатели распределения реальных знаний в исследуемой студенческой группе, исправлен завышенный средний балл при компьютерном тестировании с использованием представленного метода математического моделирования. Исследование результатов тестирования на результатах ЕГЭ с использованием аналогичной модели позволило получить ранжирование дисциплин по выраженности элементов знания, умения и творческих навыков в итоговых оценках, а также оценить валидность тестов.

Таким образом, настоящим исследованием впервые поставлены и решены задачи статистического анализа данных педагогических измерений (текущего и итогового контроля групп студентов), выявлены новые статистические закономерности в педагогических измерениях, разработаны новые квалиметрические методы диагностики качества образовательной деятельности, оценены погрешности в измерительных данных по результатам обучения. Полученные решения введены в алгоритм диагностики качества обучения в вузе на основе автоматизированной экспертной системы для оценки качества образовательной деятельности преподавателей и студентов. Результат работы экспертной системы - диагностическое заключение, рекомендации для организационно-управленческих структур вуза. Применение данного информационного средства позволяет провести внутривузовскую диагностику качества обучения, сократить объемы данных требующих анализа во внутривузовском мониторинге и уменьшить экономические затраты на диагностику качества обучения. Результаты диссертационного исследования внедрены в КГТУ им. А.Н. Туполева и КГЭУ.

Список литературы диссертации автор научной работы: кандидата педагогических наук, Левина, Елена Юрьевна, Казань

1. Абдуллина О.С. Демократизация образования и подготовки специалистов / О.С. Абдуллина // Высшее образование в России. 1996. - № 1. — С. 73-78.

2. Аванесов B.C. Композиция тестовых заданий: учебное пособие / В. С. Аванесов. — М.: Ассоциация инженеров-педагогов, 1996. — 191с.

3. Аванесов B.C. Математические модели педагогического измерения / B.C. Аванесов. -М.: Бином, 1994. 26с.

4. Аванесов B.C. Научные проблемы тестового контроля знаний: монография / B.C. Аванесов. М.: Исследовательский центр проблем качества подготовки специалистов, 1994. - 135с.

5. Аванесов, B.C. Основы научной организации педагогического контроля в высшей школе / B.C. Аванесов. -М.: Высшая школа, 1989. 128с.

6. Айвазян З.С. Прикладная статистика в задачах и упражнениях: учебник для вузов / З.С. Айвазян, B.C. Мхитарян. М.:ЮНИТИ-ДАНА, 2001,-162с.

7. Айнштейн В.Г. В мире учебных технологий / В.Г. Айнштейн //Высшее образование в России. 1996. - № 2. - С. 122-126.

8. Акматов А. А. Оценка качества образования: обзор международного опыта // Исследование ЕСОК: Международная Стратегическая Группа Экспертов. http://www.edc.in.kg/conferencel/13.doc.

9. Александров В.В. Анализ данных на ЭВМ / В.В. Александров,

10. A.И. Алексеев, Н.Д. Горский. М.: Финансы и статистика, 1990. — 192с.

11. Александров А.Ю. Информационные технологии мониторинга высшего образования / А.Ю. Александров // Конгресс конференций «Информационные технологии в образовании» ИТО-2003: http://www.ito.ru.

12. Анфилатов B.C. Системный анализ в управлении: учебное пособие /

13. B.C. Анфилатов, A.A. Емельянов, А.А Кукушкин // Под ред. A.A. Емельянова. М. : Финансы и статистика, 2002. - 368с.

14. Аргунова К.Д. Взаимодействие признаков в регрессивных моделях / К.Д. Аргунова // Социологические исследования. — 1987. — №2. С. 16-22.

15. Артемов A.B. Модульно-рейтинговая система / А. В. Артемов, И. Н. Павлов, Т. П. Сидорова // Высшее образование в России. 1999. — №4.-С. 121-125.

16. Артемьева Е.Ю. Сборник задач по теории вероятностей и математической статистике для психологов / Е.Ю. Артемьева. М.: Изд. Московского университета, 1969.-207с.

17. Бабанский Ю.К. Проблемы повышения эффективности педагогических исследований: дидактический аспект / Ю.К. Бабанский. — М.: Педагогика, 1982.-207с.

18. Баканов М.И. Теория экономического анализа / М.И. Баканов, А.Д. Шеремет. -М.: Финансы и статистика, 1996. -192с.

19. Бартоломью Д. Стохастические модели социальных процессов /I

20. Д. Бартоломью / под ред. О.В. Староверова. —М.: Финансы и статистика, 1985, 295с.

21. Беспалова P.JI. Статистика: теория и практика: учебное пособие / Р. JI. Беспалова. Тула: Изд-во Тул. гос. пед. ун-та им. Л.Н.Толстого, 1999. — 240с.

22. Беспалько В.П. Некоторые вопросы педагогики высшего образования / В. П.Беспалько. Рига: Рига, 1972. — 248с.

23. Беспалько В.П. Педагогика и прогрессивные технологии обучения /В.П. Беспалько. М.: Ин-т проф. обр. РАО, 1995. - 336с.

24. Боровиков В.М. Statistica: исскуство анализа данных на компьютере / В.М. Боровиков. СПб.: Питер, 2001. - 656с.

25. Буравлев А.И. Выбор оптимальной длины педагогического теста и оценка надежности его результатов / А.И. Буравлев, В.Ю. Переверзев // Дистанционное образование—он-лайн конференция http:/ /conference.mdpu.org.ua.

26. Галочкин А.И. Проблемно-модульная технология обучения — путь к новому качеству образования / А.И. Галочкин и др. / Квалиметрия человека и образования: сб. науч.тр. IVсимпозиума./ Москва.Исследовательский центр- М., 1995. С. 233-224.

27. Глудкин О. П. Всеобщее управление качеством: учеб. для вузов / О.П. Глудкин, Н.М. Горбунов, А.И. Гуров. М.:ЮНИТИ-ДАНА, 1999- 600 с.

28. Гмурман В.Е. Теория вероятностей и математическая статистика: учеб. пособие для вузов /В.Е. Гмурман. 9-е изд., стер. -М.: ВШ, 2003.—479с.

29. Гороховатская Н.В. Оценка качества в образовании: цель или средство? / HB. Гороховатская // Контроль качества и оценка в образовании: Материалы международной конференции. СПб.: Изд-во РГПУ имени А.И.Герцена, 1998.-С. 133-137.

30. Горчаков A.A. Компьютерные экономико-математические модели / A.A. Горчаков, ИВ. Орлова. -М.: Компьютер, 1995. 136с.

31. ГОСТ ИСО 9001-2001 Системы менед жмента качества и сертификация / Госстандарт России.

32. ГОСТ Р-50779.71-99 Статистические методы. Основные положения / Госстандарт России. М.: ИПК Издательство стандартов, 2001.

33. Горбань А.Н. Нейронные сети на персональном компьютере / А.Н. Горбань, Д. Н. Россиев. Новосибирск: Наука. Сибирская издательская фирма РАН, 1996. - 276с.

34. Грабарь М.И. Применение математической статистики в педагогических исследованиях. Непараметрические методы / М.И. Грабарь, К.А. Краснянская. -М.: «Педагогика», 1977.-136с.

35. Граничила O.A. Статистические методы психолого-педагогических исследований: учебное пособие / О А. Грачинина. СПб.: Изд-во РГПУ им. AM. Герцена, 2002.-48 с.

36. Давыдов B.B. Теория развивающего обучения / В.В. Давыдов. — М.: Педагогика, 1996. 541с.

37. Добреньков В.И. Методы социологического исследования / В.И. Добреньков, А.И. Кравченко М.: ИНФРА-М, 2004. - 768с.

38. Дрейпер Н. Прикладной регрессионный анализ /Н. Дрейпер, Г. Смит. -М.: Статистика, 1973. -392с.

39. Елисеева И.И. Общая теория статистики: учебник для вузов / И.И. Елисеева, М.М. Юзбашев / Под ред. ИИ Елисеевой.—4-е изд., перераб. и доп. —

40. Финансы и статистика, 2002.—480с.

41. Елисеева И.И. Логика прикладного статистического анализа / ИИЕлисеева, В.О. Рукавишников.—М.: Финансы и статистика, 1982. 192 с.

42. Ермолаев О.Ю. Математическая статистика для психологов / О.Ю. Ермолаев. М.: Моск. филос. Фонд, 2003. - 48с.

43. Загвязинский В.И. Методология и методика дидактического исследования / В.И. Завзягинский. — М.: Педагогика, 1982. —160с.

44. Закон Российской Федерации О высшем и дополнительном профессиональном образовании // Сб. законодательных актов Российской Федерации. М., 1992.

45. Закон Российской Федерации «Об образовании» // Высшее образование в России. 1992. -№3. - С. 5-36.

46. Захарова И.Г. Информационные технологии в образовании: учебное пособие для студентов вузов / И.Г.Захарова. М.: Издательский центр «Академия», 2003. - 192с.

47. Ибрагимов Г.И. Критерий оценки качества подготовки специалистов среднего звена / Г.И Ибрагимов // Специалист. -2003. №1. - С. 32-34.

48. Идиатулин B.C. Когнитивная технология обучения студентов / B.C. Идиатуллин. Ижевск: ШЕП, 2002. - 180с.

49. Идиатулин B.C. Технологические подходы к обучению / B.C. Идиатуллин // Интернет-журнал "Эйдос": http: // www.eidos.ru/journal /2004/1017. htm.

50. Ильенкова С.Д. Управление качеством: учебник для вузов /С.Д. Ильенкова, ИД. Ильенков, B.C. Мхитарян и др. / Под ред. С.Д. Ильенковой. М.: Банки и биржи, ЮНИТИ, 1998. - 199с.

51. Кадакин В.В. Компьютерная система для мониторинга и диагностики качества учебного процесса / В.В. Кадакин и др. // Интеграция образования. -2001. №4. - С. 46-48.

52. Каримов A.A. Основы системы мониторинга и управления качеством высшего образования / A.A. Каримов, Л.В.Перегудов. Ташкент: Икгисодчи, 2003. - 127с.

53. Касимов P.A. Рейтинг в вузе: Закономерное и случайное / Касимов P.A. // Высшее образование в России. 1994. — № 3. — С. 66-71.

54. Качалов В.И. Проблемы управления качеством в вузах. Заметки менеджера по качеству / В.И. Качалов // Стандарты и качество. 2000. - № 5-7.-С. 9-12.

55. Квин В. Прикладная психология / В. Квин- СПб.: Питер, 2000. -316с.

56. Клайн П. Введение в психометрическое программирование. Справочное руководство по конструированию тестов / П. Клайн. — Киев: ПАН Лтд, 1994.-276с.

57. Кларин М.В. Инновации в мировой педагогике / М.В. Кларин. — Рига: НПЦ Эксперимент, 1995 176с.

58. Колясникова Л.В. Организационные условия подготовки педагогов профессиональной школы к диагностике результатов обучения: Дис. канд. пед. наук : 13.00.08 Екатеринбург, 2003

59. Кондаков И.М. Методологические проблемы мониторинга образования / И.М. Кондаков // Журнал прикладной психологии. — 2002 — №2,-С. 8-19.

60. Корнилова Т.В. Принятие интеллектуальных решений в диалоге с компьютером / Т.В. Корнилова, O.K. Тихомиров. М., 1990 - 198с.

61. Круглов М.Г. Управление качеством. TQM / М.Г. Круглов, Г.М. Шишков. -М.: МГТУ «Сганкин», 1999.-234с.

62. Крюков B.C. Оптимизированная обработка данных тестирования / B.C. Крюков, А.О. Татур // Информационные технологии в образовании: сб. тезисов докладов УП Международной конференции-выставки (1998): http://www.itD.ru.

63. Кулаичев А.П. Методы и средства анализа данных в среде Windows / А.П. Кулаичев. М.: ИнКо, 2006. - 186с.

64. Купер К. Индивидуальные различия / К. Купер. М.: Аспект Пресс, 2000. -526с.

65. Курамшин, И .Я. Дидактика высшей школы: учебное пособие в схемах и таблицах / И.Я. Курамшин, В.Г. Иванов Казань, КГТУ, 2000 - 72 с.

66. Куртон Е.Б. Управление образованием в условиях рынка / Е.Б .Куртон.-М.: Новая школа, 1997 144с.

67. Кыверялг A.A. Методы исследований в профессиональной педагогике / A.A. Кыверялг. Таллин: Валгус, 1980. - 334с.

68. Кэндалл М. Ранговые корреляции / М. Кэндалл — М.: Статистика, 1975.-216с.

69. Липский И.А. Содержательно-функциональная концепция методологического анализа научного знания / И.А. Липский // Психолого-педагогический журнал "Гаудеамус" Тамбовского государственного университета. 2004. - № 2(6). -С. 18-31.

70. Люсина С.Н. Контроль знаний в дистанционном обучении на основе искусственного интеллекта / С.Н. Люсина, И.С. Кабак // Информатизационные средства и технологии: труды международной научно-технической конференции. — М.: МФТИ. 2005, С. 34-38.

71. Майоров А.Н. Тесты школьных достижений: конструирование, проведение, использование / А.Н. Майоров — СПб.: Образование и культура, 1996.-304с.

72. Мануйлов В. Современные технологии в инженерном образовании / В. Мануйлов, В. Федоров, М. Благовещенская // Высшее образование в России. — 2003. — №3.-С. 117-123.

73. Машбиц Е.И. Психолого-педагогические проблемы компьютеризации обучения / Е.И. Машбиц- М.: Московский психолого-социальный институт, 1998. -42с.

74. Математическое моделирование социальных процессов / под ред. Д. А. Березина. -М.: Мысль, 1989. 56с.

75. Методы системного педагогического исследования / под ред. проф. Н.В. Кузьминой — Ленинград: Изд-во ленинградского ун-та, 1980. — 171с.

76. Миклушевский В.В. Инновации в управлении вузом: новые решения для корпоративной информационной системы /В.В. Миклушевский и др. // Национальный проект и образование. 2006.- №4. - С. 16-24.

77. Михеев В.И. Моделирование и методы теории измерений в педагогике / В.И. Михеев М.: Высшая школа, 1987 - 156с.

78. Мишин В.М. Управление качеством. Учебное пособие для вузов / В.М. Мишин. М.: Юнити-дана, 2002. - 303с.

79. Моисеев В.Б. Информационный подход к выбору решений в системах адаптивного тестирования / В.Б. Моисеев, Л.Г. Пятирублевый, K.P. Таранцева // Анализ качества образования и тестирование: Материалы конференции. — М.: МЭСИ, 2001.-С. 127-131.

80. Моисеев В.Б. Статистический подход к принятию решений по результатам тестирования для тестов открытой формы / В.Б.Моисеев и др. // Открытое образование. 2001. —№ 1 — С. 51-57.

81. Моисеев В.Б. Оценивание результатов тестирования на основе экспертно-аналитических методов / В.Б.Моисеев и др. // Открытое образование 2001,-№ 3. - С. 32-36.

82. Молчанов И.Н. Мониторинг сферы высшего профессионального образования как комплексная система контроля и управления его развитием / И.Н. Молчанов // Вопросы статистики 2002 - № 11. - С. 60-64.

83. Мухаметзянова Г.В. Профессиональное образование: Проблемы качества и научно-методического обеспечения / Г.В. Мухаметзянова — Казань: Магариф, 2005.- 319с.

84. Мухаметзянова Г.В. Мониторинг и оценка качества подготовки специалистов среднего звена / Г.В. Мухаметзянова, В.Н.Смирнов, О.Р. Клюева. Казань: ИСПО РАО, 2004. - С. 52-64.

85. Национальная доктрина образования в Российской Федерации // Образовательный сервер: http: //www.humanities.edu.ru/

86. Нейман Ю.М. Вводный курс теории вероятностей и математической статистики / Ю.М. Нейман. М.: Наука, 1968. - 258с.

87. Нейман Ю.М. Введение в теорию моделирования и параметризации педагогических тестов / Ю.М. Нейман, В.А. Хлебников. — М.: Прометей, 2000- 170с.

88. Нардюжев В.И. Модели и алгоритмы информационно-вычислительной системы компьютерного тестирования // В.И. Нардюжев, И.В. Нардюжев. -М.: Прометей, 2000.-147с.

89. Нуждин В.Н. Стратегия и тактика управления качеством образования: методическое пособие / В.Н. Нуждин и др.. — Иваново: Изд. ИГЭУ, 2003.-252с.

90. Нуриев Н.К. Организация мониторинга обучения на основе количественного ситуационного анализа: функциональные и методическиеаспекты деятельности университетских комплексов / Н.К. Нуриев. — Казань, 2002. 254с.

91. Ньюман JI. Анализ качественных данных / JI. Ньюман // Социологические исследования. — 1998. №3, 6, 12.

92. Образцов П.И. Психолого-педагогические аспекты разработки и применения в вузе информационных технологий обучения / П.И. Образцов-Орел: Орловский государственный технический университет, 2000 — 145с.

93. Обучение и развитие / Под ред. JI.B. Занкова. М.: Педагогика, 1975.-245с.

94. Овчаров JI.A. Прикладные задачи теории массового обслуживания / JI. А. Овчаров. М.: Машиностроение, 1969-323с.

95. Околелов О.П. Современные технологии обучения в вузе / О.П. Околелов // Высшее образование в России — 1994 — № 2 — С. 45-50.

96. Орлов А.И. Теория измерений и педагогическая диагностика /А. И. Орлов // Педагогические измерения. 2004. -№5 - С. 20-26.

97. Оценка качества подготовки будущих учителей / Под ред. Т. В. Мурновской Тула: Изд-во Тул. гос. пед. ун-та. - 2002, 144с.

98. Павлова И.Н. О проблеме угадывания правильного ответа в тесте / И.Н. Павлова, A.B. Одиноков // Информационные технологии в образовании (Конгресс конференций ИТО-2003): http://www.ito.ru.

99. Педагогика: учебное пособие для студентов педагогических учебных заведений / В.А. Сластенин и др..- М.: Пресса, 1997. 512с.

100. Поташкин М.М. Качество образования: проблемы и технологии управления (В вопросах и ответах) / М.М. Поташкин М.: Педагогическое общество России, 2002 - 352с.

101. Приказ Минобразования России от 17.02.2004 № 273-24 Основные направления развития статистики и мониторинга образования на 2004-2006 г // Приложение к распоряжению Минобразования России.

102. Прохоров А.О. Компьютеризация образования и проблема исследования психических состояний / Прохоров А.О., Дмитриева JI.M.,

103. Сережкина А.Е. // Отчетная научно-методическая конференция: сб.докл.— Казань, КХТИ, 1994.- С. 29.

104. Процедуры оценки качества в Европейском высшем образовании. Исследование ЕСОК // Международная Стратегическая Группа Экспертов: http://www.iseg.ru/sessions/s6/dieced.doc.

105. Пятирублевый Л.Г. Оценка эффективности образовательных тестов / Л.Г. Пятирублевый, K.P. Таранцева // Сервер AHO «ИТО» и Московского центра Интернет-образования образования: http://www.ito.ru.

106. Пятковский О.И. Интеллектуальные компоненты автоматизированных информационных систем управления предприятием: Монография / О.И. Пятковский. -Барнаул: АлгПУ, 1999. -351с.

107. Родионов Б.У. Стандарты и тесты в образовании / Б.У. Родионов,

108. A.О. Татур. М.: МИФИ, 1995.- 48с.

109. Решение математических задач средствами Excel: практикум /

110. B.Я. Гельман. СПб.: Питер, 2003.- 240с.

111. Рудинский И. Д. Методы и модели интеллектуального автоматизированного контроля знаний: реферат / И.Д. Рудинский- Калининград: Изд. КТУ, 2001.-55с.

112. Рудинский И.Д. Основы формально-структурного моделирования систем обучения и автоматизации педагогического тестирования знаний / И.Д. Рудинский М.: Горячая линия - Телеком, 2004. - 204с.

113. Рудинский ИД. Статистические методы вывода оценки результатов автоматизированного тестирования / И.Д. Рудинский, С.В. Грушецкий // Международный конгресс конференций "Информационные технологии в образовании" ИТО-2003: http://www.ito.ru.

114. Рудинский И.Д. Модель нечеткого оценивания знаний как методологический базис автоматизации педагогического тестирования / И.Д. Рудинский // Информационные технологии. 2003.- № 9.— С. 46—51.

115. Савельева Л. А. Роль информационных технологий в педагогическом мониторинге / Л.А. Савельева // Международный конгрессконференций "Информационные технологии в образовании" ИТО-2003: http://www.ito.ru.

116. Сборник нормативно-методических материалов: для специалистов, осуществляющих функции по надзору и контролю в сфере образования / Н.Г. Ярошенко и др.. -М.: АПК и ППРО, 2006. 128с.

117. Сластенин, В. А. Учебное пособие для студентов высших педагогических учебных заведений / В.А. Сластенин, И.Ф. Исаев, E.H. Шиянов / под ред. В.А. Сластенина. М.: Издательский центр "Академия", 2002. —576с.

118. Стандарты и директивы для агентств гарантии качества в высшем образовании на территории Европы / Европейская Ассоциация Гарантии Качества в Высшем Образовании: http://www.edu.ru.

119. Степанко А.И. Качество мониторинга и информационные технологии / А.И. Степанко // Международный конгресс конференций «Информационные технологии в образовании» ИТО-2003: // http://www.ito.ru.

120. Смирнов С.Д. Педагогика и психология высшего образования: учебное пособие для вузов / С.Д. Смирнов.—М.: «Академия», 2005 400с.

121. Сочивко Д.В. Математические модели в психолого-педагогических исследованиях: Учебное пособие / Д.В. Сочивко, В.А. Якунин—JL: ЛГУ, 1988. — 68с.

122. Субетто А.И. Качество образования: проблемы оценки и мониторинга / А.И. Субетто // Образование 2000. - №2. - С. 62-66.

123. Субетто А.И. Российский Союз ректоров и стратегия развития высшей школы России (Итоги десятилетнего периода: 1992 2002) / А.И. Субетто // Сайт Академии Тринитаризма: http://www.trinitas.ru/

124. Субетто А.И. Система управления качеством в вузе (модель) / А.И. Субетто. М.: Академия, 2002. - 24с.

125. Талызина Н.Ф. Теоретические проблемы программированного обучения / Н.Ф. Талызина М.: Изд-во Московского университета, 1969. — 134с.

126. Талызина Н.Ф. Управление процессом усвоения знаний / Н.Ф. Талызина.-М.: МГУД984.-344с.

127. Технология мониторинга качества обучения в системе "учитель-ученик": методическое пособие для учителя / под ред. Кальней В.А. — М.: Педагогическое общество России, 1999;-86с.

128. Терехина А.Ю. Анализ данных методами многомерного шкалирования / А.Ю. Терехина. — М.: Наука, 1986.-168с.

129. Тимофеев A.B. Роботы и искусственный интеллект / A.B. Тимофеев. — М.: "Наука", 1978.-192с.

130. Тюрин, Ю.Н. Статистический анализ данных на компьютере / Ю.Н. Тюрин, A.A. Макаров / под ред. В.Э. Фигурнова. М.: ИНФРА-М, 1998.- 528с. ; 1 ' •

131. Унт, И. Индивидуализация и дифференциация обучения / И. Унт. М.: Педагогика, 1990. - 188с.

132. Федорищева О.И. К вопросу о мониторинге системы высшего профессионального образования / О.И: Федорищева, В.Г. Шуметов // Сайт ОРАГС: http://www. eduhmao.ru

133. Хан Г. Статистические методы в инженерных задачах / Г. Хан, С. Шапиро / под ред. Налимова B.B. М.: Мир, 1969- 395с.

134. Хей Дж. Введение в методы байесовского статистического вывода / Дж. Хей. -М.: Финансы и статистика, 1987. 335с.

135. Челышкова М.Б. Математические модели современной теории тестов / М.Б. Челышкова // Научные проблемы тестового контроля знаний: сб. тез. докл. школа-семинар. — М.: Исслед. центр, 1994 — С. 32-36.

136. Челышкова М.Б. Методические рекомендации по разработке педагогических тестов для комплексной оценки подготовленности студентов в вузе / М.Б. Челышкова. — М.: Исслед.центр, 1995 86с.

137. Челышкова М.Б. Разработка педагогических тестов на основе современных математических моделей / М.Б. Челышкова.-М.: Исслед. центр, 1999.-31с.

138. Челышкова М.Б. Теория и практика конструирования педагогических тестов / М.Б. Челышкова. М.: Исслед. центр, 2001. — 359с.

139. Чилап А.Я. К тестированию студентов / Чилап А.Я., Хамзин А.А. // Управление качеством профессионального образования: от проблемы к системе: Материалы международной научно-методической конференции. — Казань: Изд. КГЭУ, 2005.- С. 232.

140. Чошанов М.А. Гибкая технология проблемно-модульного обучения / М.А. Чошанов.— М.: Народное образование, 1996 152с.

141. Эрганова Н.В. Методика профессионального обучения: учебное пособие / Эрганова Н.Е.-Екатеринбург: Изд-во Рос. гос. проф.-пед. ун-та, 2003.- 150 с.

142. Яковлев Е.В. Квалиметрический подход в педагогическом исследовании: новое видение / Е.В. Яковлев // Педагогика, № 3.-1999.-С. 49-54.

143. Barnet R. Improving higher éducation: total quality care / R Barnet. SRHE and Open University Press, 1992.

144. Dinya L. Transformation processes in higher éducation: more market, less government / L. Dinya // Tertiary Education and Management. Vol. 3. No. 2. 1997.-P. 113-118.

145. El-Khawas E. Accréditation's role in quality assurance in the United States / E. El-Khawas // Higher Education Management, November 1998. Vol. 10. No. 3.-P. 43-56.

146. El-Khawas E. Internal review to Assure quality: comparative perspectives on evolving practice / E. El-Khawas, T. Thah // Tertiary Education and Management. Vol. 4. No. 2. 1998.- P. 95-101.

147. Gordon G. Approaches to effective internal processes to quality management: an initial analysis / G. Gordon // Tertiary Education and Management. Vol. 4. No. 4, 1998.-P. 295-301.

148. Harvey L. External quality monitoring in the market place / L. Harvey // Tertiary Education and Management. Vol. 3. No. 1, 1997 P. 25-35.

149. Harvey L. Quality is not free! Quality monitoring alone will not improve quality / L. Harvey // Tertiary Education and Management. Vol. 3. No. 2, 1997.-P. 133-143.

150. Jacobsson P. A Plea for more consistent definition of quality in education and research / P. Jacobsson // Quality and communication for improvement: proceedings 12th European AIR Forum: Lion: Lemma, 1990—P. 5984.

151. Kristensen B Quality Assessment at a multinational level / B. Kristensen, M. Plannthin // Tertiary Education and Management. Vol. 4. No. 2, 1998.-P. 103-113.

152. Martin J. Application development without programmers. /J. Martin-Englewood Cliffs, 1982.

153. Mclnnis C. Defining and assessing the student experience in the quality management process / C. Mclnnis // Tertiary Education and Management. Vol.3. No. 1, 1997.-P. 63-71.

154. Method for the Improvement of the Quality of Higher Education in Accordance with the EFQM Model, the Hanzehogeschool, Hogescool van Groningen, English version // http://www.enqa.net.

155. Quality Assurance Implications of New Forms of Higher Education // European Network for Quality Assurance: http://www.enqa.net

156. Quality Assurance: A Reference System for Indicators and Evaluation Procedures // European Association of Universities: http://www.eua.be/eua/jsp/en/upload

157. Moller K Stakeholders and quality: dimensions of inspiration and control / K. Moller, E. Iversen // Centre for Quality Assurance and Evaluation of Higher Education: http://www.cqae.be/eua

158. The sectoral quality assurance project hob in the Netherlands (The framework for assessing quality; the cornerstone of the visitation process), Association of Dutch Polytechnics and Colleges—The Hague, 1993.

159. Thune C. The European system of quality assurance dimensions of harmonisation and differentiation / C. Thune // Higher Education Management, November 1998, Vol. 10. No. 3. -P. 9-26.

160. Vroeijestijn T. I. Control oriented versus improvement oriented quality assessment / T. I. Vroeijenstijn, H. Acherman // Peer review and performance indicators: quality assessment in British and Dutch higher education

161. Utrecht: Lemma, 1995. P. 81 -101.

162. Wahlen S. Is there a Scandinavian model of evaluation of higher education? / S. Wahlen // Higher Education Management: Vol. 10. No. 3, 1998. -P.27-42.

163. Westerheijden D. F. Peers, performance and power: quality assessment in the Netherlands / D. F. Westerheijden // Peer review and performance indicators: quality assessment in British and Dutch higher education-Utrecht: Lemma, 1994.-P. 183-207.

164. Westerheijden D. F. Systems of quality assessment in European higher education /D. F. Westerheijden // the 4-thEAIE Conference-Berlin, 1992.

165. ИСПОЛЬЗОВАНИЕ МОМЕНТОВ ВЫСШЕГО ПОРЯДКА ДЛЯ АНАЛИЗА ЭКСПЕРИМЕНТАЛЬНЫХ ДАННЫХ МОНИТОРИНГА.

166. Рис.1.1. Зависимость коэффициента асимметрии от среднеквадратического отклонения1. СКО (Среднее)1. ГИПЕРГЕОМ- БИНОМа Эксперимент — — Полиномиальный1. Среднее

167. Рис.1.2. Зависимость среднеквадратического отклонения от среднегобалла

168. Рис. 1.3. Зависимость коэффициента асимметрии от среднего значения

169. Рис 1.4. Зависимость коэффициента эксцесса от среднего балла

170. Рис.1.5. Зависимость коэффициента эксцесса от коэффициентаасимметрии

171. Рис.1.6. Распределение оценок, КГПУ

172. СТАТИСТИЧЕСКОЕ РАНЖИРОВАНИЕ УЧЕБЫХ ДИСЦИПЛИН

173. Рис.2.1. Ранжирование учебных дисциплин методом моментов.

174. Предметы экономического цикла, которые требуют знания как гуманитарных, так и математических дисциплин, скоплены в области близкой к нулю, то есть средний балл в группах примерно 3.6, то есть оценки в группе распределены симметрично по всем баллам.

175. ИСПОЛЬЗОВАНИЕ МЕТОДА МОМЕНТОВ ДЛЯ ДАННЫХ ТЕКУЩЕГО КОНТРОЛЯ.

176. Были взяты наборы аттестационных оценок текущего контроля (оценивание велось по пятибалльной шкале) 40 групп студентов, каждой оценке x¡ ставился в соответствие балл y¡ = 5-x¡ .

177. Рис. 3.1. Итоги аттестации по начертательной геометрии (КАИ).

178. Рис. 3.2. Распределение баллов по начертательной геометрии1. КАИ).

179. Рис. 3.3. Использование метода моментов для мониторинга по текущему контролю знаний

180. ПЛАНЫ ВЫБОРОЧНОГО КОНТРОЛЯ1. Одноступенчатый план

181. Таким образом, для реализации одноступенчатого плана необходимо, чтобы параметры плана п, с для данного N были заранее между приемщиком и поставщиком согласованы. Этот план методически является наиболее простым.1. Двухступенчатый план

182. Двухступенчатый план контроля проводится на основе заранее согласованных числовых значений параметров плана пь сь Ьь п2, с2.

183. Таким образом, аналогично одноступенчатому плану контроля, по некоторой выборке делается вывод о состоянии всей совокупности, при этом контроль проходится дважды, для уточнения результата.1. Многоступенчатые планы

184. Тактика контроля следующая. Первоначально берется частная выборка объемом П. и определяется число дефектных изделий с^. Если с!] < С , то партия принимается. В другом случае, если с^ > Ь>1 , то партия бракуется.

185. Если на к-м шаге среди п = П. + п2 + п3 + .+ п + п к проконтролированных изделий этой объединенной выборки окажется с!к дефектных и с!к < Ск , то партия принимается; если же <4 > ск партия бракуется.

186. В многоступенчатых планах число шагов обычно принимается, что П! = п2 = . = пы = пк. Результат получается более точным и обоснованным при многоступенчатом контролер однако требует наибольшей трудоемкости.1. Последовательный контроль

187. В последовательном контроле общее число к частных выборок заранее не устанавливается. Оно определяется в процессе контроля исходя из результатов сделанных на предыдущих этапах контроля к-1 частных выборок.

188. ОПЕРАТИВНАЯ ХАРАКТЕРИСТИКА КОНТРОЛЯ.

189. Экзамен принимается, если число Б неверных (дефектных) ответов не превышает определенную величину Брг дефект приемки (например, при Б < Брг = 25).

190. Экзамен не принимается, если Э больше или равно величине БЬг -дефект брака (например, при Б > БЬг = 30).

191. В противном случае, т.е. при Брг < Б < БЬг, партия подвергается сплошному контролю для замены дефектных изделий на качественные.

192. Метод контроля выборочный. Размер выборки п и приемочное число с определяются из следующих условий.

193. Размер выборки п определяется расчетным путем. При этом среди всех п, обеспечивающих риски в пределах от 0 до Я, выбирается минимальное значение.

194. Риск студента R1 и преподавателя R2 определяются выражениями: Rl=l-P(Dpr), R2=P(Dbr),

195. Выборочная приемка с использованием ОХК требует проведения громоздких расчетов, для проведения которых необходим персональный компьютер.

196. ИССЛЕДОВАНИЕ РЕЗУЛЬТАТОВ ЕГЭ

197. Иллюстративный материал по каждому предмету представлен на рис. 7.1-7.12.