Технология мониторинга качества образовательного процесса в системе повышения квалификации

В статье рассматриваются сущность мониторинга качества курсовой подготовки педагогов в системе повышения квалификации и условия его организации, обозначены основные признаки его технологи-зации. Определено содержание понятия «образовательная услуга» в системе повышения квалификации. Отмечается, что подходы к оценке качества в режиме мониторинговых исследований строятся на основе оценки самого процесса образования, результата обучения, соответствия результа­та обучения поставленным целям, требованиям и удовлетворенности потребителей качеством образо­вательных услуг. Представлен опыт Карагандинского института повышения квалификации по прове­дению мониторинга качества образовательного процесса.

Одним из основных компонентов структуры педагогического менеджмента является мониторинг как процесс получения и переработки информации о ходе и результате образовательной деятельно­сти для принятия на этой основе определенного управленческого решения.

В.А.Якунин всякое управление рассматривает как процесс упорядочения системы, который на­правлен на уменьшение неопределенности ее состояний, вызываемой деструктивными воздействия­ми на систему извне и изнутри. Процесс упорядочения, на его взгляд, связан с ограничением степе­ней свободы исполнительных структур системы и приведением их в соответствие с конечной целью и заданным результатом [1; 26].

По мнению Э.Ф.Зеера, понятие мониторинга близко к общенаучным педагогическим и психоло­гическим понятиям обратной связи, рефлексии, контроля, аттестации, однако данные процессы яв­ляются лишь отдельными элементами мониторинга или его частными случаями [2; 71]. В связи с этим мониторинг имеет ряд отличительных особенностей. Во-первых, он представляет собой цело­стную систему, реализующую множество функций (непрерывный сбор информации, ее структуриро­вание, анализ, передача данных для использования в управлении и др.). Во-вторых, можно выделить следующие аспекты мониторинга, которые отличают его от других близких или похожих педагогиче­ских и психологических процессов:

• непрерывность (постоянный сбор данных);
• диагностичность (наличие модели или критериев, с которыми можно соотнести реальное со­стояние отслеживаемого объекта, системы или процесса);
• проблемная ориентированность (включение в состав критериев отслеживания наиболее про­блемных показателей и критериев, на основании которых можно делать выводы о недостатках в отслеживаемых процессах);
• технологичность критериев отслеживания (включение в критерии максимального количества информации при сохранении удобства их отслеживания);
• широкий спектр обнаружения изменений (возможность выявления необычных или нетипич­ных результатов);
• научность (научная обоснованность модели и отслеживаемых параметров);
• совершенствуемость (возможность внесения изменений в структуру мониторинга).

Итак, любая система управления качеством должна иметь адекватную поддержку посредством мониторинга как процесса сбора, обработки и передачи информации.

Значительную роль в системе управления качеством в деятельности филиалов АО «НЦПК «Өрлеу» играют обеспечение опережающего характера образовательных программ, учет ожиданий педагогов, опора на социальный заказ со стороны всех потребителей образовательных услуг. Эти функции осуществляет система мониторинга качества образовательного процесса.

Образовательные услуги в системе повышения квалификации педагогов, по мнению ученых-экономистов, обеспечивают потребность в определенных навыках и умениях. Они удовлетворяют потребности отдельных отраслей экономики, предприятий в соответствующей подготовке и переподготовке кадров. Такое потребление образовательных услуг ведет к совершенствованию качества рабочей силы и способствует формированию рабочей силы соответствующей структуры и качества [3; 91].

На основе изучения, обобщения и анализа основных подходов к определению «образовательная услуга» Р.С.Каренов [4; 5] предлагает представить рынок образовательных услуг с точки зрения социально-экономических отношений. В системе повышения квалификации в содержании понятия «образовательная услуга» основой является ее направленность на уровень удовлетворенности образовательных потребностей.

Научные представления о сущности образовательных услуг дают возможность сформулировать определение «образовательная услуга» в сфере повышения квалификации педагогических работников [5, 6]. Таким образом, образовательная услуга в сфере повышения квалификации педагогических работников — это комплексный процесс, направленный на деятельностную передачу педагогам знаний, умений и навыков профессионального характера в ходе образовательной программы, с целью удовлетворения личных, групповых и общественных потребностей в повышении квалификации, развития интеллектуального потенциала личности, организации образования, общества.

Цель мониторинга в системе повышения квалификации — содействие обеспечению качества об­разовательных услуг, предоставляемых педагогам регионов Казахстана.

Подходы к оценке качества в режиме мониторинговых исследований строятся на основе оценки самого процесса образования, результата обучения, соответствия результата обучения поставленным целям, требованиям и удовлетворенности потребителей качеством образовательных услуг.

В научной литературе отмечается, что измерение качества в системе повышения квалификации педагогов вызывает определенные трудности, связанные с особенностями данной образовательной системы. Среди них выделяются такие, как специфика слушателей, имеющих профессиональное об­разование, особенность требований, предъявляемых к реализации учебных программ, к организации учебного процесса, и др. [7; 22]. Эксперты называют следующие параметры качества повышения ква­лификации:

• качество условий, в которых функционирует система повышения квалификации (финансиро­вание, нормативно-правовое обеспечение, санитарно-гигиенические условия образовательного процесса, морально-психологические условия);
• качество субъектов повышения квалификации (профессорско-преподавательский состав учре­ждения повышения квалификации, слушатели-педагоги, обучающиеся в учреждении повыше­ния квалификации. В данном случае к каждой группе субъектов предъявляются еще и свои па­раметры и критерии оценки деятельности);
• качество содержания повышения квалификации (учебные программы и учебно-методические комплексы);
• качество образования (учебный и информационный процессы);
• качество организации повышения квалификации (обеспечение непрерывности профессиональ­ного развития и ее личностной ориентированности) [8; 48].

Признавая необходимость измерения качества всех приведенных параметров, ученые полагают, что технология мониторинговой оценки качества курсовой подготовки должна включать в себя лишь те параметры качества повышения квалификации, которые можно реально оценить в существующих условиях, и те параметры, на которые возможно влиять, учитывая полученную в ходе мониторинга информацию. Под качеством курсовой подготовки представляется возможным понимать соответст­вие образовательных результатов потребностям участников педагогического процесса, социума и го­сударства [9; 14].

Согласимся с мнением российских ученых о том, что мониторинг качества курсовой подготовки в системе повышения квалификации понимается как современная образовательная технология, вклю­чающая в себя системную совокупность и порядок функционирования всех личностных, инструмен­тальных и методологических средств, используемых для достижения педагогических целей [10; 18].

Признаки технологизации, которые отличают мониторинг качества повышения квалификации, выглядят следующим образом:

• разделение процесса на этапы, процедуры, операции;
• координация и последовательность действий, направленных на получение прогнозируемого результата;
• однозначность выполнения процедур и операций.

АО «НЦПК «Өрлеу» на основе изучения международного и отечественного опыта разработаны нормативные документы и единый для всех филиалов диагностический инструментарий мониторин­говых исследований, определены области оценивания, технологии проведения [11].

Разработанный АО «НЦПК «Өрлеу» критериально-оценочный комплекс мониторинга позволяет установить степень соотношения между образовательными запросами слушателей краткосрочных курсов повышения квалификации и возможностями их удовлетворения в системе дополнительного образования, обеспечивает эффективность курсовой подготовки педагогов.

Мониторинг системы повышения квалификации педагогических работников в филиале АО «НЦПК «Өрлеу» ИПК ПР по Карагандинской области (далее — Карагандинский ИПК) предполагает постоянное слежение за состоянием качества курсовой подготовки и послекурсовой деятельности, т. е. так называемого «отсроченного эффекта». Мониторинговые исследования обеспечивают про­фессорско-преподавательский состав и администрацию Карагандинского ИПК обязательным мини­мумом информации о состоянии и развитии тех процессов, за качество которых они отвечают и кото­рыми управляют. При этом информация должна быть максимально полной по объему и содержанию, объективной, конкретной и наблюдаться в динамике.

Изучение теоретического материала и обобщение эмпирического опыта диагностических изме­рений в системе повышения квалификации филиалов АО «НЦПК «Өрлеу» позволяют определить следующие условия организации мониторинга качества курсовой подготовки в системе повышения квалификации:

• характеристика результатов мониторинга как средства системы управления качеством, а не как самоцели;
• интерсубъективность диагностирования, т.е. результаты диагностирования должны быть неза­висимыми от того, кто проводит измерение;
• валидность, т.е. диагностическая методика должна быть пригодна для измерения именно того качества, на которое направлена;
• учет ориентации процесса повышения профессиональной квалификации на личность обучаю­щегося педагога как цель, субъект, результат и главный критерий его эффективности;
• включение в оценку эффективности не только мнения слушателей курсов, полученного «на выходе», но и отсроченного результата;
• репрезентативность выборочной совокупности слушателей (группы, ряда групп), т.е. они должны представлять генеральную совокупность всех лиц, обладающих подобными характе­ристиками;
• соотнесенность технологии мониторинга с полученными результатами ранее разработанной системы показателей и критериев.

Для выполнения работ по изучению и оценке качества краткосрочных курсов повышения квалификации Карагандинским ИПК разработан внутренний нормативный документ — Порядок мо­ниторинга качества краткосрочных курсов повышения квалификации (далее — Порядок).

Порядок определяет последовательность действий мониторинговых процедур [12]. Данный до­кумент четко регламентирует технологию мониторинга качества краткосрочных курсов. В нем указа­ны этапы и процедуры мониторинга, последовательность основных видов измерительных работ, сро­ки их исполнения и предоставления аналитической информации, скоординированы действия ответст­венных лиц.

Диагностическая методика предполагает исходный и итоговый замеры в форме анкетирования и тестирования слушателей, которые проводятся в первый и предпоследний день курсов. В Караган­динском ИПК входная и выходная диагностика производится в электронном режиме. Электронный формат обеспечивает оперативность предоставления преподавателям информации о качественном составе каждой группы, предпочитаемых ими формах обучения, типичных профессиональных за­труднениях педагогов.

Входная диагностика направлена на определение уровня готовности слушателей к освоению со­держания учебной программы и их образовательных потребностей. Как показывают результаты мо­ниторинговых исследований 2014 г., педагоги обучаются на курсах с высокой мотивацией, так как основными целями прибытия на курсы являются:

• потребность в повышении профессиональной компетентности (79,9 %);
• потребность в изучении новых педагогических и информационно-коммуникационных техно­логий образования (55,7 %);
• обмен опытом с коллегами (49,9 %).

54 % педагогов указывают, что курсы повышения квалификации являются для них основным источником инновационной научно-методической информации.

Отмечается позитивная динамика относительно показателей 2013 г. по уровню мотивации педа­гогов к обучению на курсах повышения квалификации, обусловленной личностной потребностью в развитии профессиональной компетентности. При этом предстоящая аттестация, в отличие от пока­зателей 2012-2013 гг., не является преобладающей целью обучения на курсах.

Образовательные потребности слушателей характеризуются следующими особенностями:

• предпочтение активных методов и тренинговых форм обучения;
• участие в выездных практических занятиях на базе образцовых организаций образования;
• приобретение в период курсовой подготовки информации об инновационном международном опыте в системе образования;
• осуществление взаимодействия с ИПК в сфере издательского дела;
• участие в работе сетевого сообщества.

По сравнению с результатами опроса 2013 г. слушатели курсов повышения квалификации 2014 г. отметили высокий уровень влияния курсовой подготовки на профессиональную деятельность.

Полученные данные входной диагностики в соответствии с Порядком мониторинга качества краткосрочных курсов повышения квалификации обрабатываются не позднее 1-го дня после их сбо­ра. На 2-й день курсов аналитическая информация предоставляется координатору курса. Данная ин­формация позволяет принять меры для своевременной адаптации содержания учебной программы адекватно профессиональным запросам педагогов и понять причины, побуждающие их чувствовать необходимость в повышении педагогического мастерства. Следует отметить, что такой этап монито­ринга в системе повышения квалификации до создания АО «НЦПК «Өрлеу» отсутствова. Нужно вы­делить и тот факт, что впервые в системе повышения квалификации на основе выходной диагностики выявляется уровень удовлетворенности слушателей содержанием и организацией курсов повышения квалификации.

Мнение слушателей о курсах повышения квалификации предлагается выявлять относительно следующих взаимосвязанных параметров образовательного процесса:

1. качество организации образовательной среды: совокупность информационного, техническо­го, кадрового, учебно-методического обеспечения;
2. содержательный аспект курсов повышения квалификации: формы, методы, технологии кур­совой подготовки; уровень работы преподавателей;
3. достижение поставленных целей, овладение новыми способами мышления и деятельности, повышение профессиональной компетентности;
4. d) удовлетворенность слушателей, оценка качества курсов администрацией ИПК.
   Указанные параметры оценки отражают именно те компоненты курсовой подготовки, которыми реально можно управлять в рамках системы повышения квалификации.

Именно эти содержательные блоки и составляют основу выходной анкеты, выступающей в каче­стве диагностического инструментария при изучении удовлетворённости слушателей курсов повы­шения квалификации образовательным процессом Карагандинского ИПК [11; 55-57]. При проведении выходного анкетирования гарантируется анонимность респондента, что создает условия для объективного выражения мнения и оценивания.

Качественная организация образовательного процесса в системе повышения квалификации так­же предполагает возможность оперативного обмена информацией между всеми его участниками, предупреждение перегрузки, чёткое распределение функций между всеми субъектами. Организация курсов повышения квалификации, прежде всего, предполагает создание благоприятных условий для профессионального и личностного роста учителя в образовательной среде Карагандинского ИПК.

Содержательная сторона образовательного процесса в Карагандинском ИПК свидетельствует о целях повышения квалификации, реально воплощаемых в предоставляемой слушателям информа­ции, развитии практических навыков, в соответствии или несоответствии с содержанием, влиянии на его изменение и адаптацию, насколько предлагаемое педагогам знание становится для них лично-стно-значимым, востребованным, отражает ли актуальные проблемы современной системы образова­ния.

Организационно-методическое обеспечение образовательного процесса в Карагандинском ИПК является важным фактором повышения его качества, следовательно, выявить позицию слушателей по этому вопросу крайне необходимо. Организационно-методическое обеспечение включает опти­мальный отбор форм и методов деятельности с учётом особенностей системы повышения квалифи­кации, текущий контроль и самоконтроль за результативностью процесса повышения профессио­нальной компетентности слушателя курсов, соответствие методической базы целям и задачам обра­зовательного процесса, соответствие организации образовательного процесса целям развития лично­сти слушателя курсов и его образовательным потребностям.

Особым образом следует выделить проблему взаимодействия участников процесса повышения квалификации. Речь идёт о так называемой социально-психологической стороне образовательного процесса. В качестве обратной связи со слушателями курсов важны оценочные характеристики пси­хологического климата: наличие взаимопонимания и уважения, открытость и взаимопомощь, этика ППС и сотрудников института, т.е. в целом речь идёт о возможности для слушателей ощущать себя на курсах комфортно, уверенно, защищенно. Соответственно, именно эти характеристики можно принять в качестве параметров удовлетворённости социально-психологической стороной образова­тельного процесса в системе повышения квалификации.

Каждый из названных аспектов представлен в выходной (итоговой) анкете слушателей курсов повышения квалификации. Слушатели оценивают по 10-балльной шкале содержание курса, качество преподавания, организацию работы и уровень ресурсного обеспечения.

Результаты мониторинговых исследований качества краткосрочных курсов повышения квали­фикации свидетельствуют об устойчивой позитивной динамике всех показателей качества курсовой подготовки в разрезе 2012-2014 гг. Изучение уровня удовлетворенности слушателей позволяет гово­рить о стабильности позитивной динамики: 79 % слушателей испытывают творческий подъем, 100 % — изменили взгляды на современную организацию процесса обучения. 100 % педагогов отмечают новизну и актуальность содержания курсов повышения квалификации.

Данные 2013-2014 гг. по самооценке педагогов позволяют констатировать тот факт, что к концу обучения повышается их профессиональная компетентность.

С 2013 г. в системе повышения квалификации проводится оценка прогресса успешности освое­ния слушателями программ повышения квалификации посредством сравнения результатов входного и выходного тестирования.

Тесты разрабатываются ППС для каждой учебной программы и представляют собой критери­ально-ориентированные вопросы, что предъявляет достаточно высокие требования к содержанию учебной программы и качеству ее реализации. Технологической основой разработки критериально-ориентированных тестовых вопросов трех уровней (знание, понимание, применение) является таксо­номия Б.Блума. Тестовые вопросы должны соответствовать следующим требованиям:

• направленность на систематизацию фактов и явлений педагогической действительности, понимание проблем образовательной практики, актуализацию профессиональных умений, объеди­нение теоретического и практического знания с выстраиванием собственной линии поведе­ния/мышления;
• пропорциональная представленность объема содержания модулей в соответствующем ко­личестве тестовых вопросов, т. е. их %-ное соотношение по каждому модулю должно соответствовать матрице распределения критериально-ориентированных тестовых заданий по модулям учебной про­граммы повышения квалификации (табл. 1);
• репрезентативность, т.е. обеспечение всесторонней проверки усвоения учебного материала, воспроизведение основных вопросов модулей программы квалификации;
• включение в ТЗ вопросов на «знание» должно быть оправдано значимостью в учебной про­грамме.

Для проверки успешности обучения по каждому модулю учебной программы тесты должны со­ответствовать матрице для электронной обработки результатов. Учебная программа эффективна, ес­ли прирост значений показателей составляет не менее 30 %.

Анализ прогресса успешности освоения содержания учебных программ в 2014 г. составляет 34,2 %, что указывает на оптимальный уровень результативности обучения педагогов и ее положи­тельную динамику. К примеру, в течение 2014 г. в тестировании приняли участие 2993 педагога, что составило 98,94 % от общего числа слушателей. Показатели прогресса успешности освоения на 2,47 % выше аналогичного показателя 2013 г. и на 4,24 % показатели 2-го полугодия 2014 г. превы­шают показатели 1-го полугодия. Оптимальные результаты тестирования обусловлены высоким уровнем мотивации к обучению, готовности слушателей к освоению учебных программ и подтвер­ждают эффективность курсов повышения квалификации.

Один из методов диагностики результатов качества курсовой подготовки — разработка и защита слушателями мини-проектов. Данная форма работы направлена на систематизацию знаний и разви­тие исследовательских навыков. В проектной работе оцениваются умения слушателей, их аналитические и проектировочные навыки, а также их умение определять пути решения профессиональных проблем. Оценивание качества проектных работ слушателей производят коорди­наторы курсов по следующим критериям и индикаторам (табл. 2).

По каждому индикатору выставляется определенное количество баллов, сумма которых перево­дится в традиционные оценочные нормы. Количество баллов по указанным в таблице индикаторам и шкала перевода баллов в оценки указываются в учебной программе курса.

С данными требованиями к содержанию мини-проектов слушателей и их предполагаемой тема­тикой знакомит координатор курса в первый день обучения. Для выполнения проектных работ слу­шатели могут объединяться в группы по 3-4 человека или работать самостоятельно. Индивидуальная проектная работа предусмотрена лишь программой курса для учителей предмета «Самопознание».

Тематика проектов может корректироваться слушателями или же определяться по их собствен­ному выбору. Защита проектных работ осуществляется в последний день курсов.

Результаты защиты курсовых проектов свидетельствуют о положительной динамике качества их выполнения и высокой заинтересованности педагогов в поиске эффективных механизмов внедрения новых подходов в развитии функциональной грамотности школьников и инновационных педагогических технологий преподавания и обучения.

Наблюдается позитивная динамика качества курсовых проектов в разрезе 4-х кварталов 2014 г. и аналогичных показателей 2013 г., что указывает на совершенствование деятельности преподавателей ИПК по руководству проектной работой слушателей. Отмечается достаточно высокий уровень проектной деятельности. Всего на 6-ти курсовых потоках второго полугодия 2014 г. разработано 375 проектов, из которых 139 оценены на «отлично» по актуальности и качеству выполнения, что составляет 37,1 % от общего числа.

Курсовое проектирование создает условия для творческого самовыражения педагогов, выявления практических навыков слушателей на уровне применения освоенных знаний в практической профессиональной деятельности.

Итак, системно выстроенная технология мониторинга в курсовой период позволяет отследить качество предоставляемых образовательных услуг. Тем самым задается непрерывность мониторинга во времени, что обеспечивает переход от стихийных механизмов развития профессиональной компе­тентности к сознательно управляемому и самоуправляемому процессу.

Целью мониторинга является не только фиксирование результатов, но и получение информации для принятия определенных управленческих решений с целью коррекции результатов и предупреждающих действий.

Технология мониторинга качества курсовой деятельности предполагает подготовку аналитических отчетов, которые включают информацию об уровне успешности освоения учебных программ, удовлетворенности слушателей содержанием, качеством преподавания и ресурсным обес­печением курсов повышения квалификации. Именно структурирование информации и своевремен­ный анализ динамики и состояния образовательного процесса на курсах повышения квалификации позволяют обеспечить его качество и тем самым «повысить качество сформированности профессио­нальной компетентности педагогических кадров» [13; 38].

Индекс рейтинга профессорско-преподавательского состава, определяемый результатами оценки контроля качества знаний слушателей курсов и оценки слушателями качества преподавания на курсах, учитывается руководством Карагандинского ИПК при распределении преподавательской нагрузки на учебный год, направлении на зарубежные и республиканские стажировки, рекомендации на издание методической литературы, осуществлении наставничества и др.

Таким образом, повышению конкурентоспособности педагогических работников, актуализации потребностей педагогов в профессионально-личностном самосовершенствовании способствует, в первую очередь, качество курсовой подготовки.

В системе повышения квалификации педагогических работников мониторинг представляет со­бой инновационную технологию, выполняющую в управлении качеством констатирующую, коррек­тирующую и прогностическую функции.

Список литературы

1. Якунин В.А. Педагогическая психология: Учеб. пособие. — 2-е изд. — СПб.: Изд-во В.А. Михайлова, 2000. — 349 с.
2. Зеер Э. Ф. Психология профессионального развития: Учеб. пособие для вузов. — М.: Академия, 2006. — 240 с.
3. Шевченко О.М. Сущность и особенности образовательной услуги // Маркетинг в России и за рубежом. — 2011. — № 3 (83). — С. 90-96.
4. Каренов Р.С. Педагогический менеджмент: теория и технология эффективного управления образовательным процессом в Казахстане // Вестн. Караганд. ун-та. Сер. Педагогика. — 2013. — № 4 (72). — С. 4-13.
5. Иванютина Л.В. Рынок образовательных услуг высшего профессионального образования: мониторинг и развитие (на примере Алтайского края): Дис. ... канд экон. наук. — Барнаул, 2007. — 197 с.
6. ДжапароваР.Н. Маркетинг услуг профессионального образования // Маркетинг. — 200 — № 4. — С. 55-65.
7. Казакова Н.Е. Мониторинг в сфере дополнительного профессионального образования // Стандарты и мониторинг в образовании. — 2006. — № 5. — С. 21-28.
8. Введенский В.Н. Измерение и оценка качества повышения квалификации учителей в системе дополнительного педа­гогического образования // Стандарты и мониторинг в образовании. — 2003. — № 4. — С. 40-16.
9. Мозгарев Л.В. Структура качества повышения квалификации работников образования // Педагогика. — 2004. — № 10. — С. 46-54.
10. Лихашерстная Ю.О. Эффективность образовательной деятельности ИНПО // Наука и школа. — 2009. — № 2. —С. 12-18.
11. Технология мониторинга как средство отслеживания и управления качеством повышения квалификации педагогов / Под общ. ред. Г.К.Ахметовой. — Алматы: АО «НЦПК «Өрлеу», — 119 с.
12. Повышение качества профессионального развития педагога: Кол. монография / Под ред. д.п.н. С.Д.Мукановой. — Караганда: Типография «Tengri», — 232 с.
13. Возгова З. В. Содержание системы мониторинга качества сформированности профессиональной компетентности слушателя факультета переподготовки и повышения квалификации // Вестн. ЧГПУ. — 2010. — № 12. — С. 37-44.