Электронный научно-педагогический журнал. Издается с 7 ноября 1995 года.

Электронное научное издание. Зарегистрировано в Федеральном депозитарии электронных изданий ФГУП НТЦ "Информрегистр" Министерства связи и информатизации РФ.
Государственная регистрация  # 0420600031 от 02.05.2006

Нино  Андрей Валерьевич
аспирант кафедры педагогики РГПУ им. А.И.Герцена

Разработка и реализация методики построения системы контроля качества подготовки специалистов по антитеррористической деятельности в системе дополнительного профессионального образования

 Особую актуальность в современных условиях приобретает повышение качества и эффективности  дополнительного профессионального образования взрослых, ориентированного на подготовку специалистов в области антитеррористической деятельности.

Современная пост­индустриальная цивилизация как объект терро­ристических акций чрезвычайно уязвима. В ней слишком много жизненно важных узлов, коммуникаций, которые можно уничто­жить, вызвав «эффект домино» и неуправляемый хаос.  Осо­бенно опасны такие акты в отношении объектов морской индустрии. В связи с этим мировое морское сообщество было вынуждено принять целый ряд основополагающих нормативно-правовых документов и поправок (глава XI-2 Международной конвенции по охране человеческой жизни на море 1974 года      (СОЛАС-74), Международный  Кодекс по охране судов и портовых средств (МК ОСПС)) в виде обязательных требований и рекомендаций  по защите судов и портовых  средств от актов терроризма и других противоправных действий.

Возможность террористических актов по отношению к рыбопромысловым судам  и портовым сооружениям вызывает необходимость готовности судовых  экипажей  и  работников портов к предотвращению этих актов   или снижению их последствий. При подготовке специалистов по  антитеррористической деятельности на  судах рыбопромыслового флота и портовых средствах  должны учитываться все аспекты обеспечения физической безопасности и предотвращение техногенных катастроф, вызванных террористическими актами.

Человеческий фактор в создании такого комплекса мер представляется приоритетной сферой. Именно он определяет, будет ли функционировать техническая составляющая, выполняться процедуры, будет ли система самокорректирующейся, модернизирующейся под влиянием множества новых и быстро меняющихся факторов.

Специфика подготовки специалистов по антитеррористической деятельности заключается в краткосрочности подготовки и наличия у слушателей достаточного опыта профессиональной деятельности, что обусловливает правомерность построения модели оценки качества обучения на основе  использования  рефлексивного обучающего цикла  (рис.1)  и тестовых технологий.

Рис. 1.  Схема обучающего  цикла  слушателей в системе дополнительного профессионального образования

В краткосрочных формах дополнительного профессионального образования  существенное повышение эффективности возможно на основе построения систем управления качеством образования.  В соответствии с формирующейся в настоящее время теорией  управления образовательными системами, любые образовательные системы должны иметь два взаимодействующих канала управления: канал управления качеством функционирования и канал управления качеством развития. Благодаря такой организации образовательные системы переходят в разряд адаптивных систем.  При этом «эффективность» понимается как «обобщенная мера качества» образовательной системы, или качества совместной деятельности обучаемых (слушателей), обучающих (преподавателей) и управляющих (руководителей), обеспечивающих вместе управление функционированием и развитием любой образовательной системы. 

Критерий эффективности функционирования образовательной системы характеризует «эффективность» с точки зрения обеспечения, с допустимой точностью соответствия, фактического качества образования тому требуемому качеству образования, которое определено как  цель образовательной системы. С точки зрения системного подхода качество образования как интегративный системный объект есть качество не только конечных результатов, но и качества всех процессов, обеспечивающих, влияющих на конечный результат.

Качество  образовательных процессов в краткосрочных формах дополнительного профессионального образования определяется качеством: образовательных программ; преподавательских кадров; потенциала обучающихся; образовательных технологий (включая оценочные); ресурсного обеспечения (информационного, учебно-методического и материально-технического); эффективность управления определяется качеством: целей и норм системы дополнительного профессионального образования;  организационных структур;  управленческого персонала; систем оценки (мониторинга качества); управленческих технологий и ресурсов.

Управление  качеством системы дополнительного профессионального образования базируется на мониторинге.  Основной целью мониторинга является сбор и анализ информации для формирования целостного представления о качестве профессионального образования, о качественных и количественных изменениях системы обучения и принятия управленческих решений по повышению качества обучения слушателей. Разработанная   методика управления  качеством  профессиональной подготовки специалистов по антитеррористической деятельности в системе дополнительного профессионального образования включает в себя:

    - автоматизированный сбор информации о начальном уровне подготовки слушателей (входной контроль) и качестве преподавания на основе анкетирования;
    - разработку тестовых заданий  для текущей и итоговой оценки результатов обучения  на основе учёта спецификации, проведения экспертизы, апробации и корректировки теста, интерпретации результатов тестирования методами математической статистики и шкалирования  результатов тестирования;
    - корректировку программы обучения на основе методики экспертной оценки попарного сравнения разделов курса и определения их значимости для достижения поставленных целей обучения взрослых;
    - организацию внутрифирменного повышения квалификации преподавателей по различным аспектам современных технологий обучения взрослых.

В соответствии с теоретическими выводами в экспериментальной части исследования система управления качеством подготовки специалистов по антитеррористической деятельности  конкретизировалась на уровнях:
    - качества программ;
    - качества результатов обучения;
    - качества преподавания.

При разработке программ повышения квалификации необходимо иметь в виду, что слушатели уже обладают достаточными базовыми знаниями по многим вопросам программ курса, поэтому большее внимание должно быть уделено инновациям и  перспективам решения рассматриваемых проблем; при этом достаточно  известные вопросы могут быть изложены без подробностей или даны для самостоятельного изучения.

Для определения значимости разделов программы курса  использован экспертный метод  попарного сравнения. Для  получения  независимых  экспертных  оценок  была  опрошена  группа  квалифицированных специалистов  в  области антитеррористической деятельности.   Эксперту пред­лагалось оценить относительную значимость разделов программы.

Так как каждая пара разделов программы сравнивается однократно, то общее число сравнений:                             

                        ,                (1)

             где  n – число  разделов программы.

Использование метода попарного сравнения позволяет практически определить значимость для любого числа разделов. При этом метод достаточно прост и объективен. Полученные от экспертов оценки, легко поддаются статической обработке. По материалам таблиц попарного сравнения для каждого экс­перта определяется число выборов рассматриваемых разделов программы  согласно формулы (2).

                                    Z_ij = 1 + Z _'ij +0.5Z _"ij       ,          (2)

 где  Z  _ij  - число предпочтений _j –го раздела программы, выбранного по всей таблице i-го эксперта;

      Z "ij -число раз, когда _i - й эксперт не смог различить степень важности _j-го раздела при попарном сравнении его с другими разделами программы.

Раздел  программы, который с точки зрения экспертов оказы­вает наибольшее влияние на достижение цели обучения, имеет наибольшую сумму выборов, а  раздел оказывающий самое слабое влияние - наименьшую. Значимость _j-го показателя по результатам обработки анкеты _i-го эксперта равна:

                     ,                       (3)

где       M _ij – значимость j-го раздела программы;

               Z _ij – число выборов показателя, полученных согласно выражению (2);

                n – число разделов программы.

Средняя значимость _j -го  раздела программы по всем экспертам мо­жет быть определена согласно выражению:                                                   

   ,                (4)

Методы обработки информации, полученной от экспертов, осно­ваны на том, что количественные оценки рассматриваются как слу­чайные величины, что дает возможность использовать для обработки экспертных оценок методы теории вероятности и математической ста­тистики. Определение значимости разделов   программы экспериментального курса производилось рассмотренным выше методом.

 Исходная программа курса  включала 10 разделов, имеющих разную степень важности для подготовки слушателей (табл.1). На основании анализа экспертных оценок были выбраны методы изучения различных разделов (групповая работа, решение  проблемных ситуаций, ситуационных заданий, самостоятельное изучение и т.д.).

  Анализ имеющегося профессионального опыта слушателей позволил экспертам  провести корректировку программы, путём включения нового раздела и перераспределения часов, отведённых на изучение всего курса. Включение в программу подготовку раздела « Психолого-педагогическое обеспечение мероприятий по охране судов и портовых средств» (раздел 11) обусловлено тем, что борьба с терроризмом предполагает понимание психологической природы терроризма, психологических аспектов террористической деятельности, понимание психологии личности террориста, педагогические основы управление командой в экстремальной ситуации.  Психолого-педагогическая подготовка помогает найти решение проблемной ситуации и на этапе предотвращения террористической акции, и в случае совершения террористического акта, позволяя разрешить ситуацию с наименьшими потерями и жертвами.  На рис. 4 приведена  гистограмма  значимости разделов курса программы, а на рис. 5, соответственно,    гистограмма распределения объема часов  по разделам экспериментального курса, скорректированного по результатам экспертного опроса.

 Таблица 1- Разделы программы курса  «Подготовка командного состава, ответственного  за  охрану  рыбопромыслового  судна, в  соответствии  с требованиями МК ОСПС»

                                   Рис. 2- Значимость разделов программы  курса

               до корректировки;            после корректировки

           Рис.3- Распределение часов по разделам программы курса

 Следующим шагом экспериментальной работы являлась разработка  проверочных заданий для оценки качества результатов обучения. Из существующего многообразия информационных систем (системы-справочники, системы-тренажеры, системы-учебники и т.д.) самыми распространенными по-прежнему остаются компьютерные тестирующие системы, дающие возможность повысить эффективность и объективность контроля. Это и обусловило использование при разработке информационно-технологического обеспечения мониторинга качества профессиональной переподготовки тестовых технологий, а именно - образовательных тестов.

 Для целей мониторинга качества профессиональной переподготовки был выбран критериально - ориентированный тест, позволяющий соотносить результаты успешности обучения с требованиями программ.

Для проверки тестовых свойств заданий использовалась матрица результатов тестирования. Матрица тестовых результатов представляет результаты обучае­мых по всем проверяемым заданиям (каждый правильный ответ - один балл; не­правильный – ноль).    В этой матрице проведено два упорядочения. Одно касается испытуемых. В первой строке представлены баллы самого успешного испытуемого, во второй менее, и далее  по нисходящей сумме баллов,  подсчитанной для каждого испы­туемого. Другое упорядочение проведено для заданий. На первом месте стоит самое легкое задание, по которому имеется наибольшее число правильных отве­тов, на втором - меньшее, и далее, до последнего задания, у которого имеется всего один правильный ответ. Диагностика тестовых свойств заданий, разработанных для слушателей по Международному Кодексу охраны судов и портовых средств производилась на основе методов математической  статистически.  

Применение автоматизированного контроля знаний обучаемых существенно сокращает трудоемкость и время выполнения операций по планированию контроля, его про­ведению, обработке его результатов, что дает возможность контролирующему лицу оперировать большими массивами статистических данных. В качестве примера, на рис.4 приведены диаграммы выходного контроля знаний слушателей полученные по результатам  автоматизированного тестирования  15 групп слушателей.

Диаграмма свидетельствует о достаточно высоких результатах обучения, что позволяет утверждать правомерность проведённой корректировки программы и выбранных методов обучения.

       Рис.4 -Диаграмма «Выходной контроль знаний слушателей»

                               Проценты

Рис.5 - Диаграмма «Качество преподавания»

Сопоставительный анализ   результатов обучения и оценки слушателями качества преподавания  позволил выявить, что достигнуты результаты  не всегда коррелируют  с оценкой качества преподавания. Эти данные послужили основой для обсуждения с преподавателями учебных центров специфики обучения взрослых, освоения современных технологий обучения - рефлексивных, социального взаимодействия, решения ситуационных задач, которые способствовали существенной активизации мотивации обучения.     

Качество дополнительного профессионального  образования характеризуется большим числом  критериев (показателей), имеющих разную значимость для достижения поставленных целей обучения взрослых.  Для оценки  дополнительного образования по антитеррористической деятельности были выбраны 10 критериев: качество образовательных программ К 1; качество потенциала преподавательских кадров К 2;  качество образовательных технологий К 3; качество оценочных технологий К 4;  качество    информационного  обеспечения К5;     качество   учебно-методического обеспечения К 6;   качество   материально-технического обеспечения К 7; качество потенциала слушателей К 8;  уровень обеспечения  культурно- бытовыми  условиями К 9;  экономичность обучения К 10. 

 Для определения значимости  критериев также  использован описанный выше  экспертный метод  попарного сравнения. Для  получения  независимых  экспертных  оценок  была  опрошена  группа  квалифицированных специалистов  в  области антитеррористической деятельности.  Опрос  экспертов  производился с помощью  специально  разработанных  анкет. На  рис. 5 приведена  гистограмма   значимости    критериев  построенная  по  результатам  обработки  анкет.   Критерии  

                                 Значимость

                                                                    Критерии

Рис. 5- Гистограмма значимости  критериев  оценки  качества дополнительного профессионального обучения по антитеррористической деятельности качества дополнительного профессионального  образования расположены  в  ранжированной  последовательности  по  мере  уменьшения  их значимости для достижения поставленных целей обучения взрослых.

Предлагаемая система контроля качества обучения слушателей позволяет на практике регулировать образовательный процесс повышения квалификации  и  может быть использована при проектировании системы управления качеством дополнительной профессиональной подготовки специалистов в различных областях деятельности.

Рекомендовано к публикации:
А.П.Тряпицына,  доктор педагогических наук, научный руководитель работы,  член Редакционного совета
Н.Ф.Радионова, доктор педагогических наук, член Редакционного совета