Особенности требований к тестовым заданиям закрытого типа
Типы заданий: задания с выбором одного правильного ответа, задания с множественным выбором, задания на установление соответствия, задания на установление последовательности (порядка).
Требования к содержанию заданий теста:
- краткая, ясная и однозначная формулировка заданий, которую разработчик и участник диагностики трактуют одинаково;
- исключение качественных характеристик (эффективно, оптимально, достаточно и т.п.) или пояснение их через количественные характеристики;
- недопустимость использования слов-подсказок в тексте заданий и вариантах ответов;
- ответ на отдельное задание не должен быть подсказкой к другим заданиям теста;
- одинаковая привлекательность для выбора всего меню ответов;
- проектирование вариантов ответа по одному основанию (например, если один вариант ответа является конкретным, частным случаем, то и другие должны быть конкретными, а не общими случаями).
Уровни сложности заданий теста:
- первый уровень направлен на выявление знаний;
- второй уровень направлен на выявление умений применять знания в типичных ситуациях;
- третий уровень направлен на выявление умений применять знания в нестандартных ситуациях.
Для обеспечения вариативности теста рекомендуется:
- включать в тест 4 параллельных варианта;
- не использовать идентичные задания в параллельных вариантах;
- использовать не менее трех разных форм заданий в каждом варианте теста;
- следовать принципу фасетных заданий*(1) в параллельных вариантах.
Рекомендации по количеству заданий и вариантов теста:
- количество вариантов ответа с выбором одного правильного ответа - не менее 4 вариантов ответа;
- количество вариантов ответа с выбором всех верных ответов - 4-7 вариантов ответа;
- количество вариантов ответа в заданиях на установление последовательности - 4-7 вариантов ответа.
Особенности требований к тестовым заданиям открытого типа
К заданиям открытого типа относятся два вида: задания-дополнения и задания свободного изложения.
Ответ на задания-дополнения (задания с кратким ответом) не должен превышать 2-3 слов, чаще всего такой ответ составляет одно слово, число, символ. Эти ограничения обеспечивают однозначность оценивания.
Рекомендации по проектированию заданий-дополнений:
- каждое задание должно быть нацелено на конкретное дополнение, место для которого обозначается (например, прочерком или точками);
- текст задания должен содержать минимальное количество информации, необходимое для его правильного выполнения.
Для выполнения заданий свободного изложения тестируемому необходимо сформулировать и записать развернутый ответ. Задания свободного изложения требуют экспертного оценивания.
В структуру заданий свободного изложения рекомендуется включать стимульную часть (в виде текста, рисунка, графика, таблицы, схемы), которая содержит учебную информацию для ответа на несколько вопросов. Задания свободного изложения направлены на выявление действий тестируемого в разных профессиональных ситуациях:
- для педагогических работников: при планировании и проведении учебных занятий, формировании мотивации к обучению, организации учебной деятельности, оценивании учебных достижений, применении цифровых инструментов при обучении, взаимодействии с обучающимися, самопрезентации;
- для управленческих кадров: при планировании работы образовательного учреждения, реализации требований федеральных государственных образовательных стандартов, подборе и расстановке кадров, обеспечении качества образования, создании материально-технической базы, обеспечении цифровизации образовательного процесса, защиты персональных данных, открытости и доступности информации.
5.3. Самодиагностика профессиональных дефицитов на основании рефлексии профессиональной деятельности.
Универсальным инструментом для самодиагностики профессиональных дефицитов является анкета/чек-лист, обеспечивающие структурированный сбор первичных количественных данных (статистики).
Основа для структурирования - функциональные блоки профессиональной деятельности, определяемые трудовыми функциями/должностными обязанностями диагностируемого.
Рекомендуется включать в анкету/чек-лист:
- для педагогического работника вопросы по блокам - предметный, методический, психолого-педагогический, коммуникативный;
- для руководящих кадров вопросы по блокам - процессы, ресурсы, кадры, результаты, информация.
Рекомендации по составлению анкет/чек-листов:
- вопросы анкеты делятся на закрытые (на основе выбора из готового меню), полузакрытые (меню предусматривает возможность самостоятельного ответа), открытые (предполагается свободное формулирование ответа);
- количество развернутых ответов по существу задаваемых открытых вопросов позволяет составить представление о глубине рефлексии профессиональных дефицитов педагогическими работниками/управленческими кадрами;
- вопросы должны быть сформулированы четко, ясно, исключать двусмысленность и разночтения;
- вопросы следует располагать исходя из принципа - от простого к сложному, от общего к частному.
5.4. Диагностика профессиональных дефицитов на основании результатов профессиональной деятельности.
Оценка результатов профессиональной деятельности педагогического работника осуществляется на основании экспертного анализа его результатов в области обучения, воспитания, развития обучающихся.
Оценка результатов деятельности управленческих кадров осуществляется органом, выполняющим функции и полномочия учредителя образовательной организации, в том числе в рамках аттестационных процедур на соответствие занимаемой должности.
5.5. Диагностика профессиональных дефицитов на основании экспертной оценки практической деятельности педагогических работников.
Диагностика может проводиться в форме обсуждения открытых мероприятий: открытых уроков; выступлений в профессиональных аудиториях; участия в профессиональных конкурсах и др. Основанием для экспертной оценки может служить чек-лист.
Диагностика профессиональных дефицитов управленческих кадров может производиться по итогам экспертной оценки в рамках аттестационных процедур на соответствие занимаемой должности.
6. Порядок диагностики профессиональных дефицитов
6.1. Порядок диагностики профессиональных дефицитов на основании стандартизированных оценочных процедур.
Данный Порядок определяет организационное и технологическое обеспечение процедуры диагностики профессиональных дефицитов.
Участие в диагностике профессиональных дефицитов - добровольное, осуществляется на основании личного заявления.
Оператором диагностики может выступать ЦНППМ или одна из организаций, реализующих дополнительное профессиональное образование [8]. Оператор диагностики профессиональных дефицитов назначается региональным органом исполнительной власти, осуществляющим государственное управление в сфере образования.
Функции оператора:
- создание комиссий по разработке диагностических материалов, включающих по каждому виду диагностик*(2) спецификацию, кодификатор, варианты диагностических заданий, критерии их оценивания, критерии определения уровней профессиональных дефицитов;
- определение сроков, места проведения диагностики, порядка подачи заявлений об участии в диагностике, условий хранения диагностических материалов, информирование участников;
- создание региональных комиссий (далее - РК), участвующих в процедуре диагностики, включая председателей и заместителей председателей, экспертов и специалистов, привлекаемых к процедуре диагностики*(3);
- определение порядка проверки диагностических работ;
- создание конфликтных комиссий, определение порядка подачи и рассмотрения апелляций по вопросам нарушения порядка, несогласия с выставленными баллами;
- определение периодичности*(4) проведения диагностики, обеспечение обновляемости и преемственности фонда оценочных материалов.
Процедура диагностики проводится в пунктах проведения диагностики (далее - ППД), которые определяются оператором диагностики.
Количество, общая площадь и состояние помещений, предоставляемых для проведения диагностики, должны соответствовать требованиям санитарно-эпидемиологических правил и нормативов [9].
Аудитории, предназначенные для проведения диагностики, оборудуются компьютерной и офисной техникой, телефонной связью и средствами защиты информации. Для каждого участника диагностики организуется отдельное рабочее место.
В день проведения диагностики в ППД присутствуют руководитель и организаторы диагностики, не менее одного члена РК, технический специалист по работе с аппаратным и программным обеспечением.
Пакет диагностических материалов для каждого участника диагностики включает диагностические задания, бланки регистрации, бланки ответов на задания.
Проверка диагностических работ представляет собой проверку ответов на задания открытого типа экспертами РК. Одну работу проверяют не менее двух экспертов.
Председатель РК рассматривает результаты диагностики каждого участника и принимает решение об их утверждении, изменении и (или) аннулировании.
При диагностике профессиональных дефицитов в рамках курсов повышения квалификации содержание диагностических материалов определяется тематикой курсов. Рекомендуется проводить входную диагностику в начале обучения, итоговую - в конце. Данный вид диагностики может быть проведен с использованием бланковой технологии или в электронном виде (из личного кабинета слушателя курсов).
6.2. Порядок самодиагностики профессиональных дефицитов на основании рефлексии профессиональной деятельности.
Данную диагностику рекомендуется проводить в рамках обучения по ДПП ПК на добровольной основе и без ограничения по времени, что позволяет получить максимально достоверные данные. Содержание диагностических материалов определяется целью диагностики. Самодиагностика может быть проведена как с помощью бланковой технологии, так и в дистанционном режиме.
6.3. Порядок диагностики профессиональных дефицитов на основании результатов профессиональной деятельности.
Для педагогических кадров данный порядок включает:
- анализ результатов независимых диагностик обучающихся, результатов стандартизированных оценочных процедур в рамках внутренней системы оценки качества образования, портфолио обучающихся, динамики личностных результатов обучающихся;
- установление корреляции между результатами анализа и профессиональными дефицитами (предметными, методическими, психолого-педагогическими, коммуникативными).
Для управленческих кадров данный порядок включает анализ динамики объективных результатов деятельности образовательной организации; установление корреляции между результатами анализа и профессиональными дефицитами руководителей образовательных организаций.
6.4. Порядок диагностики профессиональных дефицитов на основании экспертной оценки практической (предметно-методической/управленческой) деятельности.
Порядок включает участие диагностируемого в открытом мероприятии, его анализ и подготовку заключения о выявленных профессиональных дефицитах.
6.5. Процедуры самодиагностики профессиональных дефицитов на основании рефлексии профессиональной деятельности, диагностики профессиональных дефицитов на основании результатов профессиональной деятельности, диагностики профессиональных дефицитов на основании экспертной оценки практической (предметно-методической/управленческой) деятельности не имеют строгой периодичности.
Результаты этих процедур, в сочетании с результатами диагностики профессиональных дефицитов на основании стандартизированных оценочных процедур, являются основанием для формирования комплексного дефицитарного профиля работника, на основании которого может строиться индивидуальный план профессионального развития.
7. Возможность получения индивидуального плана
Комплексная диагностика позволяет выявить специфические профессиональные дефициты педагогических работников и управленческих кадров. Результаты диагностики являются основанием для построения индивидуального плана профессионального развития. После прохождения диагностики работник получает рекомендацию восполнить свои дефициты как по содержанию, так и по форме. Так, эффективное восполнение профессиональных дефицитов на основе индивидуальных образовательных маршрутов профессионального развития может осуществляться посредством обучения по дополнительным профессиональным программам в сочетании с мероприятиями неформального образования (перекрестное посещение уроков, участие в семинарах/вебинарах, работа с методическими материалами, участие в профессиональных олимпиадах и конкурсах разного уровня и др.), стажировкой (индивидуальной или групповой) и т.д.
Список использованных источников
1. Распоряжение Министерства просвещения Российской Федерации от 16 декабря 2020 г. N Р-174 "Об утверждении Концепции создания единой федеральной системы научно-методического сопровождения педагогических работников и управленческих кадров";
2. Указ Президента Российской Федерации от 21.07.2020 N 474 "О национальных целях развития Российской Федерации на период до 2030 года";
3. Письмо Министерства образования и науки Российской Федерации от 27 декабря 2017 г. N 08-2739 "О модернизации системы дополнительного педагогического образования в Российской Федерации";
4. Приказ Министерства труда и социальной защиты Российской Федерации от 18 октября 2013 г. N 544н "Об утверждении профессионального стандарта "Педагог (педагогическая деятельность в сфере дошкольного, начального общего, основного общего, среднего общего образования) (воспитатель, учитель)";
5. Приказ Министерства здравоохранения и социального развития Российской Федерации от 26 августа 2010 г. N 761н (ред. от 31 мая 2011 г. N 448н) "Об утверждении Единого квалификационного справочника должностей руководителей, специалистов и служащих, раздел "Квалификационные характеристики должностей работников образования";
6. Федеральный закон от 29 декабря 2012 г. N 273-ФЗ (ред. от 2 июля 2021 г. N 351-ФЗ) "Об образовании в Российской Федерации";
7. Федеральный закон от 27 июля 2006 г. N 152-ФЗ (ред. от 2 июля 2021 г. N 331-ФЗ) "О персональных данных";
8. Распоряжение Министерства просвещения Российской Федерации от 4 февраля 2021 г. N Р-33 "Об утверждении методических рекомендаций по реализации мероприятий по формированию и обеспечению функционирования единой федеральной системы научно-методического сопровождения педагогических работников и управленческих кадров";
9. Постановление Главного государственного санитарного врача Российской Федерации от 28 сентября 2020 г. N 28 "Об утверждении санитарных правил СП 2.4.3648-20 "Санитарно-эпидемиологические требования к организациям воспитания и обучения, отдыха и оздоровления детей и молодежи".
______________________________
*(1) Фасетные задания - это однотипные задания, которые незначительно отличаются по содержанию или очень близки по параметрам задания (определяют одну и ту же область знаний и имеют одинаковую трудность). Смена порядка предъявления вариантов ответа в задании без изменения их содержания не делает задание фасетным, оно является идентичным. В фасетных заданиях вопрос может быть сохранен без изменений, но дистракторы (неправильные ответы) должны различаться от варианта к варианту.
*(2) Комиссии создают диагностические материалы для выявления всех видов профессиональных дефицитов для учителей-предметников и для управленческих кадров.
*(3) Рекомендуемые требования к членам РК: наличие высшего образования; соответствие квалификационным требованиям, указанным в квалификационных справочниках и (или) профессиональных стандартах; наличие опыта работы в организациях, осуществляющих образовательную деятельность в организациях общего, высшего, дополнительного профессионального образования (не менее трех лет).
*(4) Процедуру диагностики профессиональных дефицитов на основании стандартизированных оценочных процедур рекомендуется проводить один раз в три года, что согласуется с нормативной периодичностью повышения квалификации либо в соответствии с графиком аттестационных процедур.