Одинаковый итоговый балл может скрывать разный путь обучения. Разбираем, как сопоставить начальную и итоговую работу по понятным критериям без рейтинга людей.
Итоговый результат не показывает весь путь
Представим условную группу сотрудников, которые учатся проверять отчёты. Один участник уже делал такую работу, другой впервые столкнулся с разными источниками. В конце оба справились с заданием. По одному итоговому ответу трудно понять, чему каждый научился и какая помощь нужна дальше. Для этого полезно рассмотреть исходную работу и изменения в способе решения.
В рекомендациях Carnegie Mellon University об исходных знаниях предлагается учитывать подготовку до начала программы, чтобы точнее увидеть приобретённые знания и навыки. Самооценка и выполненное задание дают разные виды свидетельств. Ниже предложен условный порядок наблюдения за прогрессом, без обещания измерить вклад обучения одним числом.
Выберите наблюдаемое действие
Для нашей группы сформулируем конкретную задачу: найти причину расхождения двух отчётов и объяснить, можно ли использовать итог. Вместо общей оценки «хорошо знает данные» выделим понятные действия. Участник проверяет период, замечает пропущенный источник, отделяет факт от предположения и объясняет следующий шаг. Так становится ясно, что именно рассматривает преподаватель.
Полезно заранее описать, как выглядит самостоятельное выполнение и в каких случаях нужна подсказка. В материале CMU о критериях оценивания такая шкала связывает отдельные стороны работы с описаниями уровней выполнения. Сами критерии должны соответствовать выбранному заданию; переносить готовую чужую шкалу без проверки смысла не стоит.
Сохраните исходную работу вместе с условиями
До занятий предложим небольшую задачу и сохраним объяснение участника. Отметим, какие материалы были доступны, сколько помощи понадобилось и какие ограничения действовали. После обучения дадим сопоставимое задание: другой набор сведений, но тот же проверяемый навык. Если повторить ровно прежний пример, запоминание ответа может затруднить понимание того, что изменилось в способе работы.
Условия должны позволять человеку показать нужный навык. Если оцениваем объяснение расхождения, скорость печати или привычка выступать перед большой группой не должны незаметно становиться главными критериями. Для нашего примера заранее согласуем удобный способ представить ответ: письменно или устно с сохранёнными пояснениями. Различия условий фиксируем рядом с результатом.
Сравнивайте действия по каждому критерию
Допустим, вначале участнику требовалась подсказка, чтобы проверить период, а в конце он проверяет его сам и объясняет обнаруженную ошибку. Это конкретное наблюдение о прогрессе. Другой участник уже умел проверять период, но научился замечать пропущенные записи. Его изменение будет видно по другому критерию, даже если итоговые работы получили одинаковую общую оценку.
Необязательно превращать эти различия в общий рейтинг. В нашем условном разборе для каждого человека запишем, что получилось самостоятельно, где остаются затруднения и какое следующее упражнение уместно. Такой формат не доказывает превосходство одного участника над другим. Он помогает связать обратную связь с действием, которое ещё нужно освоить или закрепить.
Уверенное начало тоже требует подходящего задания
Если человек ещё до занятий выполнял все действия без помощи, простая итоговая работа почти ничего не расскажет о дальнейшем росте. Предложим отдельно согласовать усложнение: неоднозначное определение показателя или необходимость обосновать несколько вариантов. При этом результаты разных по сложности заданий не стоит напрямую складывать в одну таблицу мест без пояснения условий.
Прогресс в учебной работе не равен готовности любой рабочей задачи. Общий подход к оценке результата обучения охватывает и последующее применение. А материал о помощи наставника пригодится, если человек понимает принцип, но пока затрудняется действовать самостоятельно. Здесь мы рассматриваем именно изменение выполнения сопоставимых заданий.
Обсудите следующий шаг с участником
Итогом предложенного разбора станет короткое описание прогресса с примерами работ и понятной следующей целью. Участник сможет уточнить, какая помощь использовалась и какие трудности остались. Не следует по этому наблюдению автоматически обещать рост производительности всей команды или делать кадровые выводы: для таких решений нужны дополнительные сведения и отдельные основания.
Согласовать учебную задачу и критерии можно в рамках корпоративного обучения NovaData. Карточка Python ниже показывает одно из возможных направлений развития навыков; состав программы и ожидаемые действия участников стоит обсуждать под задачи вашей команды.
