НЛМК и StartExam: как оценить эффективность обучения 7 тысяч руководителей
Как оценивается эффективность обучения руководителей в Корпоративном университете Группы НЛМК, и почему для этих целей выбрали платформу StartExam, читайте в нашей статье.
О компании: Группа НЛМК — вертикально-интегрированная металлургическая компания, крупнейший в России производитель стальной продукции. Доля компании в российском производстве стали — > 20%, а в её штате более 50 тысяч сотрудников.
Как устроено обучение руководителей в НЛМК
Корпоративный университет НЛМК создан в 2016 году для обучения руководителей и распространения накопленных в компании управленческих практик. Его целевая аудитория — 7000 руководителей разного уровня: от мастеров до вице-президентов.
Обучение проходит в разных форматах. В портфеле Корпоративного университета более 50 образовательных решений и более 90 электронных курсов. Образовательные решения проводят внутренние тренеры. Это руководители, опытные сотрудники Группы НЛМК. Электронные курсы сотрудники выбирают самостоятельно и проходят в удобное время.
Образовательные решения включают обучение по четырём направлениям:
стратегия и управление стоимостью;
операционная эффективность и безопасность;
проектное управление и инновации;
лидерство и командное взаимодействие.
Кроме того, есть комплексные программы, направленные на развитие руководителей определённого управленческого уровня.
Как в НЛМК оценивают эффективность обучения
В Корпоративном университете НЛМК результаты обучения замеряются по модели Киркпатрика, на четырех уровнях:
- Уровень реакции. Реакция участника замеряется непосредственно после обучения. С помощью анкеты обратной связи проверяют: понравилось ли обучение, готовы ли сотрудники применять полученные знания на практике.
- Уровень знаний. С помощью тестов сравнивается уровень знаний до обучения и после.
- Уровень изменений в поведении сотрудников. С помощью опроса сотрудника и его руководителя оцениваются изменения в поведении сотрудника, а также применение инструментов, изученных на обучении.
- Уровень влияния на бизнес. Оценивается изменение бизнес-показателей: индивидуальных, командных, организационных; технический и экономический эффект от разработанных проектов.
Почему в НЛМК выбрали StartExam?
Команде Корпоративного университета НЛМК требовалась удобная для всех участников обучения платформа, которая позволяет собирать обратную связь, оценивать эффективность обучения на уровне реакции и на уровне знаний, формировать подробную и качественную отчётность.
Для Корпоративного университета таким универсальным инструментом стал StartExam. С платформой регулярно работают около 50 сотрудников Корпоративного университета. Она позволяет проводить необходимые замеры и даёт возможность решать прикладные задачи — например, когда необходимо понять, нужен ли трансфер участникам обучения из другого города.
Команда университета уделяет особенное внимание детальной аналитике. StartExam позволяет выгружать отчёты с информацией по определённым вопросам — это помогает получать объективные данные о приросте знаний сотрудников с помощью тестов. А отчёт по качеству заданий по 13 критериям даёт рекомендации, как сделать тест ещё лучше.
Здорово, что в StartExam можно настраивать «ветвление» — когда в зависимости от ответа показываются разные вопросы. В системе много разных типов заданий: например, можно задать 10-балльную шкалу оценки или попросить описать ответ своими словами, расставить пункты по приоритету. Мы можем перемешать вопросы, сделать их обязательными или необязательными — всё гибко настраивается, и это нам очень помогает.
Мы долго тестировали систему. Одной из причин, почему решили работать со StartExam, стал отчёт по качеству заданий. Он формируется автоматически, с понятной визуализацией. Без дополнительных усилий отчёт позволяет оценить эффективность и валидность: насколько хорошо тест и вопросы в нём выполняют свою основную функцию — проверку знаний.
Отчёт по качеству заданий в StartExam
Совместные доработки и интеграции
Основные метрики эффективности обучения сотрудники Корпоративного университета видят на дашборде. Он реализован в системе интерактивной аналитики Tableau. Благодаря интеграции по API в него ежедневно автоматически выгружаются отчёты из StartExam. Это один из главных совместных технических проектов НЛМК и StartExam.
StartExam по API интегрирован с SAP BW. Эта система используется для хранения и обработки данных. Разработчики StartExam помогли подготовить специальный формат отчётов, а технические специалисты НЛМК настроили их выгрузку сначала в SAP BW, а оттуда — на дашборды в Tableau. Специально для НЛМК специалисты StartExam постоянно дорабатывают платформу. Например, добавлена гибкая система настройки отчётов, новые интеграции, выгрузка SCORM-пакетов.
Мы проводим серию интервью с пользователями, для которых предназначена платформа. После этого формируем подробное техническое задание, определяем приоритетные задачи и делим их на итерации. Разработчики StartExam реализуют каждую итерацию сначала на тестовом стенде, а затем переносят на платформу. Когда новый функционал готов к работе, проводим демонстрационные встречи с пользователями. Со стороны StartExam мы всегда видим готовность помочь.
Корпоративный университет НЛМК — постоянный клиент StartExam. Сотрудничество здесь планируют развивать и дальше.
Нам нравится взаимодействие с нашим менеджером и с генеральным директором StartExam Сергеем Свечниковым. Коллеги всегда идут нам навстречу. Сама платформа предоставляет много возможностей для интеграции. Мы идём к автоматической авторизации пользователей через SSO, через локальную базу данных. Это значит, что сотрудники получат «бесшовный» опыт, им не нужно будет тратить лишнее время на внесение своих данных. Нам также нравится отсутствие ограничений по количеству тестов, вопросов и попыток прохождения.
