Фейс-контроль для тестов: почему менеджеры сопротивляются одним тестам — и принимают другие

Из пункта А в пункт Б ехали 2 грузовика… Помню, еще в младшей школе эти задачи вызывали у меня недоумение — ну мне-то какое дело, когда они встретятся?!
Но когда по сюжету в одном грузовике оказывалось мороженное, а в другом — я, задачка сразу начинала казаться намного более интересной…

Директор проектов ЭКОПСИ

Арина Коркмаз

Что такое фейс-валидность

Наш мозг, по множеству эволюционных и биологических причин, крайне ленив. И выполнять задачи, которые не имеют к нему никакого отношения и не принесут ему пользы, отказывается. Это актуально и для третьеклассника с его злосчастными грузовиками, и для успешного менеджера, которого HR сажает выполнять тесты.

В психометрике эта особенность давно известна, и описывается как фейс-валидность (face validity) — степень, в которой тест воспринимается участником как релевантный и имеющий отношение к его рабочим задачам. Если сотрудник видит, что задания повторяют реальные ситуации, он воспринимает тест как адекватный и в большей степени готов прикладывать усилия для его прохождения и доверять его результатам.

«…термин “фейс-валидность” подразумевает, что тест, предназначенный для использования в практической ситуации, помимо обладания статистической валидностью, должен выглядеть практичным ... Иными словами, тест должен не только быть валидным, но и казаться валидным». (Mosier, 1947)

Почему это особенно критично для менеджеров

Линейные и средние менеджеры — люди, уже достигшие определённого уровня и ценящие свое время. Они часто скептичны к «абстрактным» заданиям, которые не отражают реальную работу. Если тест кажется им игрой или «тестированием ради тестирования», они относятся к нему с недоверием — могут недооценить его ценность или вовсе отказаться участвовать.

Для таких сотрудников особенно важен инструмент, который выглядит профессионально, реалистично и бизнес-ориентированно.

Конечно, идеально подходят под эти требования Ассессмент-центры с их полным погружением в рабочие задачи, развитием сюжета, наблюдателями, выполняющими роли коллег и подчиненных. Но проведение Ассессмента – задача сложная, дорогая и требующая серьезных усилий. И тут на помощь приходят кейс-тесты.

Что такое кейс-тест (SJT)

Кейс-тест, или SJT (Situational Judgment Test), — это формат, в котором участнику даётся описание рабочей, бизнес-ситуации, и предлагается подумать, как он бы в ней поступил. Вопрос может быть как открытым, так и предполагать несколько возможных вариантов ответов, из которых нужно выбрать верный, или которые нужно оценить по степени эффективности.

Кейс-тесты имеют хорошие психометрические показатели (Christian, Edwards & Bradley, 2010) и давно используются для оценки и отбора персонала. Так, еще в экзамене на должность Экзаменатора по товарным знакам в Патентном ведомстве США, введённом в 1873 году, содержался следующий вопрос: «Банковская компания просит защиты для определённого обозначения в качестве товарного знака, который она планирует размещать на своих банкнотах. Какие действия вы предпримете по этой заявке?» (DuBois, 1970). Согласитесь, прозвучит вполне актуально и в устах современного HR-менеджера?

В кейс-тестах обычно моделируются наиболее привычные и знакомые менеджерам ситуации – принятие решений, делегирование, планирование, работа с конфликтами и возражениями. Оцениваться могут как отдельные навыки, так и более сложные и комплексные компетенции.

Почему кейс-тесты сложно делать

Интуитивно кажется, что создать кейс-тест довольно просто – опиши жизненную ситуацию, вспомни несколько примеров правильного и неправильного поведения, и готово!

Однако в реальности разработка качественного кейс-теста из 20-30 заданий может занять несколько месяцев даже у опытной команды разработчиков. Создание фейс-валидных и при этом надежных заданий требует четкого понимания оцениваемого конструкта, значительного менеджерского опыта у команды разработки, знания особенностей восприятия участниками тех или иных вариантов ответов. Так, например, исследование показало, что разные версии вопроса в конце описания ситуации – «Что бы вы сделали»/«Что следовало бы сделать» – меняют то, насколько участники воспринимают тест легким для прохождения и жульничества.

О нашем кейс-тесте Prime

Prime — это кейс-тест, разработанный нашей командой специально для оценки управленческих практик, Практик регулярного менеджмента, то есть тех задач, с которыми любой менеджер сталкивается на ежедневной основе. Он моделирует реальные управленческие ситуации (делегирование, контроль, кадровые решения, проведение совещаний и пр.), и подходит для оценки и развития управленцев как линейного, так и среднего уровня.

На основании теста можно делать выводы о том, насколько менеджеры способны выстраивать рабочие процессы, работать с персоналом и внедрять изменения.

Тест хорошо воспринимается участниками (то есть имеет высокую фейс-валидность), а его результаты позволяют планировать дальнейшую работу с менеджерами и их развитие.

УЗНАТЬ ПОДРОБНЕЕ ПРО PRIME

Вывод

Для менеджеров, склонных критически оценивать тестовые задания, кейс-тесты (SJT) — один из лучших вариантов оценки, наравне с Ассессмент-центрами. При грамотной разработке они получают высокую фейс-валидность и обладают хорошими психометрическими характеристиками.

Автор

Арина Коркмаз

Директор проектов ЭКОПСИ