Создаёт
Генерирует контент инструментов: модели, задания, кейсы, гайды.
- Технология
- LLM
- Пример
- Черновик модели компетенций, сюжеты кейсов
- Что нужно для запуска
- Экспертная проверка результата
Риск ошибки2,5 из 5
012345
+7 (495) 645-00-40
Руководство по ИИ в оценке
Для HR-директоров, специалистов по оценке и руководителей: какие задачи оценки уже можно отдать ИИ, как проверить его точность, чего требует российское право и с чего начать.
PDF, 104 страницы. Участники вебинара «ИИ в оценке персонала» получат руководство 16 ноября, для всех остальных скачивание откроется здесь 23 ноября.
Что в руководстве
- 01
Контекст
Сколько ИИ уже в HR и оценке, чем машинное обучение отличается от LLM, шесть ролей ИИ
- 02
Где ИИ полезен
Карта задач оценки и матрица: эффект, трудоёмкость и риск
- 03
ИИ создаёт
Разработка с ИИ: модели компетенций, упражнения, тесты и опросники, кейс-тесты, интервью-гайды
- 04
ИИ ведёт диалог, оценивает и прогнозирует
LLM-оценка ответов, ИИ-интервьюер, прогнозные модели на своих данных
- 05
ИИ объясняет
Отчёты, интерпретация и обратная связь, аналитика для заказчика
- 06
Качество и право
Как проверить ИИ-оценку, чего требуют закон и этика
- 07
Сделать или купить
Инфраструктура и выбор моделей, карта рынка: 201 зарубежный и 64 российских провайдера
- 08
ИИ у кандидатов и сотрудников
Как кандидаты используют ИИ и как защитить оценку, как оценивать навыки работы с ИИ
- 09
ИИ, точность, наука
Точность и искажения LLM-оценки, открытия ИИ в психологии и психометрике
- 10
Что дальше: 2027–2032
ИИ в работе к 2032 году, последствия для оценки, с чего начать
Ниже — три схемы из руководства, с которыми можно поработать прямо здесь: шесть ролей ИИ, матрица задач и рамка зрелости.
Шесть ролей ИИ в оценке
Чем больше ИИ решает сам, тем выше риск: ошибку труднее заметить, а решение труднее объяснить.
Ведёт диалог
Разговаривает с участником: интервью, ролевая игра.
- Технология
- LLM
- Пример
- Чат-бот, ИИ-интервьюер
- Что нужно для запуска
- Экспертная проверка результата
Риск ошибки2,0 из 5
012345
Оценивает
Ставит баллы по заданным критериям.
- Технология
- LLM, анализ текста
- Пример
- Оценка открытых ответов и транскриптов интервью
- Что нужно для запуска
- Доказательства точности
Риск ошибки4,0–4,5 из 5
012345
Прогнозирует
Предсказывает результативность и увольнения по данным о прошлых сотрудниках.
- Технология
- Машинное обучение
- Пример
- Прогноз компетенций и результативности по опроснику
- Что нужно для запуска
- Доказательства точности
Риск ошибки3,0–3,5 из 5
012345
Объясняет
Переводит результаты в понятный текст: отчёт, обратная связь, ответы на вопросы о результатах.
- Технология
- LLM
- Пример
- Текст отчёта, бот по результатам, ассистент для заказчика
- Что нужно для запуска
- Экспертная проверка результата
Риск ошибки1,0–2,5 из 5
012345
Контролирует процедуру
Выявляет нарушения при проведении оценки.
- Технология
- Машинное обучение: компьютерное зрение, анализ ответов
- Пример
- Прокторинг, детекция списывания
- Что нужно для запуска
- Сомнительные фрагменты перепроверяет специалист
Риск ошибки2,0 из 5
012345
Риск — насколько тяжелы для человека последствия ошибки ИИ и насколько трудно эту ошибку заметить. Шкала от 0 (ИИ не используется) до 5 (автономный агент сам решает, кого нанять) разработана на основе методологии Rocket-Hire.
Матрица «эффект × трудоёмкость × риск»
Эффект: время, стоимость, точность, масштаб →
Обязательный проект
Стратегический проект
Опциональный проект
Не делать
Трудоёмкость: данные, интеграции, валидизация, юристы →
Риск ошибки:низкийсреднийвысокий
Горизонтальная ось показывает, сколько нужно данных, интеграций, проверки и юридической проработки, вертикальная — экономию времени и денег, рост точности и масштаб. Цвет — тяжесть последствий ошибки для человека.
Наведите на точку или нажмите на неё, чтобы увидеть задачу.Нажмите на точку, чтобы увидеть задачу.
Обязательный проектБольшой эффект при небольших затратах. Начните с них: эффект виден за недели, а ошибку исправляет эксперт.
Стратегический проектБольшой эффект, но нужны данные, интеграции, валидизация и юристы. Заложите их в план сразу.
Опциональный проектЗатраты небольшие, но и эффект невелик.
Не делатьЗатраты высокие, а эффект низкий.
Задача 1, этап «Модели критериев»
Черновик модели компетенций или ценностей на основе стратегии или серии интервью
создаётриск средний
Опциональный проект. Затраты небольшие, но и эффект невелик.
Задача 2, этап «Модели критериев»
Поведенческие индикаторы компетенций и ценностей
создаётриск низкий
Опциональный проект. Затраты небольшие, но и эффект невелик.
Задача 3, этап «Модели критериев»
Модель компетенций по данным о поведении и результативности
прогнозируетриск средний
Стратегический проект. Большой эффект, но нужны данные, интеграции, валидизация и юристы. Заложите их в план сразу.
Задача 4, этап «Инструменты»
Подбор инструментов под задачу оценки
создаётриск низкий
Опциональный проект. Затраты небольшие, но и эффект невелик.
Задача 5, этап «Инструменты»
Задания тестов знаний по документам компании
создаётриск низкий
Обязательный проект. Большой эффект при небольших затратах. Начните с них: эффект виден за недели, а ошибку исправляет эксперт.
Задача 6, этап «Инструменты»
Пункты личностных опросников
создаётриск низкий
Опциональный проект. Затраты небольшие, но и эффект невелик.
Задача 7, этап «Инструменты»
Сюжеты кейс-тестов (SJT)
создаётриск низкий
Обязательный проект. Большой эффект при небольших затратах. Начните с них: эффект виден за недели, а ошибку исправляет эксперт.
Задача 8, этап «Инструменты»
Сценарии и материалы упражнений центра оценки
создаётриск низкий
Опциональный проект. Затраты небольшие, но и эффект невелик.
Задача 9, этап «Инструменты»
Вопросы и шкалы интервью-гайдов
создаётриск низкий
Обязательный проект. Большой эффект при небольших затратах. Начните с них: эффект виден за недели, а ошибку исправляет эксперт.
Задача 10, этап «Инструменты»
Перевод и адаптация инструментов
создаётриск низкий
Опциональный проект. Затраты небольшие, но и эффект невелик.
Задача 11, этап «Проведение»
Чат-бот или голосовой робот для первичного скрининга
ведёт диалогриск средний
Опциональный проект. Затраты небольшие, но и эффект невелик.
Задача 12, этап «Проведение»
ИИ-интервьюер по структурированному гайду
ведёт диалогоцениваетриск высокий
Стратегический проект. Большой эффект, но нужны данные, интеграции, валидизация и юристы. Заложите их в план сразу.
Задача 13, этап «Проведение»
Ролевой партнёр в деловой игре
ведёт диалогриск средний
Стратегический проект. Большой эффект, но нужны данные, интеграции, валидизация и юристы. Заложите их в план сразу.
Задача 14, этап «Проведение»
Прокторинг и детекция списывания
контролируетриск средний
Стратегический проект. Большой эффект, но нужны данные, интеграции, валидизация и юристы. Заложите их в план сразу.
Задача 15, этап «Расчёт результатов»
Скрининг резюме по критериям вакансии
оцениваетриск высокий
Стратегический проект. Большой эффект, но нужны данные, интеграции, валидизация и юристы. Заложите их в план сразу.
Задача 16, этап «Расчёт результатов»
Оценка открытых ответов и кейсов по критериям
оцениваетриск высокий
Стратегический проект. Большой эффект, но нужны данные, интеграции, валидизация и юристы. Заложите их в план сразу.
Задача 17, этап «Расчёт результатов»
Оценка транскрипта интервью по шкалам
оцениваетриск высокий
Стратегический проект. Большой эффект, но нужны данные, интеграции, валидизация и юристы. Заложите их в план сразу.
Задача 18, этап «Расчёт результатов»
Прогноз компетенций и результативности по опроснику
прогнозируетриск средний
Стратегический проект. Большой эффект, но нужны данные, интеграции, валидизация и юристы. Заложите их в план сразу.
Задача 19, этап «Расчёт результатов»
Распознавание эмоций и черт по видео
оцениваетриск высокий
Не делать. Затраты высокие, а эффект низкий.
Задача 20, этап «Отчёты и обратная связь»
Черновики отчётов по центру оценки и интервью
объясняетриск средний
Обязательный проект. Большой эффект при небольших затратах. Начните с них: эффект виден за недели, а ошибку исправляет эксперт.
Задача 21, этап «Отчёты и обратная связь»
Контент-анализ комментариев 360 и опросов
оцениваетриск низкий
Обязательный проект. Большой эффект при небольших затратах. Начните с них: эффект виден за недели, а ошибку исправляет эксперт.
Задача 22, этап «Отчёты и обратная связь»
Чат-бот, который объясняет участнику результаты
объясняетриск средний
Стратегический проект. Большой эффект, но нужны данные, интеграции, валидизация и юристы. Заложите их в план сразу.
Задача 23, этап «Отчёты и обратная связь»
ИИ-тренажёр для отработки навыков после оценки
ведёт диалогриск низкий
Стратегический проект. Большой эффект, но нужны данные, интеграции, валидизация и юристы. Заложите их в план сразу.
Задача 24, этап «Решения и аналитика»
Рекомендации по развитию и черновик ИПР
объясняетриск средний
Обязательный проект. Большой эффект при небольших затратах. Начните с них: эффект виден за недели, а ошибку исправляет эксперт.
Задача 25, этап «Решения и аналитика»
Ассистент для заказчика по результатам оценки
объясняетриск средний
Опциональный проект. Затраты небольшие, но и эффект невелик.
Задача 26, этап «Решения и аналитика»
Аналитика по группам и прогноз текучести
прогнозируетриск высокий
Не делать. Затраты высокие, а эффект низкий.
Рамка зрелости
1Создание контента: тесты, упражнения, интервью
2Объяснение и аналитика результатов
3Ведение диалога с участником
4Выставление оценки и прогноз событий
3Собственный сервис или продукты провайдеров
2Корпоративные промты и доступы к LLM
1Личное использование LLM
Сложность задачи →Наведите на клетку или нажмите на неёНажмите на клетку
Столбцы — что делает ИИ
- Создание контента: тесты, упражнения, интервью
- Объяснение и аналитика результатов
- Ведение диалога с участником
- Выставление оценки и прогноз событий
Строки — как устроена работа
- Личное использование LLM
- Корпоративные промты и доступы к LLM
- Собственный сервис или продукты провайдеров
Большинство компаний сейчас на первых ступенях: используют LLM лично и для создания контента. Проходите ступени по порядку и не начинайте с ИИ-оценки людей: на каждой ступени появляется то, без чего следующая не работает.
Личное использование LLM
Создание контента: тесты, упражнения, интервью
Здесь сейчас большинство компаний. Сотрудники сами пишут с LLM черновики заданий, кейсов и вопросов интервью. Время экономится, но правил нет: качество и защита данных зависят от каждого.
Личное использование LLM
Объяснение и аналитика результатов
Сотрудники сами просят модель набросать отчёт или разобрать комментарии. Риски — персональные данные в публичных сервисах и выводы, которые никто не проверял.
Личное использование LLM
Ведение диалога с участником
Модель разговаривает с участником без утверждённого сценария: ответы нельзя сравнить, а результат — объяснить. Так лучше не делать.
Личное использование LLM
Выставление оценки и прогноз событий
Оценку людей отдают модели без правил и проверки точности. Так делать нельзя: решение о работнике не может опираться только на автоматизированную обработку.
Корпоративные промты и доступы к LLM
Создание контента: тесты, упражнения, интервью
Первая ступень, которую стоит пройти. Есть политика ИИ, корпоративный доступ к моделям и библиотека промтов: задания, кейсы и гайды создают по общим правилам, эксперт проверяет результат.
Корпоративные промты и доступы к LLM
Объяснение и аналитика результатов
Отчёты и разбор комментариев готовят с LLM по эталонным текстам экспертов. Появляются полуавтоматические отчёты, первые эталонные наборы и замер экономии.
Корпоративные промты и доступы к LLM
Ведение диалога с участником
Чат-боты и ИИ-интервьюер работают по утверждённым сценариям и гайдам. Накапливаются транскрипты и данные о реакции участников.
Корпоративные промты и доступы к LLM
Выставление оценки и прогноз событий
LLM ставит предварительные оценки, эксперт проверяет каждую. Чтобы опираться на них в решениях, нужны эталонный набор, проверка согласия «модель — эксперт» и юридическая проработка.
Собственный сервис или продукты провайдеров
Создание контента: тесты, упражнения, интервью
Создание заданий и материалов встроено в сервис: банк заданий пополняется по заданным правилам, а свойства новых заданий проверяют на пилоте.
Собственный сервис или продукты провайдеров
Объяснение и аналитика результатов
Отчёты, объяснения для участника и сводная аналитика для заказчика формируются в сервисе. Эксперт проверяет выборочно и разбирает спорные случаи.
Собственный сервис или продукты провайдеров
Ведение диалога с участником
ИИ-интервьюер, тренажёры и деловые игры с ИИ-персонажами работают на потоке участников, с журналами и контролем процедуры.
Собственный сервис или продукты провайдеров
Выставление оценки и прогноз событий
Цель — ИИ-оценка с проверенной точностью: эталонные наборы, валидизация, проверка справедливости и юридическая проработка сделаны. Решение о человеке по-прежнему принимает человек.
ИИ-продукты ЭКОПСИ
В наших продуктах ИИ прогнозирует, ведёт диалог, оценивает, объясняет и контролирует процедуру. Цвет показывает роль ИИ, как в блоке о шести ролях.
Где ИИ работает в цикле оценки
Наведите на этап, чтобы увидеть его продуктыНажмите на этап, чтобы увидеть его продукты
DEEP
Прогнозирует
Модели компетенций и ценностей на данных
Руководители оценивают эффективность подчинённых и то, как в их поведении проявляются компетенции. Машинное обучение показывает, какие компетенции действительно отличают эффективных сотрудников, — по компании и по уровням управления.
43–64%результативности сотрудника зависит от наличия нужных компетенций
Подробнее на сайте ↗
delta
Прогнозирует
Опросник компетенций с прогнозом поведения, 15 минут
Участник отмечает, какие индикаторы поведения описывают его лучше и хуже всего. Ответы сравниваются с базой 20 000 сотрудников российских компаний, которых по компетенциям оценили руководитель и коллеги.
до 0,45точность оценки компетенций — в 1,5–2 раза выше стандартных опросников
Подробнее на сайте ↗
FTA — Fast Track Assessment
Ведёт диалогОцениваетОбъясняет
Асинхронный поведенческий ассессмент
Участник проходит серию коротких упражнений — ролевые игры, кейсы на решение проблем — в диалоге с ИИ-агентом. ИИ выставляет оценки по компетенциям или ролям и готовит отчёт, эксперт подключается выборочно.
2,5 чна всю процедуру
ИИ-отчёт по 360 и ИИ-ИПР
Объясняет
Отчёт по оценке 360 и индивидуальный план развития
ИИ готовит отчёт по результатам оценки 360 и составляет индивидуальный план развития по итогам оценки.
Демо-отчёт на сайте ↗
ИИ-прокторинг
Контролирует процедуру
Прокторинг онлайн-тестов на устройстве участника
Модель находит лицо в кадре, отслеживает взгляд и посторонние предметы. При входе в тест она скачивается на компьютер участника, а после теста удаляется. Сомнительные фрагменты перепроверяет специалист.
800+кандидатов в лидерскую программу прошли отбор с прокторингом
Встроен в тесты Switch ↗
ПРМ Экспресс
Ведёт диалог
Развитие практик регулярного менеджмента после оценки
В программу встроены диалоговые ИИ-тренажёры и ИИ-опросники: руководитель отрабатывает делегирование, контроль и обратную связь в диалоге с ИИ и получает её.
Подробнее на сайте ↗Как мы контролируем ИИ в продуктах
Проверка человеком
В FTA эксперт выборочно проверяет оценки ИИ. В прокторинге сомнительные фрагменты перепроверяет специалист.
Точность на реальных данных
Проверяем точность решений на реальных данных до запуска технологии в работу.
Критерии задают эксперты
ИИ оценивает и объясняет результаты по критериям и шкалам, которые разработали методологи ЭКОПСИ.
Российская инфраструктура
Инфраструктура Яндекса, открытые модели DeepSeek и Qwen в российском облаке и модель Алиса по API.
Что ещё есть в руководстве
В руководстве — готовые таблицы, чек-листы, шаблоны и промты. Их можно применять сразу и адаптировать под свою компанию.
14 вопросов провайдеру ИИ-оценки
Валидность, предвзятость, модель и данные, стабильность оценок — и какие ответы провайдера должны насторожить
Как проверить ИИ-оценку
Надёжность, валидность и справедливость по правилу 4/5 и повторная проверка при смене модели
Практический минимум по праву
Четыре шага до запуска ИИ-оценки, что сообщить участнику и где границы использования результатов
Шаблоны документов
Положение об использовании ИИ в оценке персонала и уведомление участника
Более 20 промтов
Для моделей компетенций, заданий, кейсов, интервью-гайдов, отчётов и анализа комментариев
Карты рынка
201 зарубежный и 64 российских провайдера ИИ в подборе, оценке и развитии по категориям
Кому что читать
Разделы можно читать в любом порядке: каждый начинается с главного вывода, и почти в каждом есть список действий.
Руководителям HR
Где ИИ полезен, сколько экономит, что покупать и с чего начать.
Специалистам по оценке
Разработка инструментов с ИИ, отчёты, проверка LLM-оценки, защита тестов.
Психологам и психометрикам
Точность и искажения LLM-оценки, открытия ИИ в психологии, проверка ИИ-оценки.
ИТ, безопасности и юристам
Персональные данные, выбор моделей и инфраструктуры, прокторинг и биометрия.
Над руководством также работали
Арина КоркмазДиректор по консалтингу ЭКОПСИ
Павел ДегтярёвПартнёр, директор по развитию продуктов ЭКОПСИ
ClaudeЯзыковая модель Anthropic
ChatGPTЯзыковая модель OpenAI
Как мы использовали ИИ
Языковые модели искали информацию, предлагали формулировки и верстали страницы. Структуру, идеи и выводы определяли мы, эксперты ЭКОПСИ: ставили моделям задачи и проверяли результат (и, конечно, несли ответственность за руководство).
Скачать руководство
Руководство откроется для скачивания здесь 23 ноября — бесплатно и без регистрации. Участники вебинара «ИИ в оценке персонала» получат его раньше, 16 ноября.
Следите за обновлениями
Мы будем обновлять руководство вслед за рынком и законами. О новых версиях напишем в каналах.
Обсудить ИИ в оценке для вашей компании
Расскажем, как устроены наши ИИ-продукты, и поможем выбрать задачу, с которой начать.
DEEPdeltaFTAИИ-отчёт по 360 и ИИ-ИПРИИ-прокторингПРМ Экспресс
