Помогает ли искусственный интеллект сдавать тесты на работу?
Так как искусственный интеллект уже стал частью нашей жизни, закономерно задаться вопросом – а может ли ИИ помочь с тестами при приеме на работу? Может ли решать за кандидата бизнес-кейсы и проходить ассессмент? Подскажет ли, как лучше отвечать на вопросники и ситуационные тесты? Если да, то, выходит, скоро работодатель будет оценивать скорее ИИ, чем реальных людей. А давайте с этим разберемся.
Что узнали про ИИ разработчики тестов?
Конечно, разработчикам тестов тоже очень интересно, может ли ИИ за тестируемых давать верные ответы и представляет ли он угрозу эффективности тестирований. Они провели ряд исследований и выяснили, что более-менее адекватно ИИ справляется только с такими типами заданий:
- там, где нужно написать развернутый ответ. Например, решить бизнес-кейс.
- там, где нужно выполнить вычисления. Например, в числовых тестах.
- некоторые вопросы по программированию.
Однако при этом ответы ИИ всегда требуют проверки человеком, поскольку искусственный интеллект может вполне себе уверенно генерировать неверную информацию. Вот вам личный пример:
Кажется, вряд ли при таких погрешностях кто-то рискнет использовать ИИ на решающих испытаниях при трудоустройстве.
Какие задания ИИ вовсе не может решать?
- тесты, где есть визуальные материалы и интерактивные элементы. Например, логические тесты. С визуализацией у ИИ пока проблемы.
- личностные опросники,
- ситуационные тесты и прочие симуляции,
- упражнения ассессмент-центра.
Во всех этих случаях использование ИИ не дает вообще никаких преимуществ.
Как разработчики тестов защищаются от ИИ?
Конечно, все эти технологии ИИ будут развиваться, улучшать точность ответов и активно внедряться в нашу повседневность – они, похоже, с нами надолго.
Естественно, чтобы сохранить эффективность системы оценки при трудоустройстве, тестирующие компании уже внедряют комплекс мер против нечестного использования ИИ:
1. Онлайн-прокторинг
Система фиксирует подозрительные действия во время тестирования: копирование текста, переключение вкладок, использование сторонних приложений. В некоторых случаях применяется распознавание лиц и отслеживание активности кандидата.
2. Проверка на плагиат
Развернутые ответы автоматически сверяются с базой данных других кандидатов и с открытым контентом в интернете. При совпадениях выставляется флаг, указывающий на возможное использование готовых материалов или ИИ.
3. Детекторы ИИ-текста
В стадии внедрения находится алгоритм, который определяет, написан ли ответ человеком или искусственным интеллектом. Обучение проходит на массиве из более чем миллиона примеров и показывает высокую точность. В комбинации с антиплагиатом позволит отслеживать использование ChatGPT и его аналогов.
Что можно сказать сейчас
- Использование ИИ в некоторых случаях может помочь кандидату, но также легко может ему навредить. ИИ далеко не всегда прав, несмотря на его уверенный тон. Плюс не забывайте, что эффективное использование ИИ требует определенного навыка.
- Большинство форматов системы оценки кандидатов остаются недоступными для решения с помощью ИИ. А в тех форматах, где риск вмешательства ИИ выше, тестирующие компании уже внедряют технологии обнаружения и контроля.
Так что пока работодатели могут спать спокойно. Интересно, а что бы сейчас на это ответил нам ИИ?