Быстрорастущая компания, ежегодно получавшая тысячи заявлений о приёме на работу, внедрила систему на основе искусственного интеллекта для автоматической оценки резюме.
Система ранжировала кандидатов, анализируя уровень образования, продолжительность профессионального опыта, отраслевую специализацию и исторические данные о ранее принятых сотрудниках.
На первом этапе процесс подбора персонала значительно ускорился, а расходы на работу отдела кадров сократились.
Однако спустя некоторое время появились заявления о том, что кандидаты определённых возрастных категорий, выпускники отдельных университетов и женщины систематически получали более низкие оценки.
Проведённая проверка показала, что алгоритм обучался на исторических данных о найме и начал воспроизводить предвзятость, существовавшую в предыдущих кадровых решениях.
В результате компания столкнулась с обвинениями в дискриминации, её процедуры подбора персонала стали предметом проверки со стороны регулирующих органов, а сама компания понесла серьёзные репутационные потери.
Ключевой риск: Проблема заключалась не в использовании искусственного интеллекта при подборе персонала. Основной риск был связан с тем, что результаты работы алгоритма не проходили регулярный аудит, а потенциальное дискриминационное воздействие системы не оценивалось должным образом.