A Way to Detect Bias
Пол Грэм описывает способ обнаружить предвзятость в процессе отбора, не зная ничего о составе пула кандидатов. Метод работает при трёх условиях: есть хотя бы случайная выборка отобранных кандидатов, измеряется их последующая результативность, а сравниваемые группы имеют примерно одинаковое распределение способностей. Суть в том, что если отбор предвзят против кандидатов определённого типа, то таким кандидатам приходится быть лучше, чтобы пройти отбор. Поэтому их последующие результаты окажутся в среднем выше. Важное следствие: третьи стороны могут применять эту технику для выявления предвзятости независимо от того, хотят этого те, кто отбирает, или нет.
Октябрь 2015
Для многих это станет неожиданностью, но в некоторых случаях можно обнаружить предвзятость в процессе отбора, не зная ничего о составе пула кандидатов. Это интересно ещё и потому, что среди прочего означает: третьи стороны могут использовать эту технику для выявления предвзятости вне зависимости от того, хотят этого те, кто проводит отбор, или нет.
Эту технику можно применять всякий раз, когда (a) у вас есть хотя бы случайная выборка отобранных кандидатов, (b) их последующая результативность измеряется и (c) сравниваемые группы кандидатов имеют примерно одинаковое распределение способностей.
Как это работает? Подумайте, что значит быть предвзятым. Если процесс отбора предвзят против кандидатов типа x, это значит, что им труднее его пройти. А значит, кандидатам типа x приходится быть лучше, чтобы их отобрали, чем кандидатам не типа x. [1