Есть ли официальное исследование эффективности вопроса FizzBuzz? [закрыто]

Увидев сегодня этот вопрос о вариации вопроса об интервью FizzBuzz, а также увидев другие связанные с ним вопросы, я должен спросить: есть ли какое-либо официальное исследование того, насколько это эффективно в качестве техники интервью? Есть много людей, которые говорят, что это отфильтровывает некоторый сумасшедший процент кандидатов (95% + в некоторых случаях), но насколько это хорошо для поиска хороших программистов / разработчиков?

Было проведено некоторое исследование, которое показывает, что мягкие навыки могут быть лучшими показателями, чем трудные навыки для выбора хорошего кандидата на работу. Кроме того, могут быть некоторые промежуточные причины, по которым многие кандидаты не проходят этот тест (нервозность, мысль «это трюк» и т. Д.).

Основываясь на комментариях, похоже, что идея вопросов FizzBuzz состоит в том, чтобы определить, имеет ли человек хорошие (достаточные) навыки кодирования для дальнейшего рассмотрения. Я не совсем уверен, что FizzBuzz действительно делает это. Кроме того, помните, что FizzBuzz фильтрует очень большой процент кандидатов в самом начале процесса найма, что может означать, что значительное количество хороших кандидатов удаляются на ранних этапах, потому что они не могут решить глупые проблемы достаточно быстро.

Кроме того, я укажу, что анализ эффективности FizzBuzz - это то, что может быть полностью выполнено количественно. Это не похоже на взгляды на «пригонку» или «страсть», которые сильно различаются и крайне ненаучны (но все же весьма важны для новых решений о найме).

Прошло много времени с тех пор, как я начал изучать вопросы собеседования при приеме на работу (поэтому я не могу понять особенности сайта, за что извиняюсь), но общее правило заключается в том, что люди нанимаются на основе мягких навыков, но между этим и спектакль. Тестирование на конкретные навыки может работать, а на личность - нет (согласно измеримым данным).

Почти все считают, что их специальные методы интервью работают, данные говорят, что вам, вероятно, не стоит беспокоиться об интервью (часть интервью «расскажи о себе», в отличие от объективного тестирования), поскольку кандидаты, выбранные интервьюерами, ничуть не лучше, но интервьюеры это показывают. уклон в сторону экстравертов, людей, демографически похожих на интервьюера, высоких людей, привлекательных людей и т. д. (Возможно, вам следует нанимать людей, которые хорошо справляются с тестами и плохо в остальной части интервью, поскольку они, очевидно, так же хороши на работе, но может сложнее уйти из вашей компании).

Я отчасти ожидаю, что меня за это возмутят, обычно любой, кому я говорю, говорит: «Но мы используем метод X, и он действительно работает для нас», но если вы

1. нанять людей, которые не проходят ваш собеседование,

2. не говорите своим коллегам, которые прошли, а кто нет, и

3. сравнить показатели тех, кто сдал, с теми, кто этого не сделал, используя ранее согласованные объективные критерии

Вы действительно очень мало представляете, работает ли ваш процесс. К сожалению, эффективность интервью сложно оценить.

Если вам интересно, эксперименты делают такие вещи, как попросить людей оценить кандидатов на основе стенограммы интервью, от кандидатов, которые на самом деле уже были наняты (среди многих других методов). В идеале экспериментаторы должны были бы давать людям интервью, отбирать кандидатов, стирать память интервьюера, случайным образом выбирать, кого нанимать из числа кандидатов, и сравнивать результаты работы кандидатов, используя точные, объективные критерии, с оценками, данными интервьюерами, но этот эксперимент трудно снять.

Так что, хотя я не видел конкретных исследований FizzBuzz, это такая вещь, которая может показать эффективность в научных исследованиях. Если он отфильтрует 95% кандидатов, мне будет любопытно, почему - это было изобретено настолько нелепо, что пропустить его мог только некомпетентный программист, и трудно понять, как обмануть FizzBuzz. Интересно, какой процент проходит тест "Hello world"? Тест «заставить компьютер что-то делать, что-нибудь»?

Цель fizzbuzz не в том, чтобы найти хороших программистов, а в том, чтобы найти определенный класс плохих программистов, то есть людей, которые не могут реализовать простой алгоритм. Ваш вопрос вроде как спросить, сколько чемпионов Nascar определено во время экзаменов на водительские права. Между кем-то, кого ты определенно не хочешь нанимать, и тем, кого ты определенно делаешь, есть много общего.

Существуют другие классы «плохих» программистов, которым требуются разные методы идентификации, например, те, кто не владеет данным языком или имеет поведенческие проблемы. Тем не менее, "fizzbuzz-bad" программисты почти всегда нежелательны, поэтому тесты так часто рекомендуются. Является ли программист, который чрезмерно территориален, или тот, кому необходимо перенести навыки на новый язык, «хорошо» или «плохо», зависит в большей степени от потребностей и предпочтений отдельного работодателя.

FizzBuzz не о выявлении хороших программистов, а об устранении плохих / мошенников. Если кандидат не может пройти тест FizzBuzz, он не знает, как программировать, и не должен претендовать на должность программиста.