Тестирование — востребованный инструмент оценки персонала. Для подбора IT-специалистов чаще всего используют именно профессиональное тестирование. Многие компании проводят его самостоятельно либо поручают это агентствам, имеющим набор типовых тестов под различные роли и специализации, таким как Brainbench. Недавно в этой нише появился новый интересный проект — Smarterer.com. Этот стартап в июне прошлого года получил 1.25 миллиона долларов инвестиций от True Ventures, Google Ventures и нескольких бизнес-ангелов. Сервис официально стартовал в октябре и уверенно растёт. Smarterer делает акцент на простоту и скорость тестирования. Он позволяет оценить знания и навыки буквально за минуту. В то же время его нельзя назвать примитивным. Для определения уровня испытуемых используется рейтинг Глико — усовершенствованный вариант широко используемого шахматистами рейтинга Эло. Точность оценки повышается с каждым ответом на вопрос теста, система непрерывно адаптируется и улучшается.
Сами тесты составляются с помощью краудсорсинга. Любой может создать новый тест или добавить вопрос в уже существующий. Новые вопросы сначала оказываются в “песочнице” и не влияют на результат. После ответа на каждый вопрос есть возможность оценить его качество и указать на ошибки и неточности. Только когда вопрос многократно проверен, и алгоритм может уверенно определить его сложность, он начинает оказывать влияние на рейтинг.
По мере добавления в тест новых вопросов, рейтинг со временем может уменьшаться. В любой момент можно ответить ещё на несколько вопросов, чтобы подтвердить свой уровень. Кроме того, на рейтинг влияет и добавление вопросов. Если вы придумали сложный и качественный вопрос — ваш рейтинг вырастет.
Благодаря такому подходу Smarterer удалось добиться очень неплохого уровня вопросов в популярных тестах. Ответ на каждый вопрос даёт количество очков, которое зависит от сложности вопроса и уровня испытуемого. Система подбирает сложность вопросов в соответствии с результатом тестируемого. Это обеспечивает быструю “сходимость” результатов теста к реальному уровню знаний.
Мы попросили прокомментировать данный ресурс, руководителя направления по подбору IT-персонала Luxoft Personnel, Зою Богдашкину.
«Ресурс выглядит довольно привлекательным, объясню почему. Многие компании создают и проводят профессиональное тестирование самостоятельно, либо поручают это агентствам, имеющим набор типовых тестов под различные роли и специализации. Но очень важно, какие критерии оценки определяются и насколько эти критерии верны. Безусловно, технический эксперт каждой отдельной компании будет говорить о том, что разработанный им тест самый правильный и надежный. Но, к сожалению, не всегда это так, поскольку субъективное ощущение, что «это» должно быть известно всем профессионалам искомого направления, далеко не всегда совпадает с реальностью. В нашей практике случались кейсы, когда через некоторое время работы мы понимали, что кандидаты не проходят тест не потому, что их уровень плох, а по причине недостаточно раскрытой информации в самом тесте. В итоге – переговоры, корректировки и найм специалиста, но со смещенными сроками.
Таким образом, валидный тест может предупреждать подобные проблемы, — считает Зоя Богдашкина, — не менее важен вопрос критериев, по которым необходимо оценивать кандидатов. Естественно, у каждой компании они свои и часто сложно понять, насколько предъявляемые требования к специалисту являются адекватными тому же рынку. Особенно это актуально для стартапов, когда на этапе формирования команды далеко не всегда лидеры проекта хорошо знают техническую сторону вопроса и имеют тех. специалиста в команде, а значит, они должны либо привлекать сторонних экспертов, либо полагаться на удачу. И в том, и в другом случае придется платить. В последнем – цена может быть очень высокой, т.к. неправильная техническая реализация может повлечь за собой ряд сложностей. Именно поэтому возможность использовать подобные тесты, апробированные большой аудиторией, выглядит весьма заманчиво.
Сама идея краудсорсинга сейчас чрезвычайно популярна и востребована, так как не позволяет продукту (в данном случае — тесту) застаиваться, он постоянно дорабатывается.
Лично мне было бы интересно на основе уже полученных рейтингов понимать уровень технической образованности сегодняшних специалистов в принципе и выявлять тренды».
