Как понять результаты CCAT

Кратко о CCAT

Criteria описывает CCAT следующим образом (Criteria):

• 50 вопросов за 15 минут. За отведённое время нужно ответить на столько вопросов, на сколько вы успеете.
• Три типа вопросов: на вербальные способности, математику и логику, а также пространственное мышление.
• Калькулятор использовать нельзя.
• За неправильные ответы баллы не снимаются.

В информационном документе Criteria также говорится, что тест можно проходить на любом устройстве, включая телефон, планшет, ноутбук или настольный компьютер, и что он популярен при отборе на должности среднего и старшего уровня, например менеджеров, руководителей отдела продаж, разработчиков программного обеспечения, помощников руководителей и аналитиков (информационный документ о CCAT).

Количество правильных ответов

Ваш сырой балл - это «количество вопросов, на которые вы ответили правильно» (Criteria). Он может составлять от 0 до 50. За пропущенный вопрос и неправильный ответ начисляется ноль баллов. Поэтому важно, что Criteria указывает: за неправильные ответы баллы не снимаются. Обоснованная догадка может только помочь.

Criteria сообщает, что «средний участник правильно отвечает только на 24 вопроса». Поэтому сырой балл в пределах от 20 до 25 близок к обычному результату, а не означает провал. Если вы привыкли к школьным тестам, где 48% считались бы плохой оценкой, то при первом взгляде результат 24 из 50 может показаться низким. CCAT устроен так, что почти никто не набирает близкий к 50 результат.

Процентиль и нормативная группа

Процентиль показывает, «как вы справились по сравнению со всеми, кто проходил этот тест» (Criteria). В руководстве Criteria по отчётам о результатах сказано, что процентиль показывает место кандидата относительно «глобальной нормативной группы» компании (руководство по отчётам о результатах).

Процентиль - это не процент правильных ответов. 70-й процентиль означает, что ваш результат выше, чем у 70% группы, с которой вас сравнивают.

В примере отчёта о результатах от Criteria показана связь между этими двумя числами: кандидат с исходным результатом 24 находится на 50-м процентиле, «то есть набрал больше баллов, чем 50% людей, проходивших этот тест» (обзор CCAT). Это соответствует заявлению Criteria о том, что средний участник правильно отвечает на 24 вопроса.

В руководстве по отчётам о результатах также приведён график распределения исходных результатов: большинство результатов сосредоточено около середины, а высоких и низких результатов меньше. На графике отмечен результат кандидата.

Три дополнительных балла

В отчёте ваш результат разбит на три навыка, для каждого указан отдельный перцентиль (руководство по отчёту):

• Пространственное мышление: визуализация объектов, оценка пространственных отношений, решение задач с объектами и закономерностями.
• Вербальные способности: понимание прочитанного, логика и внимательность к деталям. Проверяются с помощью заданий на дополнение предложений, словарный запас и сравнение слов.
• Математика и логика: решение задач, арифметика, логика и числовое мышление.

Дополнительные баллы показывают работодателю, в чём ваши сильные стороны. Они также подсказывают, на чём сосредоточиться при подготовке: если в пробном тесте какой-то раздел даётся хуже, час занятий принесёт наибольшую пользу именно там.

Рекомендуемые диапазоны баллов по семействам профессий

Criteria предлагает работодателям ориентировочные диапазоны сырых баллов для разных профессиональных групп. По данным Criteria, эти диапазоны рассчитаны на основе больших выборок результатов людей, которые ранее претендовали на аналогичные должности или работали на них, и подтверждены исследованиями валидности (информационный документ о CCAT). В руководстве по отчёту с результатами говорится, что диапазоны рассчитаны по результатам более 700,000 оцениваний CCAT (руководство по отчёту с результатами).

В информационном документе перечислены десятки профессиональных групп, включая бухгалтерский учёт, аналитическую работу, обслуживание клиентов, инженерное дело, управление персоналом, сестринское дело, офисную и административную поддержку, управление проектами, розничные продажи, работу торгового представителя и разработку программного обеспечения.

Работодатель может указать профессиональную группу для теста до того, как вы его пройдёте. В отчёте тогда отображается затенённая область с ориентировочным диапазоном и указывается, получили ли вы результат в пределах этого диапазона, выше или ниже него. В примере из руководства по отчёту с результатами для группы «Управление» указан ориентировочный диапазон от 20 до 50, и сырой результат кандидата 24 входит в него. В документе Criteria также сказано, что работодатели могут сформировать собственные диапазоны результатов на основе данных своих сотрудников или кандидатов.

Диапазоны в документах показывают, как работает отчёт. Criteria не публикует список целевых результатов всех работодателей, а сайты, которые указывают «проходные баллы CCAT» для конкретных компаний, лишь предполагают их.

Какой результат CCAT считается хорошим?

Единого значения CCAT, которое считалось бы хорошим, нет. Хорошим считается результат, который входит в установленный работодателем для этой должности диапазон или превышает его. В опубликованных материалах Criteria можно найти три полезных ориентира:

• Средний результат - 24 правильных ответа. По данным Criteria, средний участник теста правильно отвечает на 24 вопроса.
• 50-й процентиль - это середина глобальной нормативной выборки Criteria. В примере отчёта Criteria ему соответствует исходный балл 24.
• Диапазоны различаются в зависимости от группы должностей. Для должности, требующей решения сложных задач, рекомендуемый диапазон может быть выше, чем для должности с рутинными задачами.

Если вы не знаете, какого результата ожидает работодатель, вам вряд ли назовут конкретное число, но вы можете спросить рекрутера, как используют результат. Большинство работодателей учитывают CCAT вместе с вашей заявкой и результатами собеседований, а не как единственный фактор.

Почему почти никто не успевает закончить

По данным Criteria, менее 1% кандидатов отвечают на все 50 вопросов (Criteria). На 50 вопросов отводится 15 минут, то есть примерно 18 секунд на каждый. В тесте сочетаются короткие задания на словарный запас с пространственными и текстовыми задачами, на которые уходит больше времени.

Не ответить на несколько последних вопросов - это нормально. Баллы теряются, если торопиться с первыми вопросами и ошибаться или тратить целую минуту на одно сложное задание. По словам Criteria, за неправильные ответы баллы не снимаются, поэтому не оставляйте прочитанный вопрос без ответа: выберите наиболее вероятный вариант и переходите дальше.

О недействительных результатах

В руководстве Criteria по отчётам о результатах описан флаг «Invalid Result». В нём говорится, что система может определить, проходил ли кандидат ранее определённую версию CCAT, по скорости и точности его ответов: если кандидат проходит тест слишком быстро и без ошибок, это отмечается как знакомство с тестом (руководство по отчётам о результатах).

Это ещё одна причина готовиться на оригинальных практических вопросах в похожем формате, как у нас, а не искать копии настоящих заданий. Разберитесь в типах вопросов и темпе прохождения, но не пытайтесь запоминать ответы.

Как повысить свой результат

• Тренируйтесь, выделяя на вопрос 18 секунд. Наш тренировочный тест в стиле CCAT проходит в таком же темпе.
• Не застревайте на вопросе. Если примерно за 30 секунд вы не поняли, как его решить, выберите наиболее подходящий ответ и переходите дальше. Один сложный вопрос не должен стоить вам трёх простых.
• Отвечайте на каждый вопрос. По данным Criteria, за неправильные ответы баллы не снимаются.
• Поработайте над самым слабым из трёх навыков. Задания на пространственное мышление сначала могут показаться непривычными, но обычно навык быстро улучшается с практикой. Попробуйте наш тест на пространственное мышление.
• Считайте в уме, без калькулятора. Потренируйтесь с процентами, дробями, отношениями и скоростью. Читайте наши руководства: задачи на проценты, задачи на отношения, скорость, расстояние и время и числовые последовательности.
• Тренируйтесь решать короткие логические задачи. Небольшая подготовка поможет с заданиями на порядок и вопросами «что должно быть верно». Читайте руководство о силлогизмах.
• Проходите полные тесты на время, чтобы научиться сохранять концентрацию все 15 минут.