Точны ли онлайн-тесты на IQ? Честный ответ

Вердикт: скрининг, а не оценка

Оценка IQ имеет смысл только относительно референтной группы, измеренной в контролируемых условиях с известной погрешностью. Клинические тесты соответствуют всем трем условиям. Большинство бесплатных онлайн-тестов не соответствуют ни одному из них полностью. Это не делает их бесполезными: хорошо построенный короткий тест по-прежнему грубо ранжирует людей, а экстремальный результат о чем-то говорит. Но это означает, что число на экране не является IQ в клиническом смысле.

Форматы показывают разрыв. Pearson описывает WAIS-5 как инструмент для индивидуального клинического тестирования в возрасте от 16 до 90 лет. Его полная шкала IQ требует прохождения семи субтестов и занимает около 45 минут, а десять основных индексных субтестов — около часа. Типичный бесплатный веб-тест — это несколько десятков головоломок, решаемых в одиночку дома, без контроля времени или вкладок браузера.

Что делает любой IQ-тест заслуживающим доверия

Книга правил этой области — «Стандарты психологического и педагогического тестирования», совместно публикуемая с 1966 года Американской ассоциацией исследований в области образования, Американской психологической ассоциацией и Национальным советом по измерениям в образовании. Текущее издание датировано 2014 годом и находится в открытом доступе. Его основные требования сводятся к шести вопросам, на которые должен отвечать любой тест:

• Нормы: Кто является группой сравнения, сколько человек и когда они были протестированы?
• Надежность: Дает ли тест согласованные результаты и какова его стандартная ошибка измерения?
• Валидность: Соответствуют ли его результаты установленным тестам, таким как Wechsler или Stanford-Binet?
• Администрирование: Проводился ли тест с ограничением по времени и под наблюдением, с проверкой личности?
• Потолок: Содержит ли он достаточно сложных заданий, чтобы выделить тех, кто набирает высокие баллы?
• Актуальность: Являются ли нормы достаточно актуальными, чтобы избежать отклонений?

Тест, публикующий четкие ответы на все шесть вопросов, заслуживает внимания. Тот, который не публикует ничего — нет.

Проблема норм: по сравнению с кем?

Результат 130 означает результат лучше, чем у примерно 98 процентов определенной популяции. Клинические тесты тщательно определяют эту популяцию. WAIS-IV был стандартизирован на 2200 людях в США в возрасте от 16 до 90 лет, плюс дополнительная выборка из 688 канадцев. WAIS-5 собрал новые нормы в 2023 и 2024 годах на основе выборки, построенной для отражения населения США.

Большинство онлайн-тестов сравнивают каждого участника с теми, кто еще прошел тест. Эта группа самоотбирается: люди, любопытствующие о своем IQ, некоторые из них — неоднократно. Перцентиль по отношению к этой толпе — это реальная информация о толпе. Это не перцентиль общего населения.

Нормы также устаревают. Средние «сырые» баллы росли на протяжении большей части XX века, примерно на 3 балла за десятилетие в США в тестах Wechsler, в то время как Дания и Норвегия позже зафиксировали обратную динамику. Тест, нормированный давно или вообще не имеющий норм, не может никого точно оценить.

Надежность и потолок: почему короткие тесты размывают верхушку

Любой результат теста содержит погрешность. В современных профессиональных батареях заявленная стандартная ошибка измерения может составлять около трех баллов, а доверительный интервал охватывает около 10. Короткие тесты усредняются по меньшему количеству заданий, поэтому их ошибка больше, и немногие из них публикуют ее.

Верхняя часть шкалы — самая сложная для измерения. Высокие показатели IQ менее надежны, чем результаты, близкие к медиане, а сообщения о результатах значительно выше 160 широко считаются сомнительными; сам WAIS-IV останавливается на 160. Короткий онлайн-тест с небольшим количеством действительно сложных заданий достигает «потолка» задолго до этого. Результаты вроде 160 или 187 полученные в быстром веб-квизе, следует воспринимать как артефакты системы подсчета баллов, а не как измерения.

Эффект практики: ловушка пересдачи

Онлайн-тесты обычно позволяют неограниченное количество пересдач, а пересдачи завышают баллы. Мета-анализ 2018 года, проведенный Scharfen, Peters и Holling в журнале Intelligence, объединил 174 выборки из 122 исследований, охватив 153 185 человек. Баллы выросли на 0,33 стандартного отклонения после первого прохождения по сравнению со вторым, примерно на 5 баллов IQ, и на 0,50 после третьего, примерно на 7,5 баллов. После третьей попытки прирост прекратился.

В этом разница между измерением способностей и измерением знакомства с тестом. Pearson ограничивает доступ к покупке WAIS-5, а психологи спрашивают о недавнем тестировании; открытый веб-тест не может сделать ни того, ни другого. Только первая попытка заслуживает внимания, и даже она может зависеть от практики на аналогичном тесте в другом месте.

Онлайн-тестирование, которому можно доверять

Проблема не в онлайн-формате; проблема в наблюдении и нормах. Британская Mensa проводит онлайн IQ тест под наблюдением, около 1½ часов за £49, результаты которого дают право на вступление. Напротив, их домашний тест за £15 дает лишь ориентировочную оценку. Сайт Mensa International сообщил, что адаптивный онлайн-тест для кандидатов из стран, где нет национального отделения Mensa, должен был быть запущен в 2025 году.

Исследователи также создали надежные открытые инструменты. International Cognitive Ability Resource — это общедоступный банк заданий, предназначенный для социальных исследований, с психометрическими данными, доступными для типов его заданий. Это показывает, что бесплатный тест может быть серьезным, при условии, что он раскрывает, как он был создан и что он может, а что нет.

Где находится наш бесплатный тест

Наш бесплатный IQ тест состоит из 20 вопросов на 8 минут, охватывающих числовое, логическое и вербальное мышление, без регистрации. Он ранжирует каждый результат по отношению к реальным людям, прошедшим его, а не по учебной кривой. В этом его сила и его предел: группа сравнения — это наши посетители, а не репрезентативная выборка, и 20 вопросов не могут зафиксировать результат с точностью до нескольких баллов.

При честном использовании это делает его хорошим первым шагом. За восемь минут он примерно показывает, на каком уровне находится человек, и это ничего не стоит. Если результат высокий, следующий шаг — тест под наблюдением, и наш гид по вступлению в Mensa покрывает варианты. Если результат ниже ожидаемого, помните о погрешности и стоимости утомительного вечера. Чтобы интерпретировать любое число, используйте таблицу редкости IQ и таблицу классификации IQ.

Красные флажки и зеленые флажки

• Красный флажок: сертифицированный или официальный IQ, полученный в результате непроверенного теста.
• Красный флажок: бесплатный тест, результат которого скрыт за оплатой.
• Красный флажок: регулярно выдаваемые баллы выше 160.
• Красный флажок: отсутствие информации о нормах, размере выборки или погрешности.
• Зеленый флажок: названная нормативная группа с указанием ее размера и даты.
• Зеленый флажок: указанная погрешность или доверительный интервал.
• Зеленый флажок: понятная формулировка того, что этот балл не означает.

О том, как создаются и оцениваются профессиональные тесты, см. как работают IQ-тесты и как измеряется IQ.

Редакционный стандарт: цифры IQ для исторических личностей являются ретроспективными оценками и обозначены как таковые; баллы живущих людей появляются только тогда, когда человек раскрыл их сам или авторитетное издание сообщило о них. Исправления: Связаться с редакторами.