Проект Tracking AI опубликовал новые результаты тестирования языковых моделей. Согласно его данным, GPT-5.6 Sol и Terra с максимальным уровнем рассуждений Ultra набрали по 136 баллов в закрытом офлайн-тесте. Это первый результат выше 130 баллов за всю историю именно этого теста.

При этом показатель 136 нельзя напрямую приравнивать к человеческому IQ. В стандартизированных тестах результат около 130 обычно соответствует верхним 2% населения, однако конкретное значение зависит от используемой шкалы и методики. Онлайн-тесты и неофициальные оценки также не заменяют профессиональное тестирование интеллекта.

Как проходило тестирование

Tracking AI использует два набора заданий. Первый основан на общедоступном тесте Mensa Norway. Второй представляет собой закрытый набор вопросов, который, по утверждению автора проекта, создал один из участников Mensa и который ранее не публиковался в интернете.

Закрытый тест должен снизить вероятность того, что модель уже встречала задания во время обучения. Однако полностью подтвердить отсутствие вопросов в обучающих данных невозможно.

Результаты моделей

Лучший результат показали GPT-5.6 Sol Ultra и GPT-5.6 Terra Ultra – по 136 баллов. Claude 5 Fable набрал 130 баллов, а GPT-5.6 Luna Max и GLM 5.2 – по 123 балла.

AI IQ результаты тестов

Названия Ultra и Max в данном случае обозначают уровень вычислительных усилий при формировании ответа, а не отдельные модели. Семейство GPT-5.6 состоит из трёх основных моделей: Sol, Terra и Luna.

Ранее ни одна из протестированных Tracking AI моделей не набирала более 130 баллов в закрытом наборе заданий. Поэтому результат GPT-5.6 стал рекордом именно в рамках этого проекта, а не универсальным доказательством превосходства модели над человеческим интеллектом.

Проверка в практических задачах

Отдельные пользователи также публикуют примеры работы GPT-5.6 с программированием. В одном из таких тестов модели поручили создать браузерный симулятор физики стеклянного моста в одном HTML-файле без внешних библиотек. Однако подобные демонстрации проводились независимо от Tracking AI и не относятся к IQ-тестированию.

Что означают результаты

Результат в 136 баллов показывает, что GPT-5.6 хорошо справляется с конкретным набором задач на распознавание закономерностей и логическое мышление. Однако он не означает, что модель обладает человеческим интеллектом с IQ 136 или превосходит большинство людей во всех видах деятельности.

Кроме того, итоговая оценка зависит от количества вопросов, способа их преобразования в текст, настроек модели и формулы пересчёта правильных ответов в условные баллы IQ. Сам автор Tracking AI ранее отмечал ограничения методики и возможное влияние случайности, особенностей перевода и небольшого набора заданий.

Подпишись на MobiDevices
Telegram