Gemini 3 Pro превзошел GPT-5 и Grok в тесте на IQ
Превью-версия Gemini 3 Pro продемонстрировала впечатляющий результат в 130 баллов в оффлайн-бенчмарке Mensa, разработанном для оценки интеллекта искусственного интеллекта. Тест, основанный на адаптированной версии знаменитого IQ-теста Mensa Norway, был создан таким образом, чтобы исключить возможность целенаправленного дообучения моделей.
Gemini 3 Pro опередила предыдущего лидера, Grok 4 Heavy (с подпиской $300), на 4 балла. Также в рейтинге представлены Claude Opus 4.1, GPT-5 Thinking и GPT-5 Pro. Примечательно, что новый результат Gemini 3 Pro на 20 баллов выше, чем у предыдущей модели Google – Gemini 2.5 Pro.
В классическом тесте Mensa Norway ведущие модели демонстрируют еще более высокие результаты, что указывает на возможное попадание части задач в их обучающие данные. Gemini 3 Pro показал результат, соответствующий уровню 2% лучших людей по оффлайн-тесту и 0,3% — по Mensa Norway.
Создатель бенчмарка, Максим Лотт, отмечает, что данный тест оценивает лишь узкий аспект интеллекта – способность к решению абстрактных задач. Он подчеркивает, что человеческий интеллект гораздо шире и включает в себя такие качества, как здравый смысл, интуиция, мотивация, опыт и ответственность, в которых машины пока не могут конкурировать.
Итак, машины научились решать задачки на картинки лучше нас. Пора готовить бункер и записываться в клуб любителей здравого смысла, пока он еще не устарел.
