Как искусственный интеллект соперничает с человеческим разумом: итоги нового теста

Самый сложный тест на интеллект для ИИ

Искусственный интеллект развивается стремительно, но для оценки его настоящего уровня понимания создан новый, крайне сложный экзамен. Тест под названием «Последний экзамен человечества» разработан почти 1000 экспертами и включает 2500 вопросов. Его цель — выявить слабые стороны ИИ и чётко показать разрыв между машинным и человеческим интеллектом.

Особенности и разработка теста

Тест подготовила международная исследовательская группа во главе с доктором Тунгом Нгуеном из Техасского университета A&M. Вопросы охватывают математику, гуманитарные науки, естественные дисциплины, древние языки и другие узкоспециализированные области. Они специально подобраны так, чтобы их нельзя было легко найти в интернете и на которые современные модели ИИ не могут дать правильный ответ. Это позволяет проверить не только распознавание шаблонов, но и глубокое понимание и контекстуальные знания.

Результаты моделей искусственного интеллекта

Первые итоги экзамена наглядно демонстрируют текущее состояние ИИ. Модель GPT-4o показала точность 2,7%, Claude — 3,5%, Sonnet — 4,1%, а модель OpenAI o1 — 8%. Более новые и мощные модели Gemini 3.1 Pro и Claude Opus 4.6 набрали от 40 до 50%. Эти показатели свидетельствуют, что ИИ пока не достиг экспертного уровня человеческих знаний.

Мнение экспертов и значение теста

Доктор Тунг Нгуен отмечает: «Интеллект — это не просто распознавание образов, а глубина, контекст и специализированные знания». Он добавляет: «Этот тест — не соревнование с ИИ, а способ понять его сильные и слабые стороны». Результаты опубликованы в журнале Nature и стали плодом сотрудничества специалистов из разных стран.

Значение различий между человеком и ИИ

Экзамен — важный шаг для оценки развития и рисков искусственного интеллекта. Он подчёркивает сложность и глубину человеческого разума и текущие ограничения ИИ. Большая часть теста остаётся закрытой, чтобы предотвратить заучивание ответов и объективно оценить уровень понимания ИИ.

Этот тест показывает, в каком направлении должен развиваться искусственный интеллект и вновь подчёркивает уникальные особенности человеческого интеллекта.