C помощью игры «Марио» оценили скорость принятия решений ИИ

Американские учёные применили видеоигры для тестирования алгоритмов искусственного интеллекта. Команда экспертов из Hao AI Lab создала платформу GamingAgent, которая имитирует игровой процесс. Об этом пишет TechCrunch.

Для тестирования моделей искусственного интеллекта была выбрана популярная игра Super Mario Bros., выпущенная в 1985 году. Модели получили доступ к информации об игре и её правилах через скриншоты.

В результате тестирования лучшие результаты показала модель Claude 3.7, разработанная компанией Anthropic. Также хорошие результаты продемонстрировали модели Gemini 1.5 Pro от Google и GPT-4o от OpenAI. Однако даже самая успешная модель показала уровень игры ниже, чем у начинающих игроков.

Сооснователь OpenAI Андрей Карпатый отметил, что в 2025 году пока сложно дать точную оценку эффективности искусственного интеллекта. Он подчеркнул, что в настоящее время не существует чётких критериев для оценки моделей генеративного искусственного интеллекта.

В конце февраля инженеры OpenAI выяснили, что модели искусственного интеллекта пока не могут заменить даже начинающего программиста. В ходе тестирования модели часто допускали ошибки из-за непонимания контекста.

Ранее ITinfo сообщало, что в 2025 году компьютеры стали чаще красть личные данные.