Энтузиаст под ником CozyBlaze поручил модели GPT-6 Astra самостоятельно пройти головоломку Portal от Valve. ИИ добрался до финальных титров за 23 часа и 43 минуты, включая ожидание и перерывы из-за ограничений мощности сервиса.
Во время эксперимента игра останавливалась, пока модель принимала решение. Astra получала скриншоты, координаты персонажа и угол обзора камеры, после чего составляла последовательность команд. Затем Portal возобновлялась на несколько секунд, а ИИ оценивал результат своих действий и планировал следующий шаг. Всего модель совершила 3 336 обращений к инструментам. Описание эксперимента и исходный код проекта опубликованы на GitHub.
Расчётная стоимость использованных токенов по тарифам API составила 571,18 доллара. Однако CozyBlaze уточнил, что запускал модель в рамках подписки Codex Pro стоимостью 200 долларов, поэтому отдельно эту сумму не оплачивал. Автор также подчеркнул, что прохождение не следует воспринимать как полноценный бенчмарк возможностей искусственного интеллекта. Запись прохождения без продолжительных пауз занимает около двух часов.
Ранее GPT-6 Astra не смогла пройти миссию Demolition Man с радиоуправляемым вертолётом в GTA: Vice City. При этом модель показала 99,9% в ARC-AGI-3 при использовании адаптированной среды, сохраняющей внутреннее состояние между запросами. В стандартном режиме результат составил 62,7%, поэтому итоговый показатель заметно зависит от условий тестирования. Оба результата опубликовала организация ARC Prize.
