Известный исследователь в области искусственного интеллекта и бывший инженер Google Франсуа Шолле объявил о создании некоммерческой организации ARC Prize Foundation. Её главная цель - разработка методов оценки ИИ на предмет "человеческого уровня" интеллекта.
Президентом фонда станет Грег Камрадт, ранее занимавший пост директора по разработке в Salesforce. Сбор средств для организации начнется в январе этого года.
Фонд продолжит развитие тестовой системы ARC-AGI, созданной Шолле в 2019 году. Эта система представляет собой набор головоломок, где ИИ должен генерировать правильные решётки из цветных квадратов. Задачи специально разработаны так, чтобы проверить способность ИИ адаптироваться к новым, ранее не встречавшимся проблемам.
До недавнего времени даже лучшие системы ИИ могли решить лишь треть задач ARC-AGI. Летом прошлого года модель o3 от OpenAI первой достигла проходного балла, хотя и потребовала огромных вычислительных мощностей. При этом сам Шолле отмечает, что это не означает достижения человеческого уровня интеллекта.
В планах фонда - запуск обновлённой версии теста ARC-AGI в первом квартале года, а также разработка его третьей версии. Интересно, что генеральный директор OpenAI Сэм Альтман заявил о намерении сотрудничать с командой ARC-AGI в создании будущих тестов.
Фонд также планирует создать академическую сеть для продвижения исследований общего искусственного интеллекта (AGI) и сформировать коалицию ведущих лабораторий ИИ для совместной работы над отраслевыми стандартами оценки.