Сообщество NetHackers, запущенное Институтом AIRI, ставит целью создание автономного ИИ, способного стабильно проходить игру NetHack. Проект координирует разработку систем планирования, используя игру как сложный бенчмарк из-за процедурной генерации уровней и необходимости долгосрочного планирования.
Тестирование проводится на версии NetHack 3.6.6 в среде NLE. Оценка ботов охватывает 73 стартовых персонажа, для каждого из которых предусмотрено 15 открытых и 15 закрытых подземелий. Такой подход позволяет отсеивать решения, подогнанные под конкретные условия, и проверять реальный прогресс агентов.
В качестве базовой модели используется бот AutoAscend, победитель NetHack Challenge 2021 года, чей прогресс составляет около 7,8%. На текущий момент рекорд на лидерборде проекта достиг 32%. Несмотря на успехи методов обучения с подкреплением и языковых моделей, стабильного автономного прохождения игры пока не достигнуто.
Участники могут предлагать любые методы: от написания правил вручную до использования кодинг-агентов. Для обеспечения безопасности и воспроизводимости результатов код запускается в изолированных контейнерах с лимитами ресурсов, а все достижения привязываются к открытым репозиториям авторов для дальнейшего изучения сообществом.
