Эксперимент включал восстановление настольного таймера Pomotroid v0.13.0 с использованием модели gpt-6-astra через три интерфейса: официальный API OpenAI, OpenRouter и TeamoRouter. Задача требовала анализа исходного кода, реализации логики таймера и добавления функции импорта и экспорта JSON в изолированной среде Docker.
Все три версии успешно прошли девять автоматических проверок, набрав 70 из 70 баллов. Базовая логика таймера принесла 40 баллов, сохранение настроек — 10 баллов, а функции импорта и экспорта — 20 баллов. Еще 30 баллов были отведены под ручную оценку.
Показатели производительности различались. Официальный API OpenAI завершил первый этап за 6 минут 23,1 секунды, OpenRouter — за 6 минут 49,1 секунды, а TeamoRouter — за 8 минут 46,6 секунды. Количество API-запросов варьировалось от 27 до 33 на один запуск.
Анализ расходов показал разницу в стоимости. Официальный API OpenAI стоил $5,82 за 29 запросов, OpenRouter — $5,71 за 27 запросов. TeamoRouter оказался наиболее экономичным, затратив $1,67 на 33 запроса, однако на выполнение задачи через него потребовалось больше времени и токенов.
