Vals AI: команды ИИ-агентов обходятся в 1,8–5,1 раза дороже одиночных, но почти не улучшают результат
Материал подготовлен Sintelligent с помощью ИИ. Опубликовано в SI: . Обновлено: .
Много ИИ-агентов вместо одного стоит заметно дороже, а результат почти не лучше — иногда выгоднее просто включить более сильные рассуждения.
Компания Vals AI запустила GPT-6 Sol и Claude Opus 5.5 на тесте Vibe Code Bench поодиночке и командами при среднем и максимальном уровне рассуждений. Команды обошлись в 1,8–5,1 раза дороже; статистически значимое улучшение дал только один из четырёх сравнений — GPT-6 Sol на среднем уровне, плюс 7,3 балла. По данным Vals AI, повышение уровня рассуждений одиночного агента со среднего до максимального дало +11,4 балла, а добавление команды сверху — ещё +1,4 без статистической значимости. Как пишет The Decoder, собственные данные Anthropic на Opus 5.5 показывают то же: от 10 до 100 агентов качество растёт лишь немного (в одном тесте с 0,70 до 0,74). Vals AI делает вывод, что выгода команды зависит от модели, задачи и бюджета.
Источники 3