Визуальный конспект «Towards a Science of Scaling Agent Systems»: как структура задачи, инструменты и цена координации определяют пользу MAS.
✍️ Yubin Kim и 19 соавторов📅 8 апреля 2026⏱ ~172 мин🧪 260 конфигураций
Главный тезис
Масштабировать нужно не число агентов, а соответствие задачи и координации. Декомпозируемость, исходный результат одного агента и стоимость взаимодействия важнее размера команды.
MAS выигрывает там, где работу можно разделить на параллельные потоки. Жёстко последовательная задача превращает координацию в помеху.
±От +80,8% до −70,0%
Centralized дала +80,8% на Finance-Agent. Independent потеряла 70,0% на Plancraft. Универсального победителя нет.
⌁Координация быстро дорожает
После 3–4 агентов фиксированный бюджет делится между участниками, и каждому остаётся меньше ресурса на рассуждение. Больше сообщений уже не гарантирует лучший ответ.
Авторы сравнивают single-agent system (SAS) и multi-agent system (MAS) как инженерные архитектуры. Результат определяет структура работы, а не число ролей.
Схема конспекта: решение начинается с задачи и baseline
Где появляется запас
Параллельный анализ и независимый поиск позволяют распределить работу. Промежуточный контекст всё равно сжимается в сообщения, поэтому проверку нужно проектировать отдельно.
Где команда мешает
Последовательные зависимости требуют единого состояния. Разделение контекста создаёт ошибки передачи и дублирование.
Граница: порог и выбор топологии получены в этом экспериментальном дизайне. Используйте их как диагностические ориентиры; универсальной гарантии нет.
Промпты, инструменты и вычислительный бюджет выровнены. Меняются возможности базовой модели и архитектура координации, поэтому эффект MAS можно отделить от эффекта дополнительного compute.
260
экспериментальных конфигураций
6
бенчмарков разной структуры
5
топологий, включая SAS
3
семейства LLM
Контролируемый дизайн отделяет архитектуру от силы модели
03
Пять топологий: обмен сообщениями ещё не координация
Архитектура задаёт, кто видит промежуточные результаты, кто распределяет работу и как принимается итоговое решение. Одинаковое число агентов может дать разную динамику ошибок.
SAS
Single-Agent
Один агент решает задачу целиком.
Independent
Independent
Параллельная работа без peer-сообщений.
Centralized
Centralized
Оркестратор управляет подагентами.
Decentralized
Decentralized
Peer-связи и majority voting.
Hybrid
Hybrid
Оркестратор плюс прямой обмен.
Различие: communication описывает передачу сообщений. Coordination описывает разделение работы, управление зависимостями и сведение результата. Больше communication не означает лучшее coordination.
Регрессия связывает пользу MAS с силой базового агента, числом инструментов и динамикой ошибок. Один фактор подтверждён устойчивее остальных.
45Потолок baseline
При результате SAS выше примерно 45% в этой выборке MAS чаще даёт отрицательную отдачу. Взаимодействие baseline×agents: β = −0,236, p = 0,004.
16Tool-tax
В tool-heavy средах снижение эффективности MAS сильнее штрафует результат: β = −0,096. После кластеризации стандартных ошибок по наборам данных эффект теряет значимость: p = 0,205.
✓Верификация
Архитектуры с проверкой промежуточных ответов могут сдерживать распространение ошибок. Польза зависит от трассы, а не от самого факта общения.
ΔMAS = f(baseline, tools, topology, task)
Статистическая оговорка: наборов данных всего шесть. Порог baseline устойчив после кластеризации стандартных ошибок и Holm-поправки, а tool-tax и эффект intelligence при кластеризации слабее.
Figure 6 · robustness
Что показано: рост возможностей модели меняет результат, но не создаёт одну лучшую архитектуру для всех задач.
Регрессия объясняет часть абсолютного результата, но лучше ранжирует архитектуры внутри новой конфигурации. Авторы рекомендуют Agentic Capability Index (ACI) вместо общего Intelligence Index.
0,413
5-fold CV R² с ACI
0,373
5-fold CV R² с Intelligence Index
87%
верный выбор топологии на отложенных конфигурациях
Авторы проверяют устойчивость результатов и прямо фиксируют границы. Наблюдаемый порог нельзя превращать в универсальный закон.
Шесть кластеров
Стандартные ошибки кластеризованы всего по шести наборам данных. Часть коэффициентов теряет статистическую значимость.
Внешняя проверка
На BrowseComp-Plus вне обучающего диапазона модель выбирала Hybrid во всех трёх случаях и переоценивала её результат на 37%.
Индексы между вендорами
Одинаковый Intelligence Index не делает модели эквивалентными. При Index 75 SAS дала 0,45 у GPT-5.2 и 0,36/0,34 у Gemini-3.0 Pro и Gemini-3.0 Flash.
Ограниченный класс систем
Исследованы канонические текстовые топологии до девяти агентов. Промпты не оптимизировали под семейства; embodied, multimodal и long-horizon системы не проверялись.
Ещё одна граница: сложность задачи частично калибрована по наблюдаемой деградации MAS. Finance-Agent и Plancraft имеют близкую оценку сложности, но противоположный эффект. Декомпозируемость объясняет разницу лучше одного скаляра.
Используйте выводы как последовательность измерений. Чек-лист сужает поиск; финальный выбор проверьте на своей задаче.
Зафиксируйте SAS baseline: success, tokens, ходы и ошибки трассы на том же промпте и наборе инструментов.
Опишите структуру: что можно исполнять параллельно, какие шаги зависят от единого состояния, сколько tools нужно удерживать.
При baseline около 45% и выше начните с SAS: в исследовании пространство для выигрыша MAS здесь обычно исчезало.
Для параллельного анализа тестируйте Centralized: оркестратор полезен, когда независимые потоки нужно свести в один ответ.
Для tool-heavy задач сравните Decentralized: WorkBench выиграла 5,6%, но после кластеризации по набору данных tool-tax имеет p = 0,205. Нужна локальная проверка.
Считайте полную цену: overhead, success/1K tokens, message density, redundancy и trace-error amplification, а не только accuracy.
Стоп-сигнал: если задача похожа на строгую constraint satisfaction с последовательным состоянием, сначала улучшайте single-agent loop. Plancraft показал деградацию всех MAS.
Авторы: Yubin Kim, Ken Gu, Chanwoo Park, Chunjong Park, Samuel Schmidgall, A. Ali Heydari, Yao Yan, Zhihan Zhang, Yuchen Zhuang, Yun Liu, Mark Malhotra, Paul Pu Liang, Hae Won Park, Yuzhe Yang, Xuhai Xu, Yilun Du, Shwetak Patel, Tim Althoff, Daniel McDuff, Xin Liu.
SAS
