When Do Multi-Agent Systems Help? An Information Bottleneck Perspective

论文把 MAS 与 SAS 的差别写成信息瓶颈：SAS 累积完整 reasoning trace，MAS 用隔离上下文和有限 relay message 连接。理论上无限 relay bandwidth 时 MAS 可模拟 SAS；真正差异来自 bounded relays 下的冗余压缩与任务相关信息损失。18 个控制实验覆盖五个 benchmark、三种模型尺度，观察到 relay 近似充分时 MAS 尤其帮助弱模型，而强模型在冗余上下文中已能提取信息时收益会缩小或反转。