Voting or Consensus? Decision-Making in Multi-Agent Debate

作者: Lars Benedikt Kaesberg, Jonas Becker, Jan Philip Wahle, Terry Ruas, Bela Gipp

发布时间: 2025-02-27

来源: arxiv

研究方向: 多智能体辩论与决策

主要内容

本研究系统地评估了多智能体辩论中决策协议的有效性,对比了投票和共识两种决策协议在不同任务上的表现,并提出了两种新的方法来提高答案多样性。

主要贡献

1. 系统地比较了决策协议,首次发现共识在知识任务中最为有效,而投票在推理任务中表现更好。

2. 分析了增加智能体数量和延长讨论轮次之间的缩放差异。

3. 提出了两种新方法,即全智能体起草(AAD)和集体改进(CI),以通过鼓励独立思考来提高多智能体辩论中的答案多样性。

研究方法

1. 多智能体辩论环境

2. 决策协议

3. 智能体响应生成器

4. 知识任务和推理任务数据集

5. 实验设计,包括不同决策协议的比较、讨论轮次和智能体数量的影响、答案多样性提升方法等

实验结果

投票协议在推理任务中表现优于共识协议,提高了13.2%的性能;共识协议在知识任务中表现优于投票协议,提高了2.8%的性能。AAD和CI方法分别提高了3.3%和7.4%的性能。增加智能体数量可以提高性能,而增加讨论轮次则会降低性能。

未来工作

未来工作可以探索其他影响决策的特征,如管理者与员工之间的权力关系。这还可以包括在具有等级结构的个人中检查个人,以研究主导型或亲和型领导者是否更有效。