Nature Human Behaviour
何时人类与 AI 的组合真正有用：系统综述与元分析
英文原题: When combinations of humans and AI are useful: A systematic review and meta-analysis
核心结论
这项预注册系统综述汇总了 106 项实验和 370 个效应量。平均而言，人机组合的表现低于单独使用人类或 AI 中更优的一方；任务类型差异明显，决策任务更易受损，内容创作更可能获益。
AI 生成的 HIE 评估研究设计
systematic review and meta analysis
title and abstract
研究发现
Inspired by the increasing use of artificial intelligence (AI) to augment humans, researchers have studied human–AI systems involving different tasks, systems and populations. This preregistered systematic review and meta-analysis covers 106 experimental studies reporting 370 effect sizes. On average, human–AI combinations performed worse than the best of humans or AI alone, with losses in decision tasks and greater gains in content-creation tasks. The authors note possible publication bias and variation among study designs.
原论文记录证据强度
证据优势
- 预注册系统综述
- 涵盖 106 项实验研究和 370 个效应量
- 直接比较人类、AI 与组合表现
局限性
- 可能存在发表偏差
- 纳入研究的设计差异较大
这项研究不能证明什么
本记录不能证明结论适用于论文所述人群、任务、时间范围与方法之外的情境，也不应被解读为普遍因果结论。
HIE 解读
Directly synthesizes evidence about when human-AI combinations outperform or underperform their components.
AI 生成的 HIE 评估 · AI 评估置信度 95相关主题
- Human-AI Interaction
- Artificial Intelligence
- Social Intelligence
关联论断
- 限定
人机协作并不会稳定超过单独使用人类或 AI 中表现更好的一方；结果高度取决于任务与交互设计。
综合 106 项实验后，人机组合平均低于表现更好的单独主体，且任务类型解释了重要差异。
- 科学证据强度
- 95
- AI 关系判断置信度
- 95
- 来源 / 审阅级别
- 已审阅摘要
- 人类复核
- 尚无人类复核
- 溯源信息
- codex-research-curation · initial-curation-v1
原始来源
DOI 10.1038/s41562-024-02024-1 ↗