Science
生成式人工智能生产力效应的实验证据
英文原题: Experimental evidence on the productivity effects of generative artificial intelligence
核心结论
一项纳入 453 名专业人员的预注册实验显示,使用 ChatGPT 后任务耗时减少 40%,评定的产出质量提高 18%;在所研究的短篇写作任务中,技能较低者获益最大。
AI 生成的 HIE 评估研究设计
preregistered randomized experiment
title and abstract
研究发现
In a preregistered online experiment, 453 college-educated professionals completed occupation-specific, incentivized writing tasks, with half given access to ChatGPT. AI access reduced completion time by 40% and increased output quality by 18%; lower-skill participants benefited most. The study measures short, self-contained writing tasks and immediate outcomes, which limits conclusions about long-term workplace effects.
原论文记录证据强度
证据优势
- 随机分组
- 预注册实验
- 带激励且贴近职业的任务
局限性
- 任务短且相对独立
- 样本主要受过大学教育
- 主要测量即时结果
这项研究不能证明什么
本记录不能证明结论适用于论文所述人群、任务、时间范围与方法之外的情境,也不应被解读为普遍因果结论。
HIE 解读
Preregistered randomized evidence that generative AI changes speed, quality, and inequality in professional writing tasks.
AI 生成的 HIE 评估 · AI 评估置信度 93相关主题
- Human-AI Interaction
- Artificial Intelligence
- Learning
关联论断
- 支持
人机协作并不会稳定超过单独使用人类或 AI 中表现更好的一方;结果高度取决于任务与交互设计。
随机提供 ChatGPT 使用权后,参与者在边界明确的职业写作任务中速度与质量均提高,技能较低者获益更大。
- 科学证据强度
- 91
- AI 关系判断置信度
- 93
- 来源 / 审阅级别
- 已审阅摘要
- 人类复核
- 尚无人类复核
- 溯源信息
- codex-research-curation · initial-curation-v1
原始来源
DOI 10.1126/science.adh2586 ↗