← 全部论文

Science

生成式人工智能生产力效应的实验证据

英文原题: Experimental evidence on the productivity effects of generative artificial intelligence

2023-07-141485 次引用DOI 10.1126/science.adh2586

Shakked Noy · Whitney Zhang

核心结论

一项纳入 453 名专业人员的预注册实验显示,使用 ChatGPT 后任务耗时减少 40%,评定的产出质量提高 18%;在所研究的短篇写作任务中,技能较低者获益最大。

AI 生成的 HIE 评估

研究设计

preregistered randomized experiment

title and abstract

研究发现

In a preregistered online experiment, 453 college-educated professionals completed occupation-specific, incentivized writing tasks, with half given access to ChatGPT. AI access reduced completion time by 40% and increased output quality by 18%; lower-skill participants benefited most. The study measures short, self-contained writing tasks and immediate outcomes, which limits conclusions about long-term workplace effects.

原论文记录

证据强度

证据优势

  • 随机分组
  • 预注册实验
  • 带激励且贴近职业的任务

局限性

  • 任务短且相对独立
  • 样本主要受过大学教育
  • 主要测量即时结果

这项研究不能证明什么

本记录不能证明结论适用于论文所述人群、任务、时间范围与方法之外的情境,也不应被解读为普遍因果结论。

HIE 解读

Preregistered randomized evidence that generative AI changes speed, quality, and inequality in professional writing tasks.

AI 生成的 HIE 评估 · AI 评估置信度 93

相关主题

  • Human-AI Interaction
  • Artificial Intelligence
  • Learning

关联论断

原始来源

DOI 10.1126/science.adh2586 ↗