跳到正文
原文
Google Research·· 2 小时前精选AI 评分80

Google 专利撰写实验显示 AI 提升初级律师产出但未增强其独立判断力

Does better work always mean better workers?

AI 导读

Google Research 与 NBER 合作开展的三个月实地实验发现,AI 辅助显著提升了专利律师的短期起草效率和质量,但未能帮助初级律师建立资深律师所需的独立专业判断力。在10天和90天的测试中,获得AI工具的律师在起草任务上的得分分别提升了0.34和0.38个标准差,相当于百分位排名上升10至11个点,且这种提升主要来自减少低分而非增加顶尖表现。然而,当要求所有参与者在无AI辅助下对包含错误的专利进行修订时,初级律师的表现并未显示出持续的技能增长,其分数分布反而出现两极分化,而资深律师则因将AI视为逻辑审计器而强化了基础专业知识。

实验细节显示,初级律师在使用AI时倾向于机械地执行重写和表面编辑,未能从“诊断缺陷”转向“执行修复”,这种认知模式在三个月内未被改变;相比之下,资深律师利用AI输出作为验证工具,主动重构权利要求并剥离限制性语言,从而加深了对法律原则的理解。该结果挑战了“更好工作必然意味着更好员工”的直觉,表明对于缺乏基础经验的从业者,AI可能成为掩盖技能短板的临时外骨骼,而非加速能力积累的催化剂。

这一发现对AI工具设计和企业培训策略提出了具体约束:若目标是培养未来的专家,必须设计能强制用户进行无辅助决策或深度反思的机制,而非单纯优化即时产出。事实层面确认了AI在特定专业场景下的短期增益与长期技能脱钩现象;推断层面认为当前工具设计可能加剧初级与资深从业者的能力断层;猜测层面指出随着模型能力提升,若缺乏针对性的评估机制,这种脱钩效应可能在更多知识密集型行业重演。

推荐理由

实验揭示AI对初级律师的短期提效未转化为长期判断力,校正了工具即能力的假设。

来源:Google Research · research.google