ToolNavs 发现实用AI工具
提交工具 登录
返回AI资讯
AI 专利助手三个月实验:新手交活更快,判断力却没有跟着长

AI 专利助手三个月实验:新手交活更快,判断力却没有跟着长

AI资讯 • Admin • • 6 次浏览

AI 专利助手能让律师写得更好,却未必能让新手律师更快长成本事。Google Research 于 2026 年 10 月 7 日公布了一项发表于美国国家经济研究局(NBER)的工作论文:研究者用三个月随机实验跟踪了 133 名知识产权律师,结论是,AI 带来的起草质量提升真实存在,但脱离 AI 之后的独立判断力,只有资深律师明显受益,初级律师几乎没有进步。

实验怎么设计

参与者来自 11 家知识产权律师事务所,每家所内约三分之二的律师随机获得一款当时尚未发布的 AI 专利写作助手(现已并入 Gemini Notebook),其余律师接受同样的 AI 使用培训,但要等实验结束才能拿到工具。第十天和第九十天,全体律师都要根据模拟的发明人材料各起草一份专利,由独立法律专家盲评;第九十天还追加了一项完全不许用 AI 的批改任务:修订一份埋了大量实质与文书错误的文件。这项任务测的,正是资深律师最值钱的判断力。

数字说了两件事

先说好消息。用 AI 起草的文本质量明显更高:第十天高出对照组 0.34 个标准差,约合排名前进 10 个百分点;到第九十天,差距扩大到 0.38 个标准差。初级律师的速度也快了,第十天的任务平均比对照组的 124 分钟少用 18 分钟。但把分数拆开看,提升主要来自低分变少、好分数变多,顶尖分数并没有增加。AI 更像把下限抬高,而不是把上限推高。

拿掉 AI 之后,分化出现了

第九十天那项禁用 AI 的批改任务里,用过 AI 的律师整体仍高出对照组 0.32 个标准差,但这份优势几乎全部来自资深律师,他们高出对照组 0.45 个标准差;初级律师则没有可辨别的进步,成绩还出现两极分化:极低分和好分数同时变多。研究者观察编辑习惯后发现,资深律师把 AI 输出当作逻辑审计工具,借它重写权利要求、删掉可能限缩保护范围的措辞;初级律师的典型毛病,从头到尾逐段抠字眼、发现严重缺陷只写评论不动手改,在三个月里并没有被 AI 纠正过来。

这项研究的价值,在于它把产出变好和人变强分开测了一次。对正在给团队铺 AI 工具的管理者,它给出的动作很明确:新手的训练不能因为有了助手就取消无 AI 的练习和批改环节,否则几年后会发现,能独立把关的人没有按同样的速度长出来。研究者也注明了局限:样本只有专利律师这一个职业,观察期只有三个月,结论外推到其他行业时需要谨慎。

推荐工具

更多