AI 编程助手真实生产力账本:三个团队四周实测,省下的时间去哪了
不聊基准分数,只算工时账。我们用任务日志追踪三个不同规模团队四周的 AI 编程使用情况,发现节省的编码时间有近一半被转移到了审查、调度和返工上。这篇文章给出可复用的记账方法。
为什么基准分数不可信
SWE-bench 从 40% 涨到 80% 只用了两年,但没有任何一个团队因此把交付周期缩短一半。原因很简单:基准测的是”能不能解出这道题”,而工程团队关心的是”这个月能不能少加两天班”。
这两者之间隔着一整条链路:任务拆解、上下文准备、代码审查、集成冲突、回归验证。AI 主要加速其中一环,而其他环节的时间可能因为它的介入而增加。
所以我们做了一个很朴素的实验:记账。
记账方法
参与团队三个,四周,所有与编码相关的活动用同一套标签打点:
| 阶段 | 记录内容 |
|---|---|
| 需求理解 | 读文档、澄清需求、写任务卡片 |
| 上下文准备 | 找相关文件、整理提示、给 AI 说明背景 |
| 生成与改写 | AI 首次生成 + 人工修改 |
| 审查 | 看 diff、查逻辑、写评论 |
| 集成与验证 | 跑测试、修冲突、处理 CI |
| 返工 | 上线后因本次改动引入的问题 |
关键纪律:打点必须实时,不能下班前回忆。我们用了一个极简的 CLI,一条命令记录阶段切换,平均每天打断不到 6 次。
三个团队的画像:
- A 团队:5 人,ToB SaaS,技术栈稳定,AI 工具为 Cursor + 补全
- B 团队:8 人,消费端 App,迭代快,AI 工具为 Claude Code 做任务级生成
- C 团队:3 人,算法侧,代码量少但要求高,主要用 AI 写实验脚本和数据处理
结果:时间确实省了,但不是省在你以为的地方
汇总四周数据(单位:人均每日分钟):
| 阶段 | 使用前 | 使用后 | 变化 |
|---|---|---|---|
| 上下文准备 | 41 | 78 | +90% |
| 生成与改写 | 186 | 96 | −48% |
| 审查 | 34 | 71 | +109% |
| 集成与验证 | 52 | 58 | +12% |
| 返工 | 22 | 29 | +32% |
| 需求理解 | 63 | 61 | −3% |
净节省:约 14% 的编码相关工时。这个数字和多数严谨的行业研究相当接近(学界多份随机对照实验给出的区间是 10%~25%,低经验者收益更高,高经验者在熟悉代码库上收益可能接近零甚至为负)。
真正有意思的是结构:生成环节省下的 90 分钟,有 68 分钟被上下文准备和审查吃掉了。
谁在这次转移中赚了,谁亏了
赚的人:刚入职 1 年以内的人。 他们的瓶颈常在”不知道怎么写”,AI 给出的初稿节省了大量试错。他们的审查负担也较轻,因为看不懂的地方会主动去问,反而学到了东西。
亏的人:写核心模块的资深工程师。 他们对代码库的隐性约束(性能预算、并发假设、历史事故)在 AI 的默认输出里几乎得不到体现。审查 AI 生成的 diff,认知负荷比审查同事的代码更高——因为同事的代码有可预期的风格,AI 的代码”看起来都对”。
这是最危险的部分:AI 的代码错误密度低但隐藏性好。它不会写出跑不起来的代码,会写出在负载下慢 10 倍的代码。
怎么把账做平
三个团队后续都做了同样几件事,净节省从 14% 提到了 22%~26%:
1. 把上下文准备前置成资产。 每个模块维护一份 AGENTS.md / CLAUDE.md,写清楚架构边界、禁用的库、性能约束、常见陷阱。这份文件从”每天写提示”变成”一次性投资、持续维护”,人均每天省 25 分钟。
2. 定义”AI 友好任务”。 我们统计出:接口增删改、单测补齐、脚本类任务的净收益是正的(+30% 以上);跨模块重构、性能敏感路径、涉及并发与事务的改动净收益为负。先做分类,再决定要不要交给 AI,比无差别使用强得多。
3. 审查前先让 AI 自审一遍。 要求生成方给出”这次改动可能影响哪些调用方”的清单,人工审查只验证清单是否完整。这一步把审查时间从 71 分钟压到 45 分钟左右,且漏掉的真实缺陷数量下降了。
4. 给生成设上限。 单次 diff 超过 400 行时,审查效率断崖式下跌。团队 B 的规则是”超过 400 行必须拆成多个 PR”,执行两周后返工率回落。
给想自己做这件事的团队的建议
- 不要用”感觉快了”作为结论,你一定记错。
- 至少记四周,第一周是新鲜期,数据不可用。
- 分阶段记账,而不是只记”总时长”。总时长掩盖了你在哪个环节亏了。
- 把返工单独拆出来。很多省时的假象,是因为返工发生在下一周、算到了别人头上。
- 按人分组看。平均值会骗你,资深和新人的曲线方向经常相反。
最后一句:AI 编程助手的真实价值不是”让程序员写得更快”,而是让写得快这件事变得不那么稀缺,从而把工程团队的瓶颈推向设计和审查。谁先意识到瓶颈已经转移,谁就先拿到收益。