验证 (verification)
集里怎么说它
- 《从看护智能体到认知投降:工程师该守住什么》(13:51起):本集说生成现在变得容易了,验证才是当前真正的瓶颈;需要将什么是好的、什么是对的编码进系统(用户旅程、测试、视觉回归测试),让智能体输出有东西可对比
- 《代码量暴涨8倍后,工程管理怎么办?》(09:23起):当编码不再受限于工程时间且产出激增时,团队面临的新核心命题;即如何确保所有人(包括 PM 和设计师)提交的高吞吐量代码符合预期质量。
- 《别再微管理 Claude:Claude Code 造物主的智能体实战心法》(20:51起):本集把它说成:放手让模型做长周期任务时单一最重要的环节。需要让模型有能力沿途验证自身的工作输出,比如通过在虚拟机里运行旧版截图对比,这样它就不会卡住并持续运行。
- 《Arm CEO 谈芯片、AI 与下一个十年的算力格局》(00:23起):本集指出验证、确认、调试是芯片周期中最耗时的环节,而『AI 非常擅长做这个』,是 AI 最先攻下的环节。
- 《鼠标力:为智能体时代找回「马力」这把尺子》(12:22起):本集说瓶颈转移到了验证一侧:若验收标准不确定性太高,验证与执行无法区分——验证的人几乎得把活儿重做一遍,纯浪费 token。
① 提到它的金句
8 条
所以有时我只是在 ChatGPT 浏览器使用之上的人工验证层。
指向原始笔记的链接
And so sometimes I’m just the human verification layer on top of ChatGPT browser use.
—— 嘉宾 · [23:27]
我特意强调是“与你”,而不是“为你”,因为那个验证环节,重申一下,我认为正是人类杠杆的来源。
指向原始笔记的链接
Um and I’m being key there to say with you, not for you, um, because that verification bit, just to reiterate, is something that I think where it’s the human leverage comes from.
—— Rob Willoughby · [49:02]
验证,我认为,可能是人们做不对的单一最重要的事情,大体上。
指向原始笔记的链接
And the verification, I think, is probably the single most important thing that people do not get right, largely.
—— Boris Cherny · [20:51]
我实际上会争辩说,现在的 AI 前沿是能够在没有验证的地方建立验证的 AI 系统,因此它们可以推进到今天人类认为对 AI 来说太难解决的任务中。
指向原始笔记的链接
I actually would argue the frontier right now of AI is AI systems that can build verification where there is none, and thus they can progress into tasks that today humans consider to be too difficult for AI to resolve.
—— Eno Reyes · [11:46]
实际的设计并不是占用时间最多的部分。占用时间最多的是验证、确认、调试。而 AI 非常擅长做这个。
指向原始笔记的链接
The actual design is not the largest amount of time. The largest amount of time is in the verification, the validation, the debug. AI is really good at that.
—— Rene Haas · [00:20]
那个验证步骤——它并不意味着我拥有全面的知识,只意味着我知道我最终想看到什么——实在是太关键了。
指向原始笔记的链接
That verification step that doesn’t imply I have comprehensive knowledge, it just implies that I know what I want to see in the end, is so critical.
—— Chris Potts · [53:30]
瓶颈最终转移到了验证这一侧,因此,我们没有办法大规模地衡量价值,并以同样的速度判断质量。
指向原始笔记的链接
the bottleneck ends up shifting to the verification side, and thus, we don’t have a way to measure value at scale and to judge quality at the same speed.
—— Maximillian Piras · [12:20]
当验收标准具有很高的不确定性时,你基本上就处于一个验证与执行无法区分的境地。
指向原始笔记的链接
when you have high uncertainty in the acceptance criteria, you pretty much have a spot where verification is indistinguishable from execution.
—— Maximillian Piras · [19:11]
② 出现在这些集
5 集
- 《从看护智能体到认知投降:工程师该守住什么》 — 作为概念
- 《代码量暴涨8倍后,工程管理怎么办?》 — 作为概念
- 《别再微管理 Claude:Claude Code 造物主的智能体实战心法》 — 作为概念
- 《Arm CEO 谈芯片、AI 与下一个十年的算力格局》 — 作为概念
- 《鼠标力:为智能体时代找回「马力」这把尺子》 — 作为概念
③ 关联
点进去有真内容 —— 本页主要出口
智能体 · Anthropic · Claude Code · harness · Lenny · Boris Cherny · Elad · Maximillian Piras · 认知债务 · Fiona Fung
