LLM
集里怎么说它
- 《Claude Code 实战技巧:从提问到并行》(07:57起):本集说以智能体的方式使用 LLM 的酷之处在于你给它工具,它会自己弄清楚如何使用,比如给 Claude Code 编辑文件、跑 bash、搜索文件的工具它就自动串联
- 《一个人六个月做出八千万美元公司》(10:35起):本集反复讨论 LLM 写代码的能力:LLM 能把用户需求翻译成实际代码,但需要合适的基础设施(数据库、用户管理等);让 LLM 写尽可能少的代码是关键策略;不同 LLM 擅长不同任务
- 《PM的生存法则:AI时代别当瓶颈,去抢活干》(20:07起):本集把 LLM 描述为解决问题的核心能力,区分了在旧代码上插入 LLM 的’AI 在边缘’和以 LLM 为核心重新构建的’AI 在核心’两种策略
- 《AEO实战指南:如何让产品出现在ChatGPT答案里》(00:15起):本集说 LLM 在总结多条引用时,被提及次数最多的产品会被推荐,而不是链接排第一就赢;Webflow 的 LLM 流量转化率是 Google 搜索流量的 6 倍
- 《增长不是指标黑客,是连接用户与价值》(50:39起):本集说 LLM 在 Chess.com 复盘功能中的角色是把引擎评估结果翻译成用户能懂的语言和风格(个性、语音反馈),但 LLM 自己下棋很烂,会产生棋步幻觉,看棋盘图像甚至会画错方格数量。
- 《Block CTO:代码质量与产品成功毫无关系,打造 AI 原生公司靠的是组织重组》(22:58起):本集提到它们在夜间和周末往往处于闲置状态,应该被推向连续数小时乃至整夜的高自主性运行,去完成人类睡觉前描述好的多个实验方向。
- 《增长停滞怎么办?Jason Cohen 的四步诊断法》(30:52起):本集在谈及用 AI 总结退订理由时提及,大语言模型本质上是一台预测最可能性的「平均机器」,它擅长提炼通用主题,却很难找出真正能触发产品改进的、那些不平均的具体痛点细节
- 《Marc Andreessen:AI 是现代炼金术,为什么你不是在失业而是在变贵》(20:53起):本集说孩子可以和 LLM 谈论感兴趣的话题、问无限数量的问题并获得即时反馈,让一对一辅导在经济上变得可行
- 《评测优先:Braintrust 创始人谈 AI 产品开发的真正工程》(05:13起):本集说没有人真正知道 LLM 是如何工作的,它们的行为不可预测,所以你能控制的只有期望它产出什么
- 《AI 时代产品经理的生存指南》(10:42起):本集提到从业者现在晚上要花时间喂养这头在夜间运行的野兽,这带来了跟上前沿的压力,但也带来了让工作自动化的可能。
- 《Stripe 与 Replit 对谈:AI 时代的创业大爆发与护城河》(26:56起):本集把它说成:本质上依然是训练数据的函数,擅长模仿已有事物,但很难跳出固有分布去创造尚未存在的新文化或新概念。
- 《Clio 的 AI 赌注:从扑克到财务健康》(04:20起):本集说它彻底改变了公司的架构和产品;CEO 现在每天用它递归扫描全公司的 Slack、Notion 和 PR,生成直观的『船长日志』,让组织层级变扁平。
- 《Wix CEO Avishai:SaaS 末日下,我们凭什么值钱》(41:08起):嘉宾泼冷水:LLM 不擅长推理,擅长收集和重组数据;用它做科研是错误的工具,但法律这类文本密集领域最能发挥作用。
- 《Benedict Evans:AI 价值会落在哪一层?》(58:08起):本集的核心分析对象:Evans 指出 LLM 没有网络效应,所以大概率不会像 Sam Altman 说的那样变成 Windows;并用 LLM 讨论能力参差、‘大多数人可能会怎么做’的平均值问题。
- 《Gamma 联创复盘:押注空白页,赌出一亿用户》(37:48起):本集说 Gamma 早期成功发生在 LLM 还很笨的 2023 年,护栏是为笨提示词设的;现在聪明得多的 LLM 正被这些护栏拖住后腿。
- 《Synthesia CEO:AI 视频不会进好莱坞,而是创造新媒介》(15:52起):本集说在实时交互场景中,大多数用例背后是 LLM 在驱动虚拟形象说话;也提到 Victor 自己用 LLM 来回答战略问题、扮演魔鬼代言人
- 《n8n 创始人 Jan:把代码送出去,反而做到 1 亿欧元 ARR》(15:37起):本集把它比作「发动机」:LLM 需要大量来自 Google Drive、本地文件、Salesforce 等来源的数据,处理后输出回系统——这些环节 n8n 早就就位。
- 《巨头财报季:AI 军备竞赛下的供应链、会计戏法与路线分歧》(01:48起):本集把 LLM 说成是 OpenAI 和 Anthropic 等初创公司为了尽快盈利而必须重金押注的路线,并指出 Demis 认为仅靠 LLM 不足以达成真正的通用人工智能。
- 《别迷信大上下文:拆解 Claude 认证架构师考试的反模式》(08:48起):本集强调它只是个概率上的下一个词预测器,自己没法执行工具,它真正做的是把工具需要的参数提取出来交给你去执行。
- 《当所有人都在用智能体写代码,你靠什么脱颖而出:与 Wes 聊开发者的当下》(03:27起):本集说 LLM 里的解决方案都是已有的方案,当遇到全新问题时模型能帮你加速想但不能完全替你解决
- 《Portola:当AI变成即兴演员,不是助手》(22:38起):本集说 LLM 不仅仅是生成媒体的工具,它本身就是一种全新的叙事媒介(new medium for storytelling),就像收音机、电影刚出现时一样,还没人知道什么形式会行得通。
- 《Freshworks CPO:用 AI PDLC 把发布周期从六个月压到两周》(10:26起):本集提到在 Cursor 中不是所有任务都需要最新的 LLM 模型,可以按需挑选不同模型来执行。
- 《对冲基金掌门人全员押注 AI:备忘录、数据湖与“数字员工”》(10:40起):本集说持续拥有处理风险会议逐字稿的 LLM,帮助记忆、提供洞察并起到一定预测作用;最终目标是把所有部门生成的文本跟数值数据打通
- 《谁来给 AI 聊天机器人做事实核查:前 CNN 主播的新战场》(01:50起):本集将 LLM 描述为人们未来获取新闻和信息的主要渠道,正在不可避免地吞并发布者的内容,但其输出质量(尤其在政治、医疗等敏感话题上)存在系统性问题
- 《视觉协作在 AI 时代为什么消失了》(03:01起):本集说现在每个人都在跟自己选择的 LLM 对话,这非常孤独且不是视觉化的
- 《Ed Zitron:生成式 AI 是一场万亿级骗局》(15:32起):本集反复出现,被描述为使用时不管结果对不对都要付费的’文本机器’,提供中位数答案,幻觉在数学上保证会发生,是所有数据中心建设的唯一服务对象。
- 《美国才是最大的新兴市场》(03:13起):本集说 LLM 的获取成本正在大幅下降,使得住在美国经济腹地、拥有领域知识(制造业、医疗、物流等)的创始人可以用 AI 把痛点变成可规模化的公司
- 《Rackspace 首席 AI 官 Chetan Gupta:企业该停止纠结模型、开始思考架构》(20:53起):本集把 LLM 视为架构中的一层(模型层不只有大 LLM,还有自己的模型库),讨论其 token 成本、数据主权风险与换进换出。
- 《Transformer 不满十岁:AI 集中不是宿命》(04:04起):本集说一块消费级 GPU 没法训练大的 LLM,但足够做研究和实验;而当前大语言模型回答千篇一律,比如讲笑话总是同一个
- 《一个设计师 + AI:如何撑起 7000 人大会的全部设计》(04:04起):本集以「鹈鹕骑自行车」矢量图测试说明 LLM 直接产矢量文件对设计师没法用;并提醒 Claude 或任何 LLM 都爱乱扔随机字号,须靠设计系统约束。
- 《设计-代码往返并不存在:一位 30 年老兵的实测与漂移警告》(03:17起):让 Jonathan 以为能以推理速度闭合设计-代码闭环的智能来源;但模型本身是非确定性、概率性的,是本集指出的第一个盲区。
- 《Shopify CEO Toby:一半代码来自聊天群里的 AI 同事》(12:21起):本集说 LLM 是决策环境而非决策者:可当裁判模型复核推理链、编排多角色小委员会,但’机器无法承担责任’,判断必须留在人身上
① 提到它的金句
25 条
因为 LLM 正在总结许多引用,所以你需要尽可能多地被提及。
指向原始笔记的链接
Because the LLM is summarizing many citations and so you need to get mentioned as many times as possible.
—— Ethan Smith · [11:12]
Webflow,我们看到 LLM 流量和 Google 搜索流量之间的转化率差异是 6 倍。
指向原始笔记的链接
Webflow, we saw a 6X conversion rate difference between LLM traffic and Google Search traffic.
—— Ethan Smith · [14:47]
我认为有很多它表现不太好的情况,但我觉得如果你把 LLM 当裁判的用途从一个基准重新定义为一个异常检测器,那它其实是可以的。
指向原始笔记的链接
Well, I think there’s a lot of cases where it doesn’t work very well, but I think if you reframe the utility of an LLM as a judge from being a benchmark to being an anomaly detector, then I think it’s actually okay.
—— Ankur Goyal · [25:10]
一个模型或者一个非常重的 LLM 产品,然后展示一堆关于性能的柱状图,这说白了,全是营销。
指向原始笔记的链接
A model or a really LLM heavy product and showing a bunch of bar charts about performance, that is like, it’s all marketing.
—— Ankur Goyal · [55:28]
当我们试图请求一个 LLM 做这个错误分析时,我们通常发现它只是说追踪看起来很好,因为它没有理解某样东西是否可能是坏的产品味道所需的上下文。
指向原始笔记的链接
What we usually find when we try to ask an LLM to do this error analysis is it just says the trace looks good because it doesn’t have the context needed to understand whether something might be bad product smell or not.
—— Shreya Shankar · [24:09]
如果你因为市场还没准备好而失败,我实际上认为那样更好。至少你尝试过某种深刻的、新颖的、困难的事情,而不是转型成为另一家 LLM 包装公司。
指向原始笔记的链接
If you fail because the market isn’t ready yet, I actually think that’s way better. At least you took a swing at something deep, and novel, and hard instead of pivoting into another LLM wrapper company.
—— Edwin Chen · [30:13]
一旦你接受了评测,你就会意识到 LLM 所做的不过是你在产出的评测的一个函数。
指向原始笔记的链接
once you embrace evals, then you realize that what the LLM does is merely a function of the evals that you’re producing.
—— Ankur Goyal · [05:34]
良好的变更管理并承认每次你例如替换智能体中的 LLM 时,它的行为都会不同。如果你不在你的治理中考虑到这一点,你的最终用户将承担其后果。
指向原始笔记的链接
Good change management and acknowledging that every time you, for example, replace the LLM in an agent, it will behave differently. And if you don’t take that into account in your governance, your end users will bear the burden of that.
—— Emil Lassen · [20:09]
LLM 不会神奇地从你的大脑中提取你的知识,除非你把那些知识变成规则,否则你不可避免地会以沮丧告终。
指向原始笔记的链接
The LLM is not going to magically extract your knowledge from your brain and you will inevitably end up frustrated unless you turn that knowledge into rules
—— Kitsa · [04:37]
在我看来:LLM 是发动机,而我们是车、是道路、是整个系统。
指向原始笔记的链接
The way I see it: the LLM is the engine, and we’re the car, the roads, and the whole system.
—— Carlos González de Villaumbrosia · [16:37]
人类与大语言模型的混合模式现在真的非常成功。但是没有人类的大语言模型,就不怎么行,根本不行。
指向原始笔记的链接
The human-LLM hybrid is really, really successful right now. But LLMs without humans, not so much, not at all.
—— Jerry Tworek · [39:00]
我们不盲目使用 LLM 代码的原因是我们还不信任它,因为它们底层的系统没有足够的刚性。
指向原始笔记的链接
The reason that we don’t use LLM code blindly is because we don’t trust it yet, because the systems underneath them don’t have enough rigidity.
—— Vaibhav Gupta · [17:17]
从 Demis Hassabis 往下,他基本上都把世界模型视为前进的道路,视为最重要的东西,并且他们愿意在 LLM 开发上退居二线
指向原始笔记的链接
from Demis Hassabis on down he just basically views world models as the way forward as the most important thing and they’re willing to sort of take a back seat on llm development
—— 嘉宾 · [55:14]
问题是 LLM 做不了任何事。
指向原始笔记的链接
The problem is the LLM can’t do anything.
—— Frank Coyle · [08:53]
上下文溢出到主上下文,因为上下文意味着 tokens,tokens 意味着钱,而且你有越多的上下文,LLM 在给你答案时就会越困惑。
指向原始笔记的链接
Context spill over into the main context because context means tokens, tokens mean money, and the more context you have, the more confused the LLM is gonna be in giving you an answer.
—— Frank Coyle · [13:11]
这导致了一些非常令人惊讶的行为,因为实际上你离能够访问 10,000 个上下文桶只有不到两次 LLM 调用的距离,其中每一个都包含 200,000 个 token。
指向原始笔记的链接
And that leads to some really surprising behaviors because you’re literally no more than two LLM calls away from being able to access 10,000 context buckets each one of which contains 200,000 tokens.
—— Flo Crivello · [32:49]
如果把我的品味排除在外,LLM 讨厌 Grock 并且它喜欢 Claude Opus。它喜欢 Sonnet 并且它不喜欢 GPT-56 Sol。
指向原始笔记的链接
If you take my taste out of it, The LLM hates Grock and it loves Claude Opus. It loves Sonnet and it does not like GPT-56 Soul.
—— 嘉宾 · [25:08]
当你使用 LLM 时你要付费,无论你是否得到了你想要的东西。
指向原始笔记的链接
You pay when you use an LLM, regardless of whether you get what you want.
—— 嘉宾 · [15:32]
如果你只围绕某个特定的 LLM 裁判去爬山,你很可能是在对它过拟合。
指向原始笔记的链接
And if you’re only hill climbing on a specific LLM judge, you’re probably overfitting on it.
—— Vishu · [07:35]
有几项学术研究表明,最开头的 7K 和最末尾的 7K token 是最重要的,而中间的那些东西最终只会在 LLM 试图想出答案时把它搅浑、让它困惑。
指向原始笔记的链接
There’s a couple academic studies that show that like the first 7K and like the last 7K tokens are the most important and the stuff that’s in between can end up just muddying and confusing the LLM as it’s trying to come up with an answer.
—— 嘉宾 · [56:56]
我会担心任何这样的记忆架构:它不依赖成本更低的嵌入器和重排序器,而是依赖 LLM 的多遍处理来帮你分类并缩小数据语料库。
指向原始笔记的链接
I would worry about any memory architecture that instead of relying on lower costs embedders and re-rankers is relying on multiple passes of the LLM to help you categorize and shrink the corpus of data
—— 嘉宾 · [66:35]
你给一个 LLM 一个目标,它会在护栏之内竭尽所能去解决那个目标。
指向原始笔记的链接
You give an LLM a goal, it will do everything it can within guardrails to solve that goal.
—— 嘉宾 · [19:26]
我不认为只靠一个 LLM 就能做到。它们今天还不够,我也不认为它们有足够的创造力,但它们确实非常有帮助。
指向原始笔记的链接
I don’t think you can get there with just an LLM. They’re not enough today. I don’t think they’re creative enough either, but they’re definitely super helpful.
—— Alexander Whedon · [47:11]
顺便说一句,这比大多数 LLM-as-a-judge 方法——也就是让一个 LLM 来判断那是优质的人类作品还是 AI 生成的 slop——表现都要好。
指向原始笔记的链接
This performed better, by the way, than most LLM-as-a-judge methods of asking an LLM to judge if that is great human quality versus AI-generated slop.
—— Thais Castello Branco · [08:29]
整个「LLM 套壳」或「模型套壳」的概念其实正在跑通
指向原始笔记的链接
the whole concept of being a sort of LLM wrapper or model wrapper is actually working out
—— Aaron Levie · [02:18]
② 出现在这些集
32 集
- 《Claude Code 实战技巧:从提问到并行》 — 作为概念
- 《一个人六个月做出八千万美元公司》 — 作为概念
- 《PM的生存法则:AI时代别当瓶颈,去抢活干》 — 作为概念
- 《AEO实战指南:如何让产品出现在ChatGPT答案里》 — 作为概念
- 《增长不是指标黑客,是连接用户与价值》 — 作为概念(提及)
- 《Block CTO:代码质量与产品成功毫无关系,打造 AI 原生公司靠的是组织重组》 — 作为概念
- 《增长停滞怎么办?Jason Cohen 的四步诊断法》 — 作为概念(提及)
- 《Marc Andreessen:AI 是现代炼金术,为什么你不是在失业而是在变贵》 — 作为概念
- 《评测优先:Braintrust 创始人谈 AI 产品开发的真正工程》 — 作为概念
- 《AI 时代产品经理的生存指南》 — 作为概念(提及)
- 《Stripe 与 Replit 对谈:AI 时代的创业大爆发与护城河》 — 作为概念(提及)
- 《Clio 的 AI 赌注:从扑克到财务健康》 — 作为概念
- 《Wix CEO Avishai:SaaS 末日下,我们凭什么值钱》 — 作为概念
- 《Benedict Evans:AI 价值会落在哪一层?》 — 作为概念
- 《Gamma 联创复盘:押注空白页,赌出一亿用户》 — 作为概念
- 《Synthesia CEO:AI 视频不会进好莱坞,而是创造新媒介》 — 作为概念(提及)
- 《n8n 创始人 Jan:把代码送出去,反而做到 1 亿欧元 ARR》 — 作为概念
- 《巨头财报季:AI 军备竞赛下的供应链、会计戏法与路线分歧》 — 作为概念
- 《别迷信大上下文:拆解 Claude 认证架构师考试的反模式》 — 作为概念
- 《当所有人都在用智能体写代码,你靠什么脱颖而出:与 Wes 聊开发者的当下》 — 作为概念
- 《Portola:当AI变成即兴演员,不是助手》 — 作为概念
- 《Freshworks CPO:用 AI PDLC 把发布周期从六个月压到两周》 — 作为概念(提及)
- 《对冲基金掌门人全员押注 AI:备忘录、数据湖与“数字员工”》 — 作为概念
- 《谁来给 AI 聊天机器人做事实核查:前 CNN 主播的新战场》 — 作为概念
- 《视觉协作在 AI 时代为什么消失了》 — 作为概念(提及)
- 《Ed Zitron:生成式 AI 是一场万亿级骗局》 — 作为概念
- 《美国才是最大的新兴市场》 — 作为概念
- 《Rackspace 首席 AI 官 Chetan Gupta:企业该停止纠结模型、开始思考架构》 — 作为概念
- 《Transformer 不满十岁:AI 集中不是宿命》 — 作为概念
- 《一个设计师 + AI:如何撑起 7000 人大会的全部设计》 — 作为概念
- 《设计-代码往返并不存在:一位 30 年老兵的实测与漂移警告》 — 作为概念
- 《Shopify CEO Toby:一半代码来自聊天群里的 AI 同事》 — 作为概念
③ 关联
点进去有真内容 —— 本页主要出口
智能体 · Anthropic · ChatGPT · Lenny · Claude · OpenAI · Claude Code · MCP · vibe coding · 护栏
