跨国深谈← 返回←Daniel McKinnon

① 他说过的话

3 条

如果你创建一个非常难的评估,得分 0%,你甚至也不知道这是否在当今技术下是可能的。
If you create a very hard eval that scores 0%, you also don’t even know if this is kind of possible with today’s technologies.
—— Daniel McKinnon · [08:33]

指向原始笔记的链接

但如果你看看现在生成式人工智能的所有头条新闻,它不是质量保证,它是智能体。
But if you look at all the headlines in Gen AI right now, it’s not QA, it’s agents.
—— Daniel McKinnon · [09:55]

指向原始笔记的链接

所有这一切意味着核心模型任务是什么,不再是从用户那里获取一个提示词并返回一个答案,但实际上是从用户那里获取一个需要许多、许多步骤的任务。
All this means is what the core model task is, is no longer to get a prompt from a user and come back with an answer, But it is actually to get a task from a user that requires many, many steps.
—— Daniel McKinnon · [13:20]

指向原始笔记的链接

② 出现在这些集

1 集

• 《eval 会取代 PRD 吗?AI 产品经理的新工作法门》 — 作为主持

③ 他谈到的

点进去有真内容 —— 本页主要出口

Akash · 评估 · PRD · 智能体 · harness · 全基因组测序 · 离线评估 · 金发姑娘 · Gamoff Labs · Codex

④ 也在聊「产品方法」的人