跨国深谈← 返回←A/B 实验 (A-B experiments)

集里怎么说它

• 《Meta 用毫秒级数据丈量工程师：AI 时代代码不再是货币》(06:40起):把产品端受控实验方法搬到内部开发工具验证上:如 React Forget 编译器实验显示 DAT 减少约 30%,据此把资源投向框架级变革

① 提到它的金句

1 条

我们做了很多 A-B 实验,在那里我们发现的令人惊讶的结果是,把三分之一的话轮路由到小模型,对留存率几乎没有可测量的影响。
And we do a bunch of A-B experiments, and the surprising result we found there is that routing a third of our turns to the small model has almost no measurable effect on retention.
—— Paula Dozsa · [06:57]

指向原始笔记的链接

② 出现在这些集

1 集

• 《Meta 用毫秒级数据丈量工程师：AI 时代代码不再是货币》 — 作为概念

③ 关联

点进去有真内容 —— 本页主要出口

Brian Hook · Moritz Beller · Meta · Microsoft Research · diff 编写时间 · DDM · 智能体 · 测试 · TDD · 开发者生产力