跨国深谈← 返回←Damian Borth

① 他说过的话

4 条

如果一切都是不同的，就没有什么是不同的，对吧？
If everything is different, nothing is different, right?
—— Damian Borth · [07:17]

指向原始笔记的链接

他实际上在一次讨论中说过，像，Damian，你正在做的事情真的很有趣，但是没用。
He actually said in one of the discussions like, Damian, what you’re doing is really interesting, but useless.
—— Damian Borth · [14:44]

指向原始笔记的链接

如果我们扩展规模，仅靠扩展规模并没有帮助。你需要增加模型的多样性。
If we scale, scaling alone doesn’t help. You need to increase the diversity of the models.
—— Damian Borth · [24:25]

指向原始笔记的链接

我们正在耗尽数据来训练大模型，但我们没有在使用旧模型的权重。所以为什么不使用权重，所有的知识，人们投入的所有算力，对吧？
We’re running out of data to train the large models, but we’re not using the weights of older models. So why not using the weights, all the knowledge, all the compute that people invested, right?
—— Damian Borth · [30:39]

指向原始笔记的链接

② 出现在这些集

1 集

• 《把训练好的模型当数据喂给模型：权重空间学习》 — 作为联合主持

③ 他谈到的

点进去有真内容 —— 本页主要出口

Sam Charrington · Hugging Face · 权重空间学习 · 权重 · 自编码器 · 模糊权重 · 窗口化 · 分词 · 数据集提示 · 神经架构搜索

④ 也在聊「智能体」的人