MO
MOE
概念
本站收录 2 集 · 0 条金句 · 关联 10 个
集里怎么说它
- 《Transformer 已见顶?OpenAI 与 Google 双雄离职造新架构》(03:10起):本集在回顾过去六年给模型疯狂加参数的历史时提到,行业花了大约两三年时间,才真正把稀疏模型(MoE)等架构的效率打磨到现在的水平。
- 《内存带宽才是 AI 芯片的下一个战场:Fractile 创始人 Walter 的押注》(28:58起):本集说 MoE 理想上应越来越稀疏(1/16 到 1/256)以省大量算力,但在今天基于 HBM 的芯片上会带宽瓶颈、算力利用率极低。
② 出现在这些集
2 集
- 《Transformer 已见顶?OpenAI 与 Google 双雄离职造新架构》 — 作为概念(提及)
- 《内存带宽才是 AI 芯片的下一个战场:Fractile 创始人 Walter 的押注》 — 作为概念
③ 关联
点进去有真内容 —— 本页主要出口
Sonja · Walter Goodwin · Rohan Anil · Fractile · Jerry Tworek · NVIDIA · Core Automation · Broadcom · OpenAI · TSMC
