跨国深谈← 返回←Snowflake 内部销售 AI 助手复盘：一百万个问题换来的教训

Snowflake 内部销售 AI 助手复盘：一百万个问题换来的教训

关联

人物 Sait Izmit

公司 Snowflake · Cowork

概念 智能体 · MCP · 变革管理 · 语义视图 · 反馈回路

这一集是一位 Snowflake 高管的演讲——他负责公司销售团队的内部 AI 工具，团队在去年 9 月上线了一个内部 go-to-market 助手（帮销售做数据分析、回答业务问题的智能体），到演讲时已回答超过一百万个问题，每周约 4 万个。这个智能体构建在 Snowflake 自家的 Cowork 平台上，他们是自家产品的「零号客户」。

最反直觉的一点：他们给销售写智能体之前，先打开电子表格、对照销售流程写下 150 个销售真会问的问题，然后一测——准确率只有 50%，全组沮丧。而他们的应对不是补数据冲覆盖率，而是砍问题面、保质量。以下是他分享的核心打法。

质量是第一优先级：宁答 50 题 95% 对，不答 100 题 70% 对

他反复强调这是团队最「虔诚」的原则。用户信任极难赢得、却一夜之间就能失去——放一个自由聊天框在那里，用户前五个问题如果体验好，就会回来；体验不好，你要花十倍功夫才可能赢回他们，甚至永远赢不回来。

所以团队有句口号：「质量是 P 减一」。他们从小处起步，甚至 60% 的数据是上线之后六七个月里才陆续编辑的。今天这个系统已长成庞然大物：15 个语义视图、85 张表、3000 列数据、五六个 MCP 连接、接近 20 个技能。

分阶段发布：试点 → 10% beta → 正式发布

不能一上来就发布给所有人，因为「我们要确保赢得那前五个问题」。他们的每个产品都走三步：

• 试点：拉组织里最「AI 原生」、愿意给反馈的人进来，目标是证明准确性、磨平粗糙边缘。
• 10% beta（600 人）：验证 MVP 是否成立。此时会涌入海量「能不能接这个数据」的请求，要看需求在哪里集中出现——那些集中点不接上，就不是真 MVP。这一阶段的核心指标是留存率：他们结束时周活用户回访留存率超过 70%。
• GA 正式发布。

发布才是真正的战斗：变革管理

「这是很多产品失败的地方」。发布两周后管理层就失望：为什么没人用？他的回答是：组织里只有 20% 的人真正试用过产品——人们连五分钟都不肯花，那不是产品的错；试了不回来才是我的问题。

所以他在变革管理上大幅投入：把 60%、70% 的时间花在销售会议上做演示、搭仪表盘看哪些团队采用了、让表现好的团队经理「有面子」、从销售负责人那里拿到支持去推动团队试用。他说得非常重：「如果你没做这件事，我们今天可能只有一半的成果」。工程师容易忽略：很多 AI 项目不是败在技术，而是败在激活环节。

「惊艳感坍塌」：只做第一波，一两个月内就会被颠覆

成功上线几个月后，用户从走廊里夸你，变成回来抱怨「这个做不了了」「我看到别的 AI 产品能做」——他称之为「惊艳墙效应的坍塌」：你很酷，然后变成习惯，再变成基线，用户一夜之间就会切换到更好的产品。

所以产品要一波接一波地抬门槛，他们看到的是这样一条演进路线：

1. 和你的数据对话——从几百个仪表盘和对分析师的依赖里解放出来；
2. 自动化工作流——靠 MCP 连接和集成，销售用智能体监控收件箱和 Slack、起草客户回复存进 Gmail、审阅后发出；
3. 团队自助构建——过去市场团队永远排在 IT 积压任务里，现在他们能自己建团队技能、自定义仪表盘、应用、自动化和告警；
4. 超个性化——结合客户实时情境，为每个销售甚至每个客户定制。

不追求完美架构：80% 的 PRD 和现在对不上

他见过很多大企业客户还在「试图购买那套完美的架构」、反复测试框架——但他们不构建、不上线、不学习。而他自己的团队恰恰相反：首次上线时智能体指令长达九页，版本靠一个 Google Doc 管理，就这样发给了 6000 人。之后才逐步补上 CI/CD、评估基础设施（单元测试、路由测试）、技能库、渐进式披露等。

如今对比项目初期的 PRD 和架构图，「80% 都对不上」。他们的冲刺里 60%-70% 是加新功能、提质量，30%-40% 是用新技术不断重新架构。他的建议：别过度投资当前架构、别搞六到九个月的超级架构项目，用今天的现有技术栈在几周甚至几天内交付，坦然接受持续重架构——你等待越久，竞争对手就多拿三四个月的客户。

投资日志：反馈回路是指数增长的来源

最后一条强烈建议：投资你的日志。他们用 LLM 对 120 万个问题做大规模分类（技术上很有趣、数据科学家很爱做），得到极细的主题细分，能实时看到功能缺口——用户问了答不上、对智能体爆粗口、重复提问的位置。

这个日志对销售赋能是座金矿：过去要每周访谈约 100 个销售才能摸清话题变化和知识缺口，现在问一个问题、一两分钟就有答案；再接上 Confluence、Jira、Slack、PRD，几分钟内自动生成作战卡和销售赋能文档，再喂回智能体。他们还能发现销售组织里不同团队在从不同角度瞄准相似客户账户却互不知情，然后主动撮合。他说，头几个功能最难做，但一旦开始挖掘日志，「曲棍球杆式的指数增长就真的开始发生了，非常神奇」。

本集带走

• 质量重于覆盖面：宁答 50 题 95% 对，不答 100 题 70% 对。前五个问题的体验决定用户回不回来，信任丢了要花十倍力气赢回。
• 先写 150 个真实问题再动手：对照销售流程列出卖家的真实问题，用它们当验收标准，而不是先堆数据源。
• 分阶段发布：试点磨精度 → 10% beta 验证 MVP 和留存（他们做到 70%+ 回访留存）→ 再正式发布。
• 变革管理占大头：发布后 60-70% 的时间投入销售会议、演示、团队仪表盘和销售负责人背书——很多 AI 项目败在激活，不是败在技术。
• 警惕惊艳感坍塌：用户满意时就要保持警惕，规划一两个月后的下一波功能；只做「和数据对话」这一层，很快会被切换掉。
• 别追完美架构：别搞六到九个月的长期项目，几周几天交付，接受持续重架构（他们的冲刺 30-40% 时间在重架构）。
• 投资日志反馈回路：用 LLM 分类用户问题，实时发现缺口、自动生成销售赋能材料、做团队撮合——这是增长曲线翘起来的地方。

用户信任极难赢得，却能在一夜之间失去。
User trust is earned extremely hard, and it’s lost overnight.
—— Sait Izmit · [03:31]

如果他们不喜欢看到的答案，你要花十倍的功夫才能赢回他们——如果你还能赢回来的话，对吧？
If they don’t like what they see, it’s 10 times more effort for you to win them back, if you can ever win them back, right?
—— Sait Izmit · [03:52]

这个星球上没有一个人能跟得上那么多的数据。
There’s not a single human on this planet can stay on top of that much data.
—— Sait Izmit · [02:23]

我无能为力，如果人们连五分钟都不肯花来试用产品，那不是产品的错，对吧？
I cannot do anything, it’s not the product’s fault if people are not even taking five minutes to try the product, right?
—— Sait Izmit · [07:40]

我想在这里传达的主要信息是，如果你只做到第一个阶段，如果你只是停留在那里，你会在一两个月内被颠覆，对吧？
I think the main message I want to give here is, if you just do the first stage, and if you just wait there, you will get disrupted in a month or two, right?
—— Sait Izmit · [11:14]

如果我去看我们在项目开始时写的 PRD 和架构图，如果我和我们现在拥有的这个架构相比，80% 都对不上。
If I look at the PRD and the architectural diagram we wrote in the beginning of the project, if I compare it to this architecture we have now, 80% of it doesn’t match.
—— Sait Izmit · [13:17]

比如，如果你看我们的冲刺，也许 60%-70% 的工作是在添加新功能、提升质量和各种各样的事情，但有 30%-40% 的工作是我们在不断地用新技术重新架构。
So, like, if you look at our sprints, like, maybe 60-70% of the work we are doing is adding new features, improving quality, and all kinds of things, but 30-40% of the work is that we are constantly re-architecting with the new technology.
—— Sait Izmit · [13:27]

头几个功能很难做出来，接下来的就容易了，然后一旦你开始挖掘你的日志，这种曲棍球杆式的指数增长就真的开始发生了，非常神奇。
The first features are difficult to get out, the next ones are easy, and then once you start tapping into your logs, this hockey stick exponential thing actually starts happening, and it’s magical.
—— Sait Izmit · [16:20]

如果你追求覆盖面，你会搬起石头砸自己的脚，好吗？
If you go for the coverage, you are going to shoot yourself in the foot, okay?
—— Sait Izmit · [16:43]