Jeff Dean：AI创业，要找模型只有1%成功率的问题丨YC

• 原文链接：https://mp.weixin.qq.com/s/oj6MyHo5VuJsSm0yed8iig
• 来源：微信公众号「晚点再听LaterCast」
• 获取时间：2026-09-16
• 原视频：https://www.youtube.com/watch?v=CxXgV54KzpQ&t=62s

核心结论（一句话）

AI 创业应先用最强通用模型测核心任务：若成功率仍接近 0%-1%，且团队拥有独有数据、专业流程和可重复评估，才可能有时间建立产品与分发优势；若已达约 20%，则应警惕基础模型快速覆盖。

分类提炼

• 场景：AI 创业选题、Agent 工程、上下文与评估
• 标签： #主题/AI-Coding #主题/AI创业 #主题/上下文工程 #主题/Agent评估 #场景/公众号长文
• 类型：YC 对话二次整理与工程启发

知识节点

• 1% 规则：把最强通用模型在核心任务上的成功率作为选题基线，优先研究仍接近 0%-1% 的难题，而不是已被模型部分覆盖的功能。
• 模型成功率基线：成功率、失败位置和评估样本共同定义机会窗口，不能只凭演示效果判断产品价值。
• 数据搬运成本：AI 系统的能耗和延迟受内存、处理器、芯片间数据移动制约，换更大模型不会自动消除搬运成本。
• 上下文工程：检索、工具、记忆和编排把任务相关知识与验证动作显式放入模型工作区，形成低于基础模型训练的系统改进路径。
• Skill 性能闭环：将微基准、代码修改、测试、测量和回退步骤写成 Skill，让专家经验变成可重复调用的操作顺序。
• 分支搜索与评估器：多个 Agent 探索不同方案，评估器保留有希望分支、淘汰偏离路径，用推理时算力换取长任务可靠性。
• 规格与品味：当执行成本下降，决定做什么、定义成功标准和选择有影响的问题成为更稀缺的能力。
• 可量化实验循环：只有结果可测量，系统才能拆解子问题、批量实验、学习近似评估器并把有效方案组合起来。

关联图谱

上游（基于 / 来自）

• [[02-ai-coding/winkrun-吴恩达-AI工程四项核心技能]]：补充 AI 工程能力从编码扩展到评估、工程取舍和构建方向。
• [[02-ai-coding/AI-Coding的顿悟时刻]]：提供 AI Coding 让实现变便宜、判断与规格变重要的相邻视角。

下游（应用于 / 验证于）

• [[02-ai-coding/Anthropic发布AI-Native软件开发流程-时代变了-该换套模式了]]：将规格、计划、验证和人类门禁接入 AI-Native SDLC。
• [[01-ai-agents/Loop-Engineering-验证才是瓶颈]]：把可量化实验、停止条件和反馈回路落到 Agent 运行时。

同级（横向 / 并列）

• [[02-ai-coding/Code-is-cheap-AI-Native-五倍效率]]：从研发范式角度讨论代码廉价化后 Harness、验证与时间成本的迁移。
• [[01-ai-agents/Agent评测漫谈-由浅入深讲解Agent评测]]：从评测设计补充成功率基线与外部证据问题。

正文要点

1. Jeff Dean 认为，Agent 已能连续运行数天或数周，复杂任务能力和编程外应用的增长可能被低估。
2. 推理速度会改变产品形态，但系统成本还受数据搬运、带宽、片上内存和芯片互联约束；批处理省能耗却可能牺牲交互延迟。
3. 上下文、工具、记忆和编排让普通团队可以围绕模型构建系统；模型只是整套系统中的一个部件。
4. 长任务在几十步后可能走出训练分布；Skill、专有工具、日志、分支搜索和评估器能减少错误累积。
5. 1% 规则要求创业者先测当前最强模型：接近 0%-1% 的任务更可能有窗口，约 20% 则提示模型覆盖正在形成。
6. 可守住的资产包括模型接触不到的数据、窄而难的专业任务、清楚的规格和真实分发能力；单纯界面包装的优势更脆弱。
7. 自动实验适合结果可量化的领域，近似评估器能把原本过慢的模拟纳入更密集的研发循环。

证据边界与替代解释

• 本文为公众号对 YC 对话的二次整理；TPU 30-80 倍能源效率、20-30 倍延迟、数据搬运约 1000 倍能耗、模拟器约 30 万倍加速、模型成功率阈值和 2027 年预测，均是访谈或文章转述，未独立复核。
• “1% 规则”是 Jeff Dean 提出的选题启发式，不是创业成功率定律。低成功率也可能由任务定义过宽、评估器不成熟、数据权限不足或基线模型选择不当造成。
• 文章把数据、专业任务和分发视为潜在壁垒；实际能否守住仍取决于数据授权、成本结构、用户需求、模型迭代速度和合规边界。

相关链接

• 原文：https://mp.weixin.qq.com/s/oj6MyHo5VuJsSm0yed8iig
• 原视频：https://www.youtube.com/watch?v=CxXgV54KzpQ&t=62s
• 拆解：Jeff Dean：AI创业，要找模型只有1%成功率的问题丨YC（digest）
• 相关原题：Jeff Dean: The 1% Rule for Building in AI（YC）