Dan McKinley：提示词并非真实存在，生产环境应靠评测与自动优化
2026-09-21
工程师 Dan McKinley 基于构建生产级消费端 Agent 的经验提出：提示词本身不是关键，可度量的自我改进系统才是。他给出的一条路径是让 Claude 生成对抗性场景并写成 pass^k 测试，再用 GEPA 等优化器自动改写提示词，配合 holdout 测试防止过拟合，最终以 LLM 判官与生产监控形成自改进闭环；领域专家的…2026-09-21
工程师 Dan McKinley 基于构建生产级消费端 Agent 的经验提出：提示词本身不是关键，可度量的自我改进系统才是。他给出的一条路径是让 Claude 生成对抗性场景并写成 pass^k 测试，再用 GEPA 等优化器自动改写提示词，配合 holdout 测试防止过拟合，最终以 LLM 判官与生产监控形成自改进闭环；领域专家的…