CCA-F 练习题库· Prompt Engineering & Structured Output
你准备使用 Batch API 处理 50,000 份遗留文档。在 500 份文档上的初步测试显示，其中 18% 需要 2-3 次 prompt 优化才能正确抽取数据。扩展这一工作负载最具成本效率的策略是什么？
- A立即通过 Batch API 提交全部 50,000 份文档，再用结果文件找出抽取失败的那些，并只把它们重新提交。
- B先在有代表性的样本上交互式地优化 prompt，把首轮成功率做到最高，然后通过 Batch API 处理全部 50,000 份文档。
- C通过同步 API 处理全部 50,000 份文档，这样每条响应返回时都能即时检查，并按每份文档调整 prompt。
- D先开始在生产中连续提交 5,000 份文档的批次，让每一批的失败率暴露出下一个需要增量修复的 prompt 弱点。
正确答案：B
解析
- B正确。由于 500 份文档的测试显示该 prompt 尚未优化到位（18% 需要 2-3 次优化），具备成本效率的做法是把 prompt engineering 放在前面做：先在小规模、有代表性的样本上交互式打磨，把首轮抽取成功率做到最高，然后通过 Batch API 以一次优化后的批次提交全部 50,000 份文档，从而拿满约 50% 的批处理折扣。
- A在生产规模上花钱去摸索失败模式，还要付费重新提交大批量文档，属于浪费；
- C使用同步 API，完全放弃了约 50% 的批处理节省（而且在没有人工参与的情况下，它其实也无法真正做到有意义的逐文档 prompt 优化）；
- D仍然是在大批量中增量地发现失败，造成本可避免的重复处理。
延伸阅读
本题为本站自有原创练习题，非任何官方考试内容；解析对照 Anthropic 公开文档撰写， 如与最新文档不符请以官方为准。想在限时环境下检验水平，可参加 模拟考（题目与本页题库不重叠）。