2025-10-14.不摸鱼的独立开发者日报（第150期）

📰 资讯

给AI做评估，成了史上最赚钱的生意？

你有没有想过，AI是怎么知道什么是对、什么是错的？它怎么学会像个专家一样思考？光靠网上那些乱七八糟的数据肯定不行。它需要有人给它划重点，告诉它“好”的标准是什么。这个“划重点”的过程，叫评估（Evals）。

说白了，就是给AI模型出一套考卷，或者说，制定一份产品需求文档。比如，你想让AI学会像个资深律师那样审查合同，你就得找个真律师来，让他制定一套评分标准：找出这个关键条款给多少分，发现那个隐藏风险又给多少分。AI做的每一次尝试，都用这套标准去衡量，做得好就奖励，做得不好就指出来。

这事现在变得特别重要，甚至成了AI公司最核心的瓶颈。谁能做出最好的评估标准，谁的模型就能学得更快、更好。所以，全球那些最有钱的科技巨头，都在不惜血本地找各个领域的顶尖专家，来给他们的AI上课。这个需求大到什么程度？有家专门做这件事的公司，一年多时间里，业务量翻了几百倍。这说明，最顶级的智慧，成了训练AI最稀缺的资源。