以下为上游提供的源文稿,可能存在识别错误。
乔木转写是基于源文稿的中文提炼,不是逐字翻译。请核对原文中的人名、数字与观点。
选一篇,慢慢读
从左侧挑一篇,正文会在这里排成书页。
Every week, a new model or agent claims a higher score on some public benchmark. AI engineers and researchers use those numbers to pick models, ship features, and decide what to build next. When the eval behind a number is weak, the decisions based on that number can be wrong. This matters more now than it did a year a
阅读原文 · elvis
向阳乔木 · opencode-go/deepseek-v4.1-flash
每周都有新模型或 Agent 在某个公开榜单上刷出更高的分数。AI 工程师和研究者拿这些数字选模型、定功能、决定下一步做什么。问题是, 分数背后的评测如果不够硬,基于这个分数做出的判断就会错 。 这件事比一年前更要紧。聊天机器人的回答,读一遍就能核对。Agent 不一样,它可以在真实软件里连续工作几个小时,调用几十个工具,中途改动文件。给这种工作打分难得多:...