以下为上游提供的源文稿,可能存在识别错误。
乔木转写是基于源文稿的中文提炼,不是逐字翻译。请核对原文中的人名、数字与观点。
选一篇,慢慢读
从左侧挑一篇,正文会在这里排成书页。
Large language models (LLMs) are increasingly used as judges and graders to replace human annotators, raising the question of when such replacement is statistically justified. To support such decisions, the Alternative Annotator Test (Alt-Test) was introduced for dense settings where all items are annotated by the same
阅读原文 · Nagham Omar, Rotem Dror, Almog Gueta, Avigdor Gal, Roi Reichart, Nitay Calderon
向阳乔木 · opencode-go/deepseek-v4.1-flash
用大模型替代人工标注,这件事已经在很多团队里悄悄发生了。问题是:什么时候这种替代在统计上站得住脚? 这篇论文给了一个可操作的检验方法。它要解决的是标注评估里一个很现实的麻烦:你想知道 LLM 能不能顶替人类标注员,但手上这批数据并不是每个人都被所有人标过。 这正好卡住了之前的方法。 这篇论文想解决什么 已有的 Alternative Annotator Te...