物界前沿 · 资讯情报卡(Hacker News · 2026/10/18)
AI研究进展评分系统:四位评委盲评,每10净票翻倍
核心事实
- 四位评委对混合排列的已解决和开放结果进行评分。
- 100分对应已解决结果的中位数,评分无上限。
- 开放结果按若实现并验证后的价值计分。
- 条形图细线表示评委打分的最低到最高范围。
- 每10个净投票使结果分数翻倍或减半,最多8次。
关键数据
100分中位数基准分
10票净投票翻倍阈值
8次最大翻倍次数
物界观察
这套评分机制把同行评审变成可量化的市场信号,净投票直接驱动分数指数变化,可能加速研究优先级排序。但四位评委的样本量偏小,主观偏差会被投票放大,需警惕分数波动掩盖真实价值。
物界前沿