论文 信源:Epoch AI:研究、数据与评测 · 👁️ 10579 次研读

DTBench:Epoch AI 发布决策理论基准,随机猜测得分 40%

DTBench:Epoch AI 发布决策理论基准,随机猜测得分 40%
💡 灵机 AI 深度洞见与核心提炼
Epoch AI 的 DTBench 基准基于公开的 Conceptual Reasoning Index 排行榜,报告模型在 407 道能力题上的准确率,态度题因无客观正确答案不计分。随机猜测得分为 40%,基准作者认为上限表现接近 100%。模型以各实验室默认采样参数、最大可用 token 上限和推理设置运行,态度部分与证据决策论建议一致的答案比例保留在数据导出中。
信源媒体:Epoch AI:研究、数据与评测
访问出处网页 ↗
阅读原文出处 ↗