Hugging Face Blog·· 29 天前AI 评分31
Hugging Face 推出 BenchMIRT:LLM 基准测试究竟在测什么
BenchMIRT: What are LLM benchmarks actually measuring?
AI 导读
Hugging Face 发布 BenchMIRT,一种在单个提示词层面审计 LLM 基准测试的新方法,基于多维 Item Response Theory(MIRT),在 100 个 LLM、16 个基准、超 34K 道题上训练后自主识别出安全与通用推理两个主导维度。
来源:Hugging Face Blog · huggingface.co