LMExamQA 是一个面向基础模型(foundation models)的基准评测排行榜,其核心特点是采用“Language-Model-as-an-Examiner”的评测思路,即让语言模型充当考官来对被测模型进行评估。
用途:提供基础模型能力的对比与排名参考。
主要能力:以语言模型作为考官的基准评测与排行榜展示。
使用方式:可通过其网站 https://lmexam.com/ 访问。具体操作流程暂未提供。
适用场景:需要了解或比较基础模型评测表现的场景。
限制:除上述定位外,评测维度、题型、评分标准、覆盖模型范围、数据更新频率及收费情况等均暂未提供。