SuperAPI AI 工具集

Skill 广场

找到适合任务的 Agent Skill,阅读介绍并复制安装命令。

更新于 10-23 00:13

测试与质量

12,542 个结果

evaluating-code-models

BigCode Evaluation Harness 是一个用于评估代码生成模型的开源工具,覆盖 HumanEval、MBPP、MultiPL-E 等 15 个以上基准,采用 pass@k 指标衡量功能正确性。它支持 Python 及 18 种编程语言的多语言评测,可评估基础模型、指令微调模型以及填充中间(FIM)能力,常用于代码模型基准测试、模型对比和 BigCode/HuggingFace 排行榜提交。工具通过 accelerate 启动,支持量化加载、批量采样、代码执行与结果保存,并可用 Docker 安全运行多语言评测。

测试与质量30 次安装