SuperAPI AI 工具集

openai-evals-tuning

智能体与模型

查看项目

更新于 10-15 21:40

技能介绍

用途:该技能为 OpenAI API(developers.openai.com)的 Evals 与 Fine-tuning 提供参考资料,限定于评估与模型优化两大主题;reasoning 模型用法与 Responses API 本身由 openai-api-core 技能负责。

主要能力:目录含 SKILL.md、references/(evals、fine-tuning 两个子目录及各自 README 与专题页)、samples/(eval-create-and-run、grader-definitions、sft-dataset-and-job、dpo-basics、rft-basics、distillation-workflow)、scripts/(fine-tuning-jobs、training-data-files、evals)。evals 部分含 working-with-evals、graders、getting-started-datasets、agent-evals、trace-grading、external-models、evaluation-best-practices;fine-tuning 部分含 model-optimization、supervised-fine-tuning、vision-fine-tuning、direct-preference-optimization、reinforcement-fine-tuning 及其用例、best-practices、prompt-optimizer。

使用方式:先按任务在映射表中定位类别,再查阅该类别 README 找到目标页,最后 Read 对应 .md 获取细节;脚本页说明用 curl 操作任务、文件与 eval。

限制与注意:自服务微调(SFT / DPO / RFT / 视觉微调 / 蒸馏)正逐步下线,新组织自 2026-05-07 起不可用,既有组织自 2027-01-06 起不可创建新任务;prompt optimizer 计划于 2026-11-30 停止,各页 ## Notes 载有个别期限。具体命令与接口细节未在资料中提供。