SuperAPI AI 工具集

openclaw-rl-training

通用与其它

查看项目

更新于 10-15 23:24

技能介绍

用途:OpenClaw-RL 是一个全异步强化学习框架,用于从自然对话反馈中训练个性化 AI 智能体。它将自托管模型包装为 OpenClaw 兼容 API,拦截实时多轮对话,并在后台持续优化策略而不中断使用。

主要能力:采用异步四组件架构(serving 服务、rollout 采集、evaluation 评估、training 训练);提供三种学习范式——Binary RL(GRPO)、On-Policy Distillation(OPD)、Hybrid Combine;完全自托管与私有化;支持个人智能体优化以及通用智能体 RL(终端、GUI、SWE、工具调用);无需人工标注,对话自动生成轨迹;支持 LoRA 训练与云端部署(Tinker、Fireworks AI)。

使用方式:需 Python 3.8+、支持 CUDA 的 GPU,Docker 可选。安装示例命令: git clone https://github.com/Gen-Verse/OpenClaw-RL.git cd OpenClaw-RL pip install -r requirements.txt 此外需安装 slime 与 Megatron-LM 框架(pip install -e .)。需设置 OPENCLAW_API_KEY、WANDB_API_KEY、HF_TOKEN 等环境变量。各范式有对应训练脚本,如 bash run_binary_rl.sh、bash run_opd_training.sh、bash run_combine_training.sh。个人智能体优化需安装 rl-training-headers 扩展。

适用场景:个人智能体持续优化、终端/GUI/SWE/工具调用等通用智能体 RL 训练。

限制:资料未提供具体性能效果、收费与价格、支持的全部模型清单、各平台的完整部署细节及常见问题说明。