用途:该技能为智能体工具调用轨迹提供专用 Python 评估逻辑,依托 Vertex AI Gen AI Evaluation,解决的不只是“工具是否运行”,而是“工具是否被正确、高效地使用”。
主要能力与指标定义:提供三个自定义指标。Trajectory Precision(轨迹精度)衡量被调用的工具中,实际出现在参考(标准)里的比例;Trajectory Recall(轨迹召回)衡量必需工具中被智能体成功调用的比例;In-Order Match(顺序匹配)检查必需工具是否按正确顺序被调用,即使中间夹杂了其他非必需工具也可接受。
使用方式:可向 Antigravity 提出请求,例如“Implement Trajectory Precision and Recall metrics”“Set up an Order Match metric for my multi-step agent”“Add a custom trajectory scorer to my Vertex AI evaluation”。实现模式参考 scripts/trajectory_metrics.py,其中的函数被设计为可序列化,并通过 CustomCodeExecutionSpec 传给 Vertex AI。
适用场景:面向使用 Vertex AI 评估多步骤智能体工具调用质量的开发者,尤其适合需要量化工具选择准确性与调用顺序合规性的场景。
限制:页面未提供具体的输入数据格式、评分配置参数、价格或运行环境要求,这些信息暂未提供。