strata-bench
AI智能体STRATA-Bench 是一个面向 AI 智能体的基准测试,全称为 Spatial-Temporal Retrieval, Alignment, Transparency & Audit(时空检索、对齐、透明度与审计)。它针对的是从碎片化、地理嵌套且时间不完整的证据中汇编纵向市场情报(如租金、劳动力、犯罪、等候时间等)的任务,考察智能体是否会编造数据、静默插补缺失季度、或把数据缺口当作正常数据绘图。项目由 Mohammad Movahedi 构建,采用 Apache-2.0 许可,要求 Python 3.10+。基准包含沙盒语料、评分器和 36 个官方任务,基准本身冻结在 v1.0,工具与文档发布为 v1.1.0。评分关注的不是输出炫目的仪表盘,而是智能体是否披露、标记、拒绝或建模。