用途:在数学建模等任务中定位“权威、可引用、可复现”的公开数据源,优先通过官方 API 或 Bulk Download 获取数据,尽量避免 HTML 解析,并输出可复现的获取与清洗方案。需要官方统计、统计局/国际组织数据、API 下载或数据源抓取时可调用。
主要能力与输出:输出数据需求表(变量名、单位、频率、时间范围、地区粒度、替代指标);按来源类型选源(World Bank、IMF、OECD、UNData、WHO、NOAA、NASA、Eurostat、中国国家统计局及各政府开放数据平台等);给出访问方式决策(API→批量下载→页面 XHR/JSON→HTML 解析);交付参数化抓取脚本(含 start/end、region、indicator、output_dir),带重试、超时、速率限制与缓存;执行基本清洗校验(统一字段命名、单位换算、时间对齐、缺失与异常说明、样本抽检);产出 raw/processed 数据、sources.json(name/url/access_method/params/license/updated_at/accessed_at)、数据字典与引用信息。数据建议落盘到 crawled_data/raw/、crawled_data/processed/、crawled_data/sources.json。
使用方式与约束:遵守 robots.txt 与服务条款及速率限制,不绕过登录、付费或验证码;无来源或不可引用数据不得冒充权威数据。该技能属于更大论文流程的一环,启动前需运行 workflow_guard.py --skill authoritative-data-harvester,失败则回补前置阶段;完成后回到 paper-workflow-orchestrator 判断下一步,并用 context-memory-keeper 更新 workflow memory。无法自动获取时,提供同级权威替代源、口径差异与人工下载路径。后续通常交由 data-cleaning-and-visualization 完成统一清洗与论文级配图。该技能不负责撰写论文正文。