用途:这是一组面向研究场景的网页抓取与数据采集技能,共 6 个。使用时先选择与需求匹配的技能,再阅读其 SKILL.md。触发场景包括采集网页数据、查找数据集、为研究获取 API 访问。
主要能力:academic-web-scraping 提供面向研究的伦理网页抓取与基于 API 的数据采集;dataset-finder-guide 用于从 Kaggle、HuggingFace 及代码仓库搜索并下载研究数据集;easy-spider-guide 介绍 EasySpider 可视化无代码网页数据采集;google-scholar-scraper 提供 Google Scholar 数据采集的伦理技巧与最佳实践;repository-harvesting-guide 使用 OAI-PMH 协议从开放仓库收割元数据;web-scraping-ethics-guide 说明如何为研究目的合法、合乎伦理地抓取网页数据。
使用方式:按需求选择对应技能并阅读其 SKILL.md 获取具体步骤。资料未提供安装命令、代码示例或调用接口细节。
适用场景:学术研究中的数据采集、数据集检索、文献计量数据获取、开放仓库元数据收集。
限制:资料未说明收费、价格、平台支持范围、速率限制的具体数值或实际效果;具体操作细节需查阅各技能文档。