SuperAPI AI 工具集

crawl-xueqiu-user-timeline

通用与其它

查看项目

更新于 10-15 20:13

技能介绍

用途:抓取雪球用户主页的发言时间线,整理为 Markdown 文件保存,便于后续阅读或分析。

主要能力:输出 Markdown 包含用户基本信息(UID、粉丝、关注、帖子数)、按时间排序的发言记录,每条含发布时间、内容、引用内容(如有)、互动数据和原文链接;爬取过程中自动处理分页和 md5__1038 令牌。支持 --days 指定最近天数,或用 --start-date/--end-date 指定日期范围,也可用 -o 自定义输出文件名。

使用方式:先将 {base_dir} 替换为技能实际路径。确保 Chrome 处于 Debug 模式并安装 agent-browser,运行 sh {base_dir}/scripts/check-cdp.sh 与 sh {base_dir}/scripts/check-agent-browser.sh 检查。随后执行:{base_dir}/scripts/crawl_xueqiu_user_timeline_api.py <雪球用户主页链接> [选项]。例如默认最近 3 天:{base_dir}/scripts/crawl_xueqiu_user_timeline_api.py https://xueqiu.com/u/9493911686;最近 7 天追加 --days 7;最近 30 天追加 --days 30;指定范围用 --start-date 2026-01-01 --end-date 2026-03-05;自定义输出用 -o my_timeline.md。注意 --days 与 --start-date 互斥。

限制:需先登录雪球账号;如遇 Verification 验证页面需手动完成验证后重新运行;输出文件保存在当前工作目录。官方文档未提供更多参数、收费、平台或效果信息。