用途:追踪主播 Pu Boat 在 Anibon 直播中屏幕与摄像头内的活动,解决“说话内容与画面动作不一致”的问题,主要配合 anibon-timestamper 使用,防止模型编造游戏内剧情、解析指示代词(如“看这个”“这个游戏”),并标注 AFK 离席时段。适用于主播玩游戏、浏览网页、看视频或抽卡的多小时直播。
主要能力:下载最高分辨率故事板;从 MHTML 解出幻灯片并裁剪;按时间采样并分类活动,合并成连续时间段;将活动区间对齐到 5 分钟转写分块。
必要用法:下载命令为 yt-dlp -f "sb3/sb2/sb1/sb0" "https://www.youtube.com/watch?v=VIDEO_ID" -o "<workspace>/frames/storyboard.%(ext)s" 辅助脚本位于 skills/anibon-stream-activity/scripts/,例如: python3 scripts/unpack_storyboard.py --mhtml "<workspace>/frames/storyboard*" --out-dir "<workspace>/frames/slides"
输出活动时间线 JSON,包含起止时间、应用或游戏、类别、详情及摄像头信息(是否在场、表情、布局)。
限制与规则:需结合 Gemini Vision 等分类;子代理须遵守分歧/收敛规则、AFK 与表情依据、指示代词解析;画面文字优先于口误;处理日语“万/億”单位换算;可参考 LiveChat 纠正口播数字。具体价格、平台支持范围等资料暂未提供。