SuperAPI AI 工具集

clipsketch-ai-video-storyboard

设计与创作

查看项目

更新于 10-15 22:33

技能介绍

用途:ClipSketch AI Video Storyboard 是一个 TypeScript/React 应用,把视频片段转换为 AI 生成的手绘风格分镜,并可进一步产出社交媒体文案与封面图。

主要能力:支持从 Bilibili(含短链和混合文本)与小红书导入视频;提供帧级精确标记(毫秒精度);调用 Gemini 进行创作分析并生成手绘分镜;批量细化分镜面板;生成三种风格的社媒文案(情感故事、教程指南、短平快);生成竖版 9:16 封面;可将标记帧导出为 ZIP、时间线导出为 TXT;使用 IndexedDB 本地持久化标记与工作区状态。

安装与运行: git clone https://github.com/RanFeng/clipsketch-ai.git cd clipsketch-ai npm install 在项目根目录创建 .env.local,配置 GEMINI_API_KEY=your_google_gemini_api_key_here。所需模型访问权限为 gemini-3-pro-image-preview(分镜生成)与 gemini-3-pro-preview(文本/文案生成)。 开发模式:npm run dev;生产构建:npm run build、npm start;Docker 部署:docker run -d --restart=always --name clipsketch-ai -p 3000:3000 earisty/clipsketch-ai:latest。访问 http://localhost:3000。

使用方式:粘贴视频分享链接(可含推广文本)导入;用空格播放/暂停,左右键逐帧或智能步进,T 键标记当前帧;随后执行分析、分镜生成、面板细化、文案生成与封面生成流程。

限制:需要可访问相应 Gemini 预览模型的 API 密钥,否则可能返回 403;跨域限制可能阻止 canvas 截帧,需用 crossOrigin、referrerPolicy 或服务端代理;面板数超过阈值时可用批量模式以节省 API 成本。价格、配额与完整效果资料暂未提供。