project
ClipSketch AI - 开源AI内容创作工具,自动提取视频关键帧
ClipSketch AI 是开源的 AI 驱动内容创作工具,专为视频创作者、社交媒体运营者和二创爱好者设计。能解析 Bilibili 和小红书的视频链接,自动提取关键帧并转...
ClipSketch AI是什么
ClipSketch AI 是开源的 AI 驱动内容创作工具,专为视频创作者、社交媒体运营者和二创爱好者设计。能解析 Bilibili 和小红书的视频链接,自动提取关键帧并转化为手绘风格故事板,同时生成适配社交媒体的文案。工具支持多源视频导入、高清播放和帧级标记,操作简单,适合多种创作场景,如系列内容制作、剧情短视频创作、种草推荐等。
ClipSketch AI的主要功能
-
视频解析与帧级标记:支持解析 Bilibili 和小红书视频链接,精准到帧地标记精彩瞬间,可导出标记数据为 TXT 时间轴标签或 ZIP 图片包。
-
AI 绘图与文案生成:基于 Google Gemini 大模型,将标记的视频片段一键转化为手绘风格故事板,并生成三种风格的社交媒体文案。
-
批量处理与优化:具备批量生成分镜的能力,可配置使用 Batch API,节省创作成本。
-
多平台适配:界面响应式设计,支持 PC、iPad 和手机端自适应,操作便捷。
-
开源部署:支持本地开源部署,用户可配置自己的 Gemini API Key,实现数据隐私保护和功能定制。
如何使用ClipSketch AI
-
访问平台:前往 ClipSketch AI 的在线体验版本或本地部署的地址。
-
导入视频:输入 Bilibili 或小红书的视频链接,工具会自动解析视频。
-
帧级标记:通过播放视频,使用快捷键(如空格播放/暂停,左右键逐帧调节,T 键标记)来标记精彩瞬间。
-
生成故事板:标记完成后,点击生成按钮,工具会将视频片段转化为手绘风格故事板。
-
生成文案:同时生成三种风格的社交媒体文案,可根据需求选择使用。
-
导出数据:可将标记数据导出为 TXT 时间轴标签或 ZIP 图片包,方便后续编辑。
-
本地部署:如需长期使用,可基于开源代码进行本地部署,配置自己的 Gemini API Key。
ClipSketch AI的项目地址
- Github仓库:https://github.com/RanFeng/clipsketch-ai
- 在线体验地址:https://clipsketch-ai.vercel.app/
ClipSketch AI的应用场景
-
短视频创作:快速从长视频中提取关键帧,转化为手绘风格故事板后发布到小红书、微博等平台,节省分镜设计和文案编写时间。
-
社交媒体运营:批量处理来自 Bilibili、小红书等平台的热点内容,快速生成适配本账号风格的二创内容。
-
种草/推荐账号:从产品测评视频提取亮点,搭配手绘图和文案发布,提升种草效果。
-
剧情类短视频制作:将长剧情视频转化为手绘故事板,便于二次创作和剪辑。
-
系列内容制作:快速拆解教程视频,生成结构化分镜,方便系列内容的策划与制作。
-
教育内容创作:将教学视频自动转换为分镜脚本,用于课程策划与展示。