正在打开每日关注
正在打开每日关注
用 AI 将长视频拆成竖屏短片,并集成数字人 UGC、字幕、配音与社媒发布。
兄弟们,给大家挖到一个做短视频矩阵的开源神器。 OpenShorts,免费开源版OpusClip。 把播客、访谈或者长视频丢进去,它自己找高光、追人脸、裁成竖屏,再把字幕全部加好。 一条长视频,直接给你拆成一批能发的短视频。 更狠的是,贴个产品链接,它还能用AI数字人给你生成口播广告。 本地部署,不加水印,也不限分钟。 做矩阵号的兄弟,这个真能省下一大笔剪辑费。 GitHub:https://t.co/vxXCwcGCvn
是什么 OpenShorts 是 MIT 开源的 AI 视频平台,不只是“开源版 OpusClip”:仓库把 Clip Generator、AI Shorts(数字人 UGC)和 YouTube Studio 合成一个工作台。元数据显示项目有 3,696 stars,支持 Docker 自托管,也提供 12 美元/月起的云端版本。
架构与核心设计 长视频先由 Gemini 分析转写与场景,选择 3–15 个高潜片段;再用 MediaPipe/YOLOv8 做人脸跟踪,以 TRACK、GENERAL、SPLIT、SCREENCAST 等模式重排 9:16 画面,faster-whisper 生成逐词字幕,FFmpeg 完成合成。AI Shorts 继续串联网页研究、脚本、Flux 2 Pro/Hailuo、VEED Lipsync、ElevenLabs 与 B-roll,最后经 Upload-Post 分发,并暴露 API/MCP 供 Agent 调用。
值得借鉴 亮点是把“发现—剪辑—包装—发布”串成流水线,并用双人堆叠、字幕置于接缝等规则解决竖屏构图;自托管模式还强调数据留在用户服务器且无水印、无时长限制。
坑与边界 自托管并非零成本:需要 Docker、8GB+ RAM、模型下载及多项第三方密钥。README 给出的 CPU 处理速度为 8 分钟视频 5–8 分钟,云端 GPU 约 50 秒。数字人、选段、跟踪和发布质量依赖外部模型与服务,工具链齐全不等于生产稳定性已被充分验证。