-
🍖 全自动视频搬运工，生成 Netflix 品质的字幕！
-
🎤 克隆自己的声音进行配音!（🚧 仍在开发中）
-
✨ 在 streamlit 中点击-完成！
看看效果吧！💪
ted_demo_sub.mp4 |
-
使用 NLP 和 LLM 进行字幕分割
-
智能术语知识库，实现上下文感知翻译
-
三步翻译过程：直接翻译 - 反思 - 改进
-
精确的单词级字幕对齐
-
仅需 1 元即可创作 5 分钟的 Netflix 级双语字幕
-
开发者友好：逐步结构化文件，便于自定义开发 : 中文技术文档 | 英文技术文档
你甚至可以单独运行每一个
core下的step__.py文件！
本项目需要安装多个依赖项，对用户的动手能力有一定要求。安装指南请 点击此处 查看
我们已将项目部署至趋动云-VideoLingo平台（请注意：当前仅更新至v0.2版本），可以轻松克隆并启动项目体验，详细的图文教程请 点击此处 查看。
我们正在不断改进VideoLingo，但目前仍存在一些限制：
| 限制 | 当前 | 计划 |
|---|---|---|
| 音频长度 | 仅支持30分钟以内 | 将很快扩展这一限制 |
| 多语言支持 | 英语识别效果较好 日语识别效果一般 中文识别非常不稳定且容易报错 |
引入针对不同语言的专门模型 |
感谢以下开源项目的贡献:
- whisper: OpenAI的开源自动语音识别系统
- whisper-timestamped: 为Whisper添加时间戳功能的扩展
- whisperX: 为Whisper添加时间戳功能的扩展
- yt-dlp: 用于下载YouTube视频和其他网站内容的命令行工具
- GPT-SoVITS & GPT-SoVITS-Inference: 基于GPT和SoVITS的语音合成系统及推理库
- FFmpeg: 用于处理多媒体内容的完整多平台解决方案
- Ultimate Vocal Remover GUI v5 (UVR5): 用于分离音乐中的人声和伴奏的工具
- json_repair: 超无敌的 修复解析 gpt 的 json 输出的库，无缝替代 json.loads
我们欢迎所有形式的贡献，如果有任何想法或建议，请随时提出issue或提交pull request。
如需进一步交流或寻求帮助，欢迎加入我们的QQ群