VideoLingo：打造 Netflix 级别视频字幕与配音的新工具

开源项目
,
1
项目名称 VideoLingo
项目类型 一站式视频翻译本地化配音工具
项目地址 GitHub
项目简介 VideoLingo 是一站式视频翻译本地化配音工具，旨在生成 Netflix 级别的高质量字幕，告别生硬机翻，告别多行字幕，还能加上高质量的配音，让全世界的知识能够跨越语言的障碍共享。

连接世界每一帧

:star2: 项目简介

VideoLingo 是一款创新的一站式视频翻译本地化配音工具，它通过直观的 Streamlit 网页界面，使得用户只需点击两下就能完成从视频链接到内嵌高质量双语字幕甚至带上配音的整个流程，轻松创建 Netflix 品质的本地化视频。VideoLingo 的核心优势在于其能够生成 Netflix 级别的高质量字幕，并且提供流畅的配音服务，使得视频内容能够跨越语言障碍，被全世界的观众所理解和享受。

项目的优势

VideoLingo 的优势在于其集成了多种先进技术和工具，以提供一站式的视频本地化解决方案：

  • 高质量的字幕生成：使用 WhisperX 进行单词级时间轴字幕识别，确保字幕的准确性和同步性。
  • 上下文连贯翻译：利用 GPT 总结提取术语知识库，实现上下文连贯的翻译效果。
  • 单行字幕标准：按照 Netflix 标准检查单行长度，绝无双行字幕，提升观看体验。
  • 一键启动：整合包一键启动，在 streamlit 中一键出片，简化操作流程。
  • 多语言支持：全面的多语言支持，轻松实现跨语言视频本地化。

项目的使用场景

VideoLingo 适用于多种场景，包括但不限于：

  • 教育和培训：将教育视频翻译成不同语言，扩大受众范围。
  • 企业宣传：将企业宣传片本地化，适应不同国家和地区的市场。
  • 娱乐内容：为电影、电视剧、动画等提供高质量的字幕和配音，提升国际竞争力。
  • 知识分享：将知识分享视频翻译成多种语言，促进全球知识的传播和交流。

项目的详细情况

VideoLingo 的主要特点和功能包括：

  • 视频下载：使用 yt-dlp 从 Youtube 链接下载视频。
  • 字幕识别：使用 WhisperX 进行单词级时间轴字幕识别。
  • 字幕分割：使用 NLP 和 GPT 根据句意进行字幕分割。
  • 术语知识库：GPT 总结提取术语知识库，上下文连贯翻译。
  • 翻译效果：三步直译、反思、意译，媲美字幕组精翻效果。
  • 配音对齐：使用 GPT-SoVITS 等方法对齐配音。
  • 操作日志：详细记录每步操作日志，支持随时中断和恢复进度。

相关链接