Linly-Dubbing - 是一个开源工具,利用人工智能技术自动将视频翻译成多种语言。
它支持自动视频上传、人声分离、语音识别、基于大型语言模型的翻译以及语音合成。
它集成了多种技术,例如用于视频上传的 yt-dlp、用于人声分离的 Demucs 和 UVR5、用于语音识别的 WhisperX 和 FunASR,以及用于翻译的 OpenAI API 和 Qwen。
语音合成采用 Edge TTS、XTTS、CosyVoice 和 GPT-SoVITS,提供高质量的配音。
它还支持与数字虚拟形象进行唇形同步,增强翻译内容的真实感。
语言:Jupyter Notebook
🧬 https://github.com/Kedreamix/Linly-Dubbing#tools #AI