
pyvideotrans是一个开源的视频翻译配音工具(开源协议GPL-v3),可将一种语言发音的视频,翻译为另一种语言发音的视频,并嵌入该语言字幕。它利用了先进的语音识别、机器翻译和语音合成技术,实现了视频的自动翻译和配音功能。
比如有一个英文电影,发音是英文,没有英文字幕,也没有中文字幕,使用这个工具处理后,可以转成带中文字幕,并且带有中文配音的电影。单从这么个描述来看是不是就已经感受到这个开源项目的厉害之处了。相信喜欢搜罗电影看的朋友们都是有可能有这个困扰的,看到了自己喜欢的电影或者视频,确听不懂在说什么,那么这个项目就绝对能够帮助到你了!
pyvideotrans-开源的视频翻译配音工具
pyvideotrans的主要功能特点
1.自动视频翻译
集成faster-whisper模型/并支持自定义huggingface模型,同时集成批量语音转字幕、批量字幕翻译、批量配音小工具。
2.多种配音和翻译渠道
配音:edgeTTS|AzureTTS|OpenAiTTS|Elevenlabs|clone-voice|GPT-SoVITS
翻译:Google|ChatGPT|DeepL|Gemini|Mircosoft|百度|腾讯|本地模型
3.可完全离线
翻译渠道替换为本地模型,配音渠道替换为clone-voice,即可实现完全本地离线视频翻译。
4.免费+开源
代码GitHub公开可审查,免费无功能限制,无隐藏收费。开源协议GPL-v3。
pyvideotrans的原理及转换流程
将原始视频先使用 ffmpeg 分离出音频文件和无声的mp4,然后利用 openai-whisper/faster-whisper模型识别出音频中的人声,并保存为srt字幕,接着将srt字幕翻译为目标语言并保存为srt字幕文件,再将翻译结果合成为配音音频文件。接着将配音音频文件、字幕srt文件、原无声mp4合并为一个视频文件,即完成翻译。
pyvideotrans的使用视频教程
https://img.pidoutv.com/wp-content/uploads/2024/07/1720604999-pyvideotrans.mp4
数据统计
相关导航

Pipio Video Dubbing是一款AI技术实现视频语音的自动配音和口型同步的工具。它可轻松实现视频多语种翻译并保留原始音色,支持超过40种语言,主要面向企业培训部门、销售人员、营销团队和内容创作者。使用这款工具,用户只需上传需要转换的视频文件,选择目标语言,即可实现视频多语种翻译和语音合成。其特点包括33%以上的同步精度,媲美人工口型同步,无损视频分辨率,以及高保真语音翻译。

HeyGen Video Translate
HeyGen Video Translate是一款前沿的在线AI视频翻译工具,专注于将视频内容翻译成用户指定的语言,包括语音和口型。它利用先进的AI技术,精准地捕捉视频中人物的嘴型变化,并根据目标语言的发音习惯进行修改,使翻译后的视频更自然、流畅。

Verbalate AI
Verbalate AI是一款AI视频翻译和口型同步的工具。该工具利用人工智能技术,能够无缝地翻译视频中的口语,并将翻译内容与原视频中人物的口唇匹配。此外,它还具有语音克隆和多语言音轨功能,支持多种语言,允许用户创建多语言音轨和视频。

牛片网视频翻译
牛片网视频翻译通过AI将国内视频翻译成其他国家语言,主要用于TikTok出海场景为主;支持国内数百家视频平台,请将分享链接粘贴至此处。视频时长限6分钟内!

EasyVideoTrans
EasyVideoTrans 是一款高效的视频翻译工具,专为将英文视频快速转换为中文视频而设计。利用先进的GPU加速技术和多种翻译引擎,EasyVideoTrans 提供高效转换和高质量文本翻译,减少人工校对时间。用户可以根据需求编辑字幕内容,并自定义对话人声,提升观看体验。
暂无评论...