Linly-Dubbing icon indicating copy to clipboard operation
Linly-Dubbing copied to clipboard

俄语视频自动配音问题:无法正常翻译俄语音频

Open lazarevaee opened this issue 7 months ago • 2 comments

俄语视频自动配音问题:无法正常翻译俄语音频

您好,Linly-Dubbing团队!

我正在尝试使用Linly-Dubbing对俄语视频进行配音/翻译处理,但遇到了问题。我已成功下载视频,但系统无法正确翻译俄语音频。

以下是我的运行环境:

  • Windows 11
  • NVIDIA RTX 5090
  • Docker容器化部署
  • 使用端口7860(已修改webui.py中的app.launch()配置)

我的问题: 虽然系统显示处理成功,但实际上没有生成翻译结果。以下是处理日志的一部分:

[hlsnative] Total fragments: 5
[download] Destination: videos/Арсений Бородин/20250312 Жду вас завтра/download
[download] 100% of    5.82MiB in 00:00:00 at 32.17MiB/s
[FixupM3u8] Fixing MPEG-TS in MP4 container of "videos/Арсений Бородин/20250312 Жду вас завтра/download"
2025-05-21 15:14:16.382 | INFO     | tools.step000_video_downloader:download_single_video:53 - Video downloaded in videos/Арсений Бородин/20250312 Жду вас завтра
2025-05-21 15:14:16.382 | INFO     | tools.do_everything:process_video:150 - 处理视频: videos/Арсений Бородин/20250312 Жду вас завтра
2025-05-21 15:14:16.382 | INFO     | tools.step010_demucs_vr:separate_all_audio_under_folder:203 - 已完成所有音频分离: videos/Арсений Бородин/20250312 Жду вас завтра
2025-05-21 15:14:16.382 | INFO     | tools.do_everything:process_video:162 - 人声分离完成: None
2025-05-21 15:14:16.382 | INFO     | tools.do_everything:process_video:182 - 语音识别完成: Transcribed all audio under videos/Арсений Бородин/20250312 Жду вас завтра
None None
2025-05-21 15:14:16.382 | INFO     | tools.do_everything:process_video:199 - 翻译完成: Translated all videos under videos/Арсений Бородин/20250312 Жду вас завтра
2025-05-21 15:14:16.383 | INFO     | tools.do_everything:process_video:216 - 语音合成完成: None
2025-05-21 15:14:16.383 | INFO     | tools.do_everything:process_video:234 - 视频合成完成: None
2025-05-21 15:14:16.383 | INFO     | tools.do_everything:do_everything:377 - 成功处理视频: Жду вас завтра!
2025-05-21 15:14:16.383 | INFO     | tools.do_everything:do_everything:395 - --------------------------------------------------
2025-05-21 15:14:16.383 | INFO     | tools.do_everything:do_everything:396 - 处理完成: 成功=1, 失败=0

我注意到:

  1. 人声分离完成: None - 可能表示音频分离出现问题
  2. 系统报告成功,但实际上没有生成翻译结果

我尝试了以下解决方案,但问题仍然存在:

  • 确保Docker容器正常运行
  • 修改webui.py的端口配置

我认为可能的问题是:

  1. WhisperX对俄语的支持不足
  2. 语音分离(Demucs/UVR5)无法正确处理俄语音频
  3. 翻译模型的配置问题
  4. 可能缺少必要的俄语模型

请问有什么建议来解决这个问题?是否需要安装特定的俄语模型或修改配置?

谢谢!

lazarevaee avatar May 21 '25 16:05 lazarevaee

你好,非常感谢你的关注,我最近来看看具体到底是什么问题,然后给你一个回复

Kedreamix avatar May 25 '25 07:05 Kedreamix

朋友,谢谢你的回复,很高兴你能保持联系。我遇到了同样的问题,我有RTX 5090显卡,非常想使用你的工具,但是无法正常工作。请问你是否需要什么帮助或支持?对我们来说,能够运行本地翻译功能非常重要…

nikray12888 avatar May 31 '25 10:05 nikray12888