v1.3

Huanshere/VideoLingov1.3Sep 28, 2024by Huanshere

AI Summary

Enhances audio quality, adds Chinese language support, and simplifies installation by removing most ffmpeg dependencies.

Key Highlights

  • Added Chinese input support (requires manual model download)
  • Added UVR vocal separation for better audio quality
  • Improved dubbing flow and fixed audio duration issues
  • Removed most ffmpeg dependencies for easier installation

Breaking Changes

  • Removed most ffmpeg dependencies
  • Manual model download required for Chinese input

New Features

  • Chinese input support
  • UVR vocal separation
  • Auto-adjust WhisperX batch size based on VRAM
  • Sidebar language option

Full Release Notes

### 主要更新:
1. 加入中文输入支持!需要手动下载模型放在model中
2. 增加了一步骤的UVR人声分离,效果更好
3. 在WhisperX转录之前进行人声分离,保证转录质量(仅WhisperX本地版)
4. 改进配音流程,修复了音频时间比视频长的问题
5. 大幅修复了phrase错误!!!
6. 补充了trim后的检查

### 详细更新:

- 新增功能:
  * 增加中文语言支持
  * 新增 UVR 模型,提高音频质量

- 性能优化:
  * 设置访问 GPT 超时
  * 使用 pip 安装 torch,取代 conda
  * WhisperX 本地版会在转录前进行 UVR 处理,保证质量
  * 根据显存自动调整 WhisperX 本地运行的 batch size

- 用户体验改进:
  * 缩减 prompt,备选方案从 3 个变成 2 个
  * 最大长度更新至 70
  * 字号更大,每行更短
  * 侧边栏加入输入语言选项
  * 上传时检查视频名

- 配音优化:
  * 修复了中文转英文配音时的一些问题

- 依赖优化:
  * 移除了大部分的 ffmpeg 依赖
  * 不再需要 ffprobe
  * Mac 用户无需手动安装 ffmpeg

- 文档更新:
  * 更新 [README.md](http://readme.md/)
  * 更新 config.example.py

### 小细节:
- 取消了大部分 ffmpeg 依赖,简化安装流程
- 完善了配置文档