v1.3
Huanshere/VideoLingov1.3Sep 28, 2024by Huanshere
AI Summary
Enhances audio quality, adds Chinese language support, and simplifies installation by removing most ffmpeg dependencies.
Key Highlights
- Added Chinese input support (requires manual model download)
- Added UVR vocal separation for better audio quality
- Improved dubbing flow and fixed audio duration issues
- Removed most ffmpeg dependencies for easier installation
Breaking Changes
- Removed most ffmpeg dependencies
- Manual model download required for Chinese input
New Features
- Chinese input support
- UVR vocal separation
- Auto-adjust WhisperX batch size based on VRAM
- Sidebar language option
Full Release Notes
### 主要更新: 1. 加入中文输入支持!需要手动下载模型放在model中 2. 增加了一步骤的UVR人声分离,效果更好 3. 在WhisperX转录之前进行人声分离,保证转录质量(仅WhisperX本地版) 4. 改进配音流程,修复了音频时间比视频长的问题 5. 大幅修复了phrase错误!!! 6. 补充了trim后的检查 ### 详细更新: - 新增功能: * 增加中文语言支持 * 新增 UVR 模型,提高音频质量 - 性能优化: * 设置访问 GPT 超时 * 使用 pip 安装 torch,取代 conda * WhisperX 本地版会在转录前进行 UVR 处理,保证质量 * 根据显存自动调整 WhisperX 本地运行的 batch size - 用户体验改进: * 缩减 prompt,备选方案从 3 个变成 2 个 * 最大长度更新至 70 * 字号更大,每行更短 * 侧边栏加入输入语言选项 * 上传时检查视频名 - 配音优化: * 修复了中文转英文配音时的一些问题 - 依赖优化: * 移除了大部分的 ffmpeg 依赖 * 不再需要 ffprobe * Mac 用户无需手动安装 ffmpeg - 文档更新: * 更新 [README.md](http://readme.md/) * 更新 config.example.py ### 小细节: - 取消了大部分 ffmpeg 依赖,简化安装流程 - 完善了配置文档