liuzhao1225/YouDub-webui

Public

Open-source AI video localization and dubbing for YouTube/Bilibili: speech recognition, subtitle translation, voice cloning, audio mixing and rendering. 开源 AI 视频翻译配音工具。

Star5.8k Fork624 Watch35 Mở trên GitHub

Bee AI phân tích repositoryBETA

AI đọc README và cây file để tóm tắt, gợi ý cách dùng và đánh giá repository. Mọi con số lấy từ kho Bee, không do AI ước lượng.

Cập nhật lần cuối: 04/10/2026

Đăng nhập để hỏi Bee AI

Tóm tắt bởi Bee AI

YouDub WebUI là công cụ mã nguồn mở phục vụ dịch thuật và lồng tiếng video AI cho YouTube, Bilibili hoặc video tải lên cục bộ, dành cho nhà sáng tạo nội dung và lập trình viên.

Được kiểm chứng qua quy trình sản xuất thực tế trên kênh Bilibili với hơn 1 triệu người theo dõi và hàng chục nghìn video.
Hỗ trợ tách giọng và nhạc nền bằng Demucs, nhận dạng giọng nói với Whisper và lồng tiếng qua VoxCPM2.
Cung cấp 3 chế độ xuất: phụ đề cứng giữ âm thanh gốc, lồng tiếng không phụ đề cứng, hoặc kết hợp cả hai.
Khả năng khôi phục từ giai đoạn bị lỗi và tái sử dụng sản phẩm trung gian đã xử lý thành công.

Lưu ý

Dự án hiện vẫn ở giai đoạn MVP dù đã được dùng trong quy trình sản xuất thực tế.
Chạy trên CPU hoặc DEVICE=mps sẽ rất chậm hoặc Whisper bị ép về CPU do hạn chế float64 của MPS; khuyên dùng CUDA GPU.
Hướng dịch tiếng Nhật sang tiếng Trung mới chỉ kiểm thử hồi quy tham số tự động, chưa nghiệm thu chất lượng trên media thực tế.

Điểm BeeTính thuần từ số liệu trong kho Bee, không phải AI chấm: bách phân vị sao 30% · độ tươi lần push 25% · fork và watcher 15% · README, giấy phép, mô tả 20% · có bản phát hành 10%.

83/100Điểm tổng thể

Độ phổ biến76
Độ tươi100
Cộng đồng37
Tài liệu100
Phát hành100

Mức độ khóTrung bình
Phù hợp vớiLập trình viên · Doanh nghiệp
Loại dự ánỨng dụng
Giấy phépApache-2.0

Kiến trúc & Công nghệ

Công nghệ AI nhận ra từ README và cây file — chỉ những mục nằm trong danh sách Bee kiểm.

Tech stack

Python
Next.js
FastAPI
PyTorch
Whisper
FFFFmpeg
CUDA
SQLite
Tailwind CSS

Kiến trúc tổng quan

Repository → công nghệ chính → các thư mục cấp 1 có thật trong repo; vai trò do AI mô tả.

RepositoryYouDub-webuiỨng dụng

Công nghệ chính

TypeScript

apps/Chứa ứng dụng giao diện web Next.js.
backend/Chứa mã nguồn API FastAPI, pipeline xử lý và kiểm thử backend.
scripts/Chứa các script tiện ích bổ trợ cho dự án.
submodule/Chứa các git submodule phụ thuộc như mã nguồn Demucs.

apps/Chứa ứng dụng giao diện web Next.js.
backend/Chứa mã nguồn API FastAPI, pipeline xử lý và kiểm thử backend.
scripts/Chứa các script tiện ích bổ trợ cho dự án.
submodule/Chứa các git submodule phụ thuộc như mã nguồn Demucs.

Hướng dẫn nhanh

Các bước để bắt đầu với repository này.

bash

git clone https://github.com/liuzhao1225/YouDub-webui.git
cd YouDub-webui

Các use case chính

Những ứng dụng có thể xây dựng từ repository này.

Dịch và lồng tiếng tự động các video tiếng Anh từ YouTube sang tiếng Trung kèm phụ đề.
Chuyển ngữ video tiếng Trung từ Bilibili sang lồng tiếng tiếng Anh.
Tải video cục bộ lên kèm file phụ đề .srt dịch sẵn để bỏ qua khâu nhận diện Whisper và dịch thuật OpenAI.
Tách giọng nói và nhạc nền của video bằng Demucs để phục vụ hòa âm lại.