1. Giới thiệu về Tool

Tool dịch video tự động Auto Dịch Video cho phép bạn dịch và đọc lại video bằng tiếng Việt với giọng nói tự nhiên và chất lượng cao. Tool này được phát triển bởi một cá nhân Trung Quốc, và tôi đã viện dịch, tối ưu hóa và tải xuống các mô hình tốt nhất cho nó để nó có thể dịch chính xác và hiệu quả cho tiếng Việt.

2. Các trường hợp sử dụng chính và cách sử dụng

【Dịch video và lồng tiếng】 Đặt từng tùy chọn khi cần, tự do định cấu hình các kết hợp để đạt được bản dịch và lồng tiếng, tăng hoặc giảm tốc độ tự động, hợp nhất, v.v

【Trích xuất phụ đề mà không cần dịch】 Chọn tệp video, chọn ngôn ngữ nguồn video, sau đó nhận dạng văn bản từ video và tự động xuất tệp phụ đề sang thư mục đích

【Trích xuất phụ đề và dịch】 Chọn tệp video, chọn ngôn ngữ nguồn video, đặt ngôn ngữ đích dịch mong muốn, sau đó nhận dạng văn bản từ video và dịch nó sang ngôn ngữ đích, sau đó xuất tệp phụ đề song ngữ vào thư mục đích

【Phụ đề và hợp nhất video】 Chọn video, sau đó kéo tệp phụ đề hiện có vào vùng phụ đề bên phải, đặt cả ngôn ngữ nguồn và ngôn ngữ đích thành ngôn ngữ được sử dụng trong phụ đề, sau đó chọn loại lồng tiếng và vai trò và bắt đầu thực thi

【Tạo lồng tiếng cho phụ đề】 Kéo tệp phụ đề cục bộ vào trình chỉnh sửa phụ đề bên phải, sau đó chọn ngôn ngữ đích, loại lồng tiếng và vai trò, tệp âm thanh lồng tiếng sẽ được tạo trong thư mục đích

【Nhận dạng văn bản cho âm thanh và video】 Kéo video hoặc âm thanh vào cửa sổ nhận dạng, nó sẽ nhận dạng văn bản và xuất nó dưới dạng phụ đề srt

【Tổng hợp văn bản thành giọng nói】 Tạo lồng tiếng cho một đoạn văn bản hoặc phụ đề bằng cách sử dụng vai trò lồng tiếng được chỉ định

【Tách âm thanh khỏi video】 Tách các tệp video thành tệp âm thanh và video im lặng

【Hợp nhất âm thanh, video và phụ đề】 Hợp nhất các tệp âm thanh, tệp video và tệp phụ đề thành một tệp video

【Chuyển đổi định dạng âm thanh và video】 Chuyển đổi giữa các định dạng khác nhau 【Dịch văn bản và srt】 Văn bản và srt Dịch sang ngôn ngữ khác

3. Cách sử dụng

Để sử dụng Auto Dịch Video, hãy tuân theo các bước sau:

  1. Tải về và cài đặt: Tải xuống và cài đặt phần mềm
  2. Mở phần mềm: Mở phần mềm và chọn File > Open để mở video cần dịch.
  3. Chọn ngôn ngữ: Chọn ngôn ngữ muốn dịch sang và ngôn ngữ muốn đọc lại video.
  4. Bắt đầu dịch: Nhấn bắt đầu dịch video.
  5. Tùy chỉnh phụ đề (tùy chọn): Tùy chỉnh phụ đề để đảm bảo độ chính xác của dịch.
  6. Lưu video: Sau khi hoàn thành, lưu video dịch

4. Hướng dẫn cài đặt

  1. Tải xuống phần mềm: Tải xuống phần mềm tại Liên kết tải về.
  2. Gỡ bỏ phiên bản cũ (nếu có): Nếu bạn đã cài đặt phiên bản trước đây của phần mềm, hãy gỡ bỏ nó trước khi cài đặt phiên bản mới.
  3. Cài đặt phiên bản mới: Mở tệp setup và tuân theo hướng dẫn cài đặt.

Giải Thích 1 số tính năng :

Phụ đề cứng là gì ? phụ đề mềm là gì ?

—> phụ đề cứng sẽ gắn trực tiếp phụ đề vào video ( không chỉnh sửa được ) .

—> phụ đề mềm sẽ có 1 file srt, nằm bên cạnh file video chính, xoá đi thì sẽ ko thêm phụ đề ( subtiles ) vào video .

tốt nhất không phụ đề, vì đem video vào capcut sẽ tạo ra captions đẹp hơn !!

Mô hình nhận diện ngôn ngữ:

có 2 mô hình nhanh ( fast whisper ) và openai wshiper

chọn large-3 thì máy phải mạnh mới nên chọn nha, vì mô hình này nặng máy nhưng bù lại chất lượng rất cao

mình chỉ tải mô hình nào hiệu quả với mô hình nào không có nghĩa là không ổn định nên mình không tải, hãy chọn mô hình khác phù hợp.

nhập key openai để tạo giọng đọc AI hay nhất hiện nay :

có key thì vào Cài Đặt > Openai / ChatGPT Key, điền key và làm như ảnh trên. Có 2 server :

sẽ cập nhật thêm trong tương lai

Lấy key gemini ở đâu ?

Tự chỉnh lại Prompt dịch nội dung ở đâu ?

Bạn hãy vào thư mục gốc chứa tool > tìm thư mục “videotrans” >chỉnh prompt lại trong 3 file này. sau đó tắt ứng dụng nếu đang mở , và mở lại sẽ update prompt mới !!

mình có thiết kế 1 con bot trả lời làm theo yêu cầu :

có thể yêu cầu nó tối ưu prompt, tạo ảnh, tìm kiếm trên internet, tạo video từ script vào chat với nó rồi hỏi nó sẽ làm cho nhé

Làm sao để có thể dùng CLone Voice API:

Nói 1 cách đơn giản Clone voice là tính năng giúp chúng ta có thể clone 1 giọng nói của bất kỳ ai, sau đó dùng giọng nói này để tạo nội dung cho video ( hiện tại chưa hỗ trợ tiếng việt , mình sẽ tìm thêm cách để có thể tích hợp cá tiếng việt nam ) .
Dùng clone voice để làm gì ?

Chúng ta tự clone giọng của chính mình sau đó dùng api 1 cách miễn phí để tạo video kể chuyện, podcast , lồng tiếng cho video qua nước khác bằng chính giọng của mình sẽ giúp cho giọng nói unique ( điều mà nhiều kênh như Youtube , tiktok đang cố gắng ngăn chặn giọng đọc AI ).

Miễn phí, ở thời điểm hiện tại dùng cách này sẽ miễn phí api tạo giọng đọc.

Nhược điểm :

Chưa hỗ trợ tiếng việt nam

phải chạy song song 2 tool là Auto dịch video và Clone voice , điều này đòi hỏi máy tính phải có cấu hình cao.và đây là video hướng dẫn cách tích hợp clone voice vào :

để lại comment nếu không hiểu !!

Tạo ra nhiều giọng đọc cho 1 file srt / 1 video.

Khi đã có file srt mọi người chọn Cài Đặt Giọng Đọc Theo Dòng, và chọn các dòng muốn chọn giọng đọc.

bằng cách này bạn có thể tạo 1 file audio với nhiều giọng đọc khác nhau, phù hợp cho kể truyện cổ tích ( nhiều nhân vật ) kết hợp với clone voice thì hết sức ngon luôn !

5. Liên kết tải về

Bằng cách sử dụng Auto Dịch Video, bạn có thể dễ dàng dịch và đọc lại video bằng tiếng Việt,hinese Simplified and Traditional, English, Korean, Japanese, Russian, French, German, Italian, Spanish, Portuguese, Thai, Arabic, Turkish, Hungarian, Hindi, với giọng nói tự nhiên và chất lượng cao. Hãy cùng trải nghiệm và nâng cao trải nghiệm xem video của mình!

Để donate cho công sức của mình, bạn có thể tặng mình 1 ly cafe tại đây nếu có thể :

Link tải : phiên bản full 1.14 – bản chuẩn

Link tải Tool Clone Voice phục vụ clone giọng đọc hỗ trợ Auto Dịch Video:

update clone voice bản mới 0.97, giải nén ra copy vào thư mục gốc clone-voice/

Update bản mới, bằng cách tải phiên bản sau đây giải nén ra và copy toàn bộ vào thư mục chứa phiên bản gốc 1.14 : 10/03/2024

Link Tải:

sửa 1 số lỗi subtitle

Bổ xung AzuzeAI TTS

Thêm server free chatgpt https://apiskey.top

Trả lời

Email của bạn sẽ không được hiển thị công khai. Các trường bắt buộc được đánh dấu *

Website này sử dụng Akismet để hạn chế spam. Tìm hiểu bình luận của bạn được duyệt như thế nào.

Index