IsManga so với Qwen-MT-Image 2.0: Ba trang manga đặt cạnh nhau

Dịch một trang manga không chỉ là dịch chữ. Công cụ phải tìm mọi khung thoại, đọc chữ Nhật viết dọc (kể cả chữ viết tay), dịch đúng theo ngữ cảnh, xóa chữ gốc và chèn lại tiếng Anh vào.
Chúng tôi đưa ba trang tiếng Nhật chưa dịch qua Qwen-MT-Image 2.0, mô hình dịch hình ảnh của Alibaba, và mô hình IsManga của chúng tôi, rồi chấm điểm tất cả 41 dòng thoại. Không đầu ra nào được chỉnh sửa thủ công.
Độ chính xác
Mỗi dòng được chấm là đúng, lỗi nhỏ (ý nghĩa vẫn giữ nguyên), sai, hoặc để nguyên tiếng Nhật. Các hiệu ứng âm thanh nhỏ không được tính.
| 41 dòng | IsManga | Qwen |
|---|---|---|
| Đúng | 27 | 13 |
| Lỗi nhỏ | 5 | 8 |
| Sai | 7 | 15 |
| Để nguyên tiếng Nhật hoặc phiên âm La-tinh | 2 | 5 |
IsManga đúng gấp đôi số dòng, và khoảng cách càng lớn khi trang càng khó.
Trang 1: trang mở đầu yên tĩnh
Với trang sạch, hai bên khá ngang nhau, và Qwen hơn chúng tôi ở phần tiêu đề. Qwen đọc đúng logo, còn phần chữ cách điệu lại khiến bản của chúng tôi thành "Hero Summoning 18 Vessels 1297 the Other World Was Peaceful". Lỗi chính của Qwen là đọc luôn furigana nhỏ phía trên một cái tên, nên chú thích thành "Miyama Kaito Miyama Kaito".
Trang 2: trang hài hước
Trò đùa phụ thuộc vào việc sinh vật biển nào có linh hồn, nên mọi danh từ và mọi chữ "không" đều quan trọng.
- ウミウシの精霊もイカの精霊もいない (không có linh hồn sên biển, cũng không có linh hồn mực). Qwen: "The spirit of the sea slug also exists. The spirit of the squid also exists.", ngược hẳn nghĩa. IsManga giữ đúng ý nghĩa.
- 乗りかかった船ですしね, một thành ngữ nghĩa là (đã đi đến nước này rồi). Qwen: "It's a boat I was riding on". IsManga: "Since we've already embarked on this ship together".
Trang 3: trang hành động hài hước, nhiều chi tiết
Đây là chỗ Qwen sụp đổ. Nó ép tiếng Anh ngang vào các khung thoại cao và hẹp, bằng cách cắt chữ ("W-ho is it!?", "li-m-e") và thường đọc từng cột như một dòng riêng. IsManga chèn từng khung thoại bằng phông chữ truyện tranh được chỉnh cỡ vừa khít.
- 一石三鳥 (một mũi tên trúng ba đích). Qwen: "kill two birds with one stone". IsManga: "three birds with one stone". Số lượng có ý nghĩa: khung tiếp theo biến nó thành bốn.
- 頭に白い布巻いた褐色でヒゲのおっさん!? Qwen: "Answer: From (1) N top = 6". IsManga: "A brown-skinned middle-aged man with a beard and a cloth wrapped around his head!?"
- Tiếng hét vẽ tay. Qwen: "persimmon", "mountain bird", "sacrifice". IsManga: "Nng-aaaaah! My head, gah!"
Tốc độ
Chúng tôi cũng đo thời gian mỗi mô hình trả về một trang đã dịch.
| Mô hình | Thời gian mỗi trang |
|---|---|
| IsManga | 2 đến 2,5 giây |
| Qwen-MT-Image 2.0 | 4,8 đến 8,5 giây |
IsManga nhanh hơn từ 2 đến 4 lần, và chênh lệch này cộng dồn lại thành khác biệt lớn qua cả một chương.
Những điểm chúng tôi vẫn còn sai
Phần lớn các dòng sai của chúng tôi đến từ ba nguyên nhân:
- Hiệu ứng âm thanh. そっ (di chuyển lén lút) bị dịch thành "So?", còn しぬぅう (Tôi sắp chết!) bị phiên âm La-tinh thay vì được dịch.
- Tên riêng. Chúng tôi tự tạo ra một "Yuko" ở trang 2, và viết một nhân vật vừa thành "Ufufu" vừa thành "Yufufu".
- Chữ cách điệu. Ngoài logo ở trang 1, một khung thoại ở trang 3 lặp lại dòng của khung khác, còn 腐葉土 (mùn lá) bị dịch thành "ripe magic leaves", một dòng mà Qwen dịch đúng.
Đây là những gì chúng tôi đang cải thiện tiếp theo.
Dùng thử
Ba trang không phải là một bài benchmark, nhưng chúng cho thấy mỗi công cụ đang ở đâu hôm nay. Để thử IsManga với manga của riêng bạn, hãy cài tiện ích Chrome hoặc ứng dụng Manga Translator từ ismanga.com rồi mở bất kỳ chương raw nào.
Bạn đang cân nhắc tự host AI thay vì dùng API đám mây? Hãy thử công cụ tính ROI của chúng tôi để xem bạn có thể tiết kiệm bao nhiêu.


