IsManga 對比 Qwen-MT-Image 2.0:三頁漫畫實測比較

翻譯一頁漫畫,光翻譯文字是不夠的。工具必須找出每一個對話框,讀懂直排日文(包括手寫的文字),依照上下文翻譯,擦掉原文,再把譯文嵌回去。
我們把三頁日文原文漫畫分別交給阿里巴巴的圖片翻譯模型 Qwen-MT-Image 2.0 和我們自己的 IsManga 模型翻譯,並為全部 41 句台詞評分。兩邊的結果都沒有經過人工修改。
這次比較的是日翻英的結果,下面的例子都附上中文意思,方便你對照。
準確度
每一句分成四類:正確、小錯誤(意思還在)、錯誤,或保留日文沒翻。小型狀聲詞不列入計算。
| 41 句 | IsManga | Qwen |
|---|---|---|
| 正確 | 27 | 13 |
| 小錯誤 | 5 | 8 |
| 錯誤 | 7 | 15 |
| 保留日文或只有羅馬拼音 | 2 | 5 |
IsManga 翻對的句數是 Qwen 的兩倍,而且頁面越難,差距越大。
第 1 頁:安靜的開場頁
在乾淨的頁面上兩者差距不大,Qwen 的標題甚至翻得比我們好。它正確讀出了標題 Logo,花俏的字體卻讓我們的譯文變成 "Hero Summoning 18 Vessels 1297 the Other World Was Peaceful"。Qwen 主要的失誤是把名字上方的振假名也讀了進去,所以說明框變成 "Miyama Kaito Miyama Kaito"。
第 2 頁:搞笑漫畫
這頁的笑點在於哪些海洋生物有精靈,所以每個名詞、每個「沒有」都很重要。
- ウミウシの精霊もイカの精霊もいない(「海蛞蝓精靈和魷魚精靈也都沒有」)。Qwen:"The spirit of the sea slug also exists. The spirit of the squid also exists.",意思完全相反。IsManga 保留了原意。
- 乗りかかった船ですしね:意思是「都已經走到這一步了」的慣用語。Qwen:"It's a boat I was riding on"。IsManga:"Since we've already embarked on this ship together"。
第 3 頁:熱鬧的動作喜劇
Qwen 在這頁就撐不住了。它把橫排英文硬塞進細長的直排對話框,把單字切成碎片("W-ho is it!?"、"li-m-e"),還常把每一直行當成獨立的一句。IsManga 則用漫畫字體嵌字,並依照每個對話框調整字的大小。
- 一石三鳥(一石三鳥,也就是一舉三得)。Qwen:"kill two birds with one stone"。IsManga:"three birds with one stone"。數字很重要:下一格的笑點就是變成一石四鳥。
- 頭に白い布巻いた褐色でヒゲのおっさん!?(頭上綁著白布、皮膚黝黑又留鬍子的大叔!?)Qwen:"Answer: From (1) N top = 6"。IsManga:"A brown-skinned middle-aged man with a beard and a cloth wrapped around his head!?"
- 手寫的尖叫聲。Qwen:"persimmon"、"mountain bird"、"sacrifice"。IsManga:"Nng-aaaaah! My head, gah!"
速度
我們也測量了兩個模型翻譯每一頁所花的時間。
| 模型 | 每頁所需時間 |
|---|---|
| IsManga | 2 到 2.5 秒 |
| Qwen-MT-Image 2.0 | 4.8 到 8.5 秒 |
IsManga 快了 2 到 4 倍,翻譯一整章時差距會更明顯。
我們還不夠好的地方
我們的錯誤大多來自三個地方:
- 狀聲詞。そっ(輕手輕腳的動作)被翻成 "So?",しぬぅう(「我要死了!」)只轉成羅馬拼音,沒有翻譯。
- 專有名詞。我們在第 2 頁憑空多了一個 "Yuko",還把同一個角色拼成 "Ufufu" 和 "Yufufu" 兩種。
- 花俏的文字。除了第 1 頁的標題 Logo,第 3 頁有一個對話框重複了另一個對話框的台詞,腐葉土(腐葉土)也被翻成 "ripe magic leaves",這句 Qwen 反而翻對了。
這些就是我們接下來要改進的地方。
試試看
三頁不算正式的基準測試,但足以看出兩個工具目前的水準。想用你自己的漫畫試試看,到 ismanga.com 安裝 IsManga Chrome 擴充功能或 Manga Translator App,打開任何一章原文漫畫就可以開始。
在考慮用自架 AI 取代雲端 API 嗎?用我們的ROI 試算看看能省下多少。


