IsManga対Qwen-MT-Image 2.0:漫画3ページの並列比較

漫画ページの翻訳は、テキストを訳すだけでは済みません。ツールはすべての吹き出しを見つけ、縦書きの日本語(手描きの文字を含む)を読み取り、文脈に沿って翻訳し、元の文字を消して英語を書き戻す必要があります。
生の日本語ページ3枚をQwen-MT-Image 2.0(Alibabaの画像翻訳モデル)と、当社のIsMangaモデルで翻訳し、セリフ全41行を採点しました。どちらの出力も手作業では編集していません。
正確性
各行は、正しい、軽微な誤り(意味は伝わる)、誤訳、日本語のまま残っている、のいずれかで採点しました。小さな効果音は数えていません。
| 41行 | IsManga | Qwen |
|---|---|---|
| 正解 | 27 | 13 |
| 軽微な誤り | 5 | 8 |
| 誤訳 | 7 | 15 |
| 日本語またはローマ字のまま | 2 | 5 |
IsMangaは正しい行が2倍多く、ページの難易度が上がるほど差が広がります。
1ページ目:静かな冒頭ページ
簡素なページでは両者は近い結果になり、タイトルではQwenが勝りました。ロゴを正しく読み取った一方、装飾的な文字では当社のモデルが"Hero Summoning 18 Vessels 1297 the Other World Was Peaceful"と訳してしまいました。Qwenの主なミスは、名前の上に振られた小さなふりがなも一緒に読んでしまったことで、キャプションには"Miyama Kaito Miyama Kaito"と出ています。
2ページ目:ギャグ漫画ページ
このジョークは、どの海の生き物に精霊がいるかにかかっているため、名詞のひとつひとつと「not」が重要になります。
- ウミウシの精霊もイカの精霊もいない(「ウミウシにもイカにも精霊はいない」という意味)。Qwenは"The spirit of the sea slug also exists. The spirit of the squid also exists."と訳し、意味が逆になりました。IsMangaは意味を保ちました。
- 乗りかかった船ですしね(「ここまで来た以上は」という意味の慣用句)。Qwenは"It's a boat I was riding on"と訳し、IsMangaは"Since we've already embarked on this ship together"と訳しました。
3ページ目:にぎやかなアクションコメディページ
ここでQwenは崩れます。横書きの英語を縦長の吹き出しに詰め込むために単語を分割し("W-ho is it!?"、"li-m-e")、縦の段をそれぞれ別の行として読んでしまうことがよくあります。IsMangaは、各吹き出しに収まるサイズのコミック用フォントで文字を入れています。
- 一石三鳥(一つの石で三羽の鳥を落とす、という意味)。Qwenは"kill two birds with one stone"と訳し、IsMangaは"three birds with one stone"と訳しました。次のコマで数が4になるため、数が重要になります。
- 頭に白い布巻いた褐色でヒゲのおっさん!?Qwenは"Answer: From (1) N top = 6"と出力し、IsMangaは"A brown-skinned middle-aged man with a beard and a cloth wrapped around his head!?"と訳しました。
- 手描きの叫び声。Qwenは"persimmon"、"mountain bird"、"sacrifice"と訳し、IsMangaは"Nng-aaaaah! My head, gah!"と訳しました。
速度
各モデルが翻訳済みのページを返すまでの時間も計測しました。
| モデル | 1ページあたりの時間 |
|---|---|
| IsManga | 2〜2.5秒 |
| Qwen-MT-Image 2.0 | 4.8〜8.5秒 |
IsMangaは2〜4倍速く、1つの章全体では大きな差になります。
まだ苦手な部分
不正解の行の多くは、次の3つが原因です。
- 効果音。そっ(「そっと動く」という意味)は"So?"になり、しぬぅう(「死んじゃう!」という意味)は訳されず、ローマ字のまま残りました。
- 名前。2ページ目では存在しない"Yuko"という名前を作り出してしまい、ある人物の名前を"Ufufu"と"Yufufu"の2通りに綴ってしまいました。
- 装飾的な文字。1ページ目のロゴ以外にも、3ページ目では、ある吹き出しが別の吹き出しのセリフを繰り返していました。また、腐葉土(落ち葉が分解された土、の意味)は"ripe magic leaves"になりましたが、これはQwenが正しく訳した行です。
これらが次に取り組む課題です。
試す
3ページでは正式なベンチマークとは言えませんが、現時点での各ツールの到達点は見えてくるはずです。ご自身の漫画でIsMangaを試すには、ismanga.comからChrome拡張機能またはManga Translatorアプリをインストールし、好きな生の章を開いてください。
クラウドAPIの代わりにセルフホストのAIを検討していますか?ROI計算ツールで、どれだけ節約できるか確認できます。


