IsManga kontra Qwen-MT-Image 2.0: trzy strony mangi obok siebie

Tłumaczenie strony mangi to coś więcej niż tłumaczenie tekstu. Narzędzie musi znaleźć każdy dymek, odczytać pionowe japońskie pismo (także odręczne napisy), przetłumaczyć go w kontekście, wymazać oryginał i ponownie nanieść angielski tekst.
Przepuściliśmy trzy surowe japońskie strony przez Qwen-MT-Image 2.0, model tłumaczenia obrazów firmy Alibaba, oraz przez nasz własny model IsManga, i ocenili wszystkie 41 linii dialogów. Żaden z wyników nie był poprawiany ręcznie.
Dokładność
Każda linia była oceniana jako poprawna, z drobnym błędem (sens zachowany), błędna albo pozostawiona po japońsku. Drobne efekty dźwiękowe nie były liczone.
| 41 linii | IsManga | Qwen |
|---|---|---|
| Poprawne | 27 | 13 |
| Drobny błąd | 5 | 8 |
| Błędne | 7 | 15 |
| Pozostawione po japońsku lub zromanizowane | 2 | 5 |
IsManga poprawnie przetłumaczył dwa razy więcej linii, a przewaga rośnie wraz z trudnością stron.
Strona 1: spokojna strona otwierająca
Na czystej stronie oba narzędzia są blisko siebie, a Qwen nas pokonał w tytule. Poprawnie odczytał logo, podczas gdy stylizowane pismo u nas zamieniło się w "Hero Summoning 18 Vessels 1297 the Other World Was Peaceful". Główny błąd Qwen polegał na tym, że przeczytał także drobne furigana nad imieniem, przez co podpis brzmi "Miyama Kaito Miyama Kaito".
Strona 2: komediowa strona z gagami
Żart zależy od tego, które morskie stworzenia mają duchy, więc każdy rzeczownik i każde "nie" ma znaczenie.
- ウミウシの精霊もイカの精霊もいない ("nie ma duchów ślimaków morskich ani duchów kałamarnic"). Qwen: "The spirit of the sea slug also exists. The spirit of the squid also exists.", czyli dokładnie na odwrót. IsManga zachował sens.
- 乗りかかった船ですしね, idiom oznaczający "skoro już tak daleko zaszliśmy". Qwen: "It's a boat I was riding on". IsManga: "Since we've already embarked on this ship together".
Strona 3: zatłoczona strona z akcją i komedią
Tu Qwen się sypie. Wciska poziomy angielski tekst w wysokie, pionowe dymki, dzieląc wyrazy ("W-ho is it!?", "li-m-e") i często czyta każdą kolumnę jako osobną linię. IsManga składa każdy dymek czcionką komiksową dopasowaną do rozmiaru.
- 一石三鳥 (trzy ptaki jednym kamieniem). Qwen: "kill two birds with one stone". IsManga: "three birds with one stone". Liczba ma znaczenie: następny kadr podnosi ją do czterech.
- 頭に白い布巻いた褐色でヒゲのおっさん!? Qwen: "Answer: From (1) N top = 6". IsManga: "A brown-skinned middle-aged man with a beard and a cloth wrapped around his head!?"
- Odręczne krzyki. Qwen: "persimmon", "mountain bird", "sacrifice". IsManga: "Nng-aaaaah! My head, gah!"
Szybkość
Zmierzyliśmy też, ile czasu każdy model potrzebował na zwrócenie przetłumaczonej strony.
| Model | Czas na stronę |
|---|---|
| IsManga | 2 do 2,5 sekundy |
| Qwen-MT-Image 2.0 | 4,8 do 8,5 sekundy |
IsManga był 2–4 razy szybszy, a przy całym rozdziale ta różnica robi się bardzo odczuwalna.
Gdzie wciąż się potykamy
Większość naszych błędnych linii bierze się z trzech rzeczy:
- Efekty dźwiękowe. そっ (poruszając się cicho) zamieniło się w "So?", a しぬぅう ("Umieram!") zostało zromanizowane zamiast przetłumaczone.
- Imiona. Na stronie 2 wymyśliliśmy "Yuko" i zapisaliśmy jedną postać zarówno jako "Ufufu", jak i "Yufufu".
- Stylizowany tekst. Poza logo na stronie 1 jeden dymek na stronie 3 powtórzył linię z innego dymka, a 腐葉土 (próchnica liściowa) zamieniło się w "ripe magic leaves", czyli linię, którą Qwen przetłumaczył poprawnie.
Nad tym pracujemy teraz.
Wypróbuj
Trzy strony to nie benchmark, ale pokazują, na jakim etapie jest każde z tych narzędzi. Żeby wypróbować IsManga na własnej mandze, zainstaluj rozszerzenie do Chrome albo aplikację Manga Translator ze strony ismanga.com i otwórz dowolny surowy rozdział.
Rozważasz własny hosting AI zamiast chmurowego API? Wypróbuj nasz kalkulator ROI i sprawdź, ile możesz zaoszczędzić.


