IsManga contre Qwen-MT-Image 2.0 : trois pages de manga côte à côte

Nous avons fait passer trois pages de manga japonais brutes dans Qwen-MT-Image 2.0 et dans IsManga, puis noté les 41 lignes. IsManga en a réussi deux fois plus et était 2 à 4 fois plus rapide.
B

4 min de lecture

IsManga contre Qwen-MT-Image 2.0 : trois pages de manga côte à côte

Traduire une page de manga demande plus que de traduire du texte. Un outil doit repérer chaque bulle, lire le japonais vertical (y compris les lettrages dessinés à la main), la traduire en contexte, effacer le texte original et réinscrire le texte traduit à sa place.

Nous avons fait passer trois pages japonaises brutes dans Qwen-MT-Image 2.0, le modèle de traduction d'images d'Alibaba, et dans notre propre modèle IsManga, puis noté les 41 lignes de dialogue. Aucun des deux résultats n'a été retouché à la main.

Précision

Chaque ligne était notée correcte, avec une erreur mineure (le sens est préservé), fausse, ou laissée en japonais. Les petits effets sonores ne sont pas comptés.

41 lignesIsMangaQwen
Correct2713
Erreur mineure58
Faux715
Laissé en japonais ou romanisé25

IsManga a obtenu deux fois plus de lignes justes, et l'écart se creuse à mesure que les pages deviennent plus difficiles.

Page 1 : une page d'ouverture calme

Page d'ouverture originale en japonais de I Got Caught Up in a Hero Summoning, but the Other World Was Peaceful
Tiré de I Got Caught Up in a Hero Summoning, but the Other World Was Peaceful.
La page d'ouverture traduite par Qwen-MT-Image 2.0 et IsManga
Lignes correctes : IsManga 5 sur 7, Qwen 3 sur 7.

Sur une page simple, les deux sont proches, et Qwen nous a battus sur le titre. Il a bien lu le logo, alors que la typographie stylisée a transformé le nôtre en "Hero Summoning 18 Vessels 1297 the Other World Was Peaceful". L'erreur principale de Qwen a été de lire aussi les petits furigana au-dessus d'un nom, d'où la légende "Miyama Kaito Miyama Kaito".

Page 2 : une page de comédie gag

Page originale en japonais d'une comédie gag sur les esprits des créatures marines
Page originale.
La page de comédie gag traduite par Qwen-MT-Image 2.0 et IsManga
Lignes correctes : IsManga 7 sur 11, Qwen 4 sur 11.

La blague repose sur la question de savoir quelles créatures marines ont des esprits, donc chaque nom et chaque "ne... pas" compte.

  • ウミウシの精霊もイカの精霊もいない (« ni esprit de nudibranche, ni esprit de calmar non plus »). Qwen : "The spirit of the sea slug also exists. The spirit of the squid also exists.", soit l'inverse. IsManga a conservé le sens.
  • 乗りかかった船ですしね, une expression idiomatique qui signifie « on en a déjà fait du chemin ». Qwen : "It's a boat I was riding on". IsManga : "Since we've already embarked on this ship together".

Page 3 : une page d'action et de comédie chargée

Page originale en japonais d'une comédie d'action tirée de Tsukimichi: Moonlit Fantasy
Tiré de Tsukimichi: Moonlit Fantasy.
La page de comédie d'action traduite par Qwen-MT-Image 2.0 et IsManga
Lignes correctes : IsManga 15 sur 23, Qwen 6 sur 23.

C'est là que Qwen s'effondre. Il comprime de l'anglais horizontal dans des bulles verticales étroites en coupant les mots ("W-ho is it!?", "li-m-e") et lit souvent chaque colonne comme une ligne distincte. IsManga écrit chaque bulle dans une police de bande dessinée dimensionnée pour tenir.

  • 一石三鳥 (faire d'une pierre trois coups). Qwen : "kill two birds with one stone". IsManga : "three birds with one stone". Le compte compte : la case suivante en fait quatre.
  • 頭に白い布巻いた褐色でヒゲのおっさん!? Qwen : "Answer: From (1) N top = 6". IsManga : "A brown-skinned middle-aged man with a beard and a cloth wrapped around his head!?"
  • Les cris dessinés à la main. Qwen : "persimmon", "mountain bird", "sacrifice". IsManga : "Nng-aaaaah! My head, gah!"

Vitesse

Nous avons aussi chronométré le temps que chaque modèle a mis pour renvoyer une page traduite.

ModèleTemps par page
IsManga2 à 2,5 secondes
Qwen-MT-Image 2.04,8 à 8,5 secondes

IsManga était 2 à 4 fois plus rapide, ce qui s'accumule sur un chapitre entier.

Là où nous trébuchons encore

La plupart de nos lignes fausses viennent de trois choses :

  • Effets sonores. そっ (se déplacer discrètement) est devenu "So?", et しぬぅう (« Je meurs ! ») a été transcrit en romaji au lieu d'être traduit.
  • Noms. Nous avons inventé un "Yuko" en page 2 et orthographié un même personnage à la fois "Ufufu" et "Yufufu".
  • Texte stylisé. Outre le logo de la page 1, une bulle de la page 3 a répété la réplique d'une autre bulle, et 腐葉土 (terreau de feuilles) est devenu "ripe magic leaves", une ligne que Qwen a bien traduite.

Ce sont les points sur lesquels nous travaillons ensuite.

Essayer

Trois pages ne forment pas un benchmark, mais elles montrent où en est chaque outil aujourd'hui. Pour essayer IsManga sur vos propres mangas, installez l'extension Chrome ou l'application Manga Translator depuis ismanga.com et ouvrez n'importe quel chapitre en version originale.

Vous envisagez une IA auto-hébergée plutôt qu'une API cloud ? Essayez notre calculateur de ROI pour voir combien vous pourriez économiser.

  • #ai-translation
  • #manga-translation
  • #qwen
  • #model-comparison
  • #raw-manga