IsManga contre Qwen-MT-Image 2.0 : trois pages de manga côte à côte

Traduire une page de manga demande plus que de traduire du texte. Un outil doit repérer chaque bulle, lire le japonais vertical (y compris les lettrages dessinés à la main), la traduire en contexte, effacer le texte original et réinscrire le texte traduit à sa place.
Nous avons fait passer trois pages japonaises brutes dans Qwen-MT-Image 2.0, le modèle de traduction d'images d'Alibaba, et dans notre propre modèle IsManga, puis noté les 41 lignes de dialogue. Aucun des deux résultats n'a été retouché à la main.
Précision
Chaque ligne était notée correcte, avec une erreur mineure (le sens est préservé), fausse, ou laissée en japonais. Les petits effets sonores ne sont pas comptés.
| 41 lignes | IsManga | Qwen |
|---|---|---|
| Correct | 27 | 13 |
| Erreur mineure | 5 | 8 |
| Faux | 7 | 15 |
| Laissé en japonais ou romanisé | 2 | 5 |
IsManga a obtenu deux fois plus de lignes justes, et l'écart se creuse à mesure que les pages deviennent plus difficiles.
Page 1 : une page d'ouverture calme
Sur une page simple, les deux sont proches, et Qwen nous a battus sur le titre. Il a bien lu le logo, alors que la typographie stylisée a transformé le nôtre en "Hero Summoning 18 Vessels 1297 the Other World Was Peaceful". L'erreur principale de Qwen a été de lire aussi les petits furigana au-dessus d'un nom, d'où la légende "Miyama Kaito Miyama Kaito".
Page 2 : une page de comédie gag
La blague repose sur la question de savoir quelles créatures marines ont des esprits, donc chaque nom et chaque "ne... pas" compte.
- ウミウシの精霊もイカの精霊もいない (« ni esprit de nudibranche, ni esprit de calmar non plus »). Qwen : "The spirit of the sea slug also exists. The spirit of the squid also exists.", soit l'inverse. IsManga a conservé le sens.
- 乗りかかった船ですしね, une expression idiomatique qui signifie « on en a déjà fait du chemin ». Qwen : "It's a boat I was riding on". IsManga : "Since we've already embarked on this ship together".
Page 3 : une page d'action et de comédie chargée
C'est là que Qwen s'effondre. Il comprime de l'anglais horizontal dans des bulles verticales étroites en coupant les mots ("W-ho is it!?", "li-m-e") et lit souvent chaque colonne comme une ligne distincte. IsManga écrit chaque bulle dans une police de bande dessinée dimensionnée pour tenir.
- 一石三鳥 (faire d'une pierre trois coups). Qwen : "kill two birds with one stone". IsManga : "three birds with one stone". Le compte compte : la case suivante en fait quatre.
- 頭に白い布巻いた褐色でヒゲのおっさん!? Qwen : "Answer: From (1) N top = 6". IsManga : "A brown-skinned middle-aged man with a beard and a cloth wrapped around his head!?"
- Les cris dessinés à la main. Qwen : "persimmon", "mountain bird", "sacrifice". IsManga : "Nng-aaaaah! My head, gah!"
Vitesse
Nous avons aussi chronométré le temps que chaque modèle a mis pour renvoyer une page traduite.
| Modèle | Temps par page |
|---|---|
| IsManga | 2 à 2,5 secondes |
| Qwen-MT-Image 2.0 | 4,8 à 8,5 secondes |
IsManga était 2 à 4 fois plus rapide, ce qui s'accumule sur un chapitre entier.
Là où nous trébuchons encore
La plupart de nos lignes fausses viennent de trois choses :
- Effets sonores. そっ (se déplacer discrètement) est devenu "So?", et しぬぅう (« Je meurs ! ») a été transcrit en romaji au lieu d'être traduit.
- Noms. Nous avons inventé un "Yuko" en page 2 et orthographié un même personnage à la fois "Ufufu" et "Yufufu".
- Texte stylisé. Outre le logo de la page 1, une bulle de la page 3 a répété la réplique d'une autre bulle, et 腐葉土 (terreau de feuilles) est devenu "ripe magic leaves", une ligne que Qwen a bien traduite.
Ce sont les points sur lesquels nous travaillons ensuite.
Essayer
Trois pages ne forment pas un benchmark, mais elles montrent où en est chaque outil aujourd'hui. Pour essayer IsManga sur vos propres mangas, installez l'extension Chrome ou l'application Manga Translator depuis ismanga.com et ouvrez n'importe quel chapitre en version originale.
Vous envisagez une IA auto-hébergée plutôt qu'une API cloud ? Essayez notre calculateur de ROI pour voir combien vous pourriez économiser.


