IsManga против Qwen-MT-Image 2.0: три страницы манги бок о бок

Перевод страницы манги — это больше, чем перевод текста. Инструмент должен найти каждый баллон, прочитать вертикальный японский текст (включая рукописные надписи), перевести его с учётом контекста, стереть оригинал и вписать английский текст обратно.
Мы прогнали три необработанные японские страницы через Qwen-MT-Image 2.0, модель для перевода изображений от Alibaba, и через нашу собственную модель IsManga, после чего оценили все 41 строку диалога. Ни один из вариантов не редактировался вручную.
Точность
Каждая строка оценивалась как верная, с незначительной ошибкой (смысл сохраняется), неверная или оставленная на японском. Мелкие звуковые эффекты не учитывались.
| 41 строка | IsManga | Qwen |
|---|---|---|
| Верно | 27 | 13 |
| Незначительная ошибка | 5 | 8 |
| Неверно | 7 | 15 |
| Оставлено на японском или транслитерировано | 2 | 5 |
IsManga дал вдвое больше верных строк, и разрыв растёт по мере усложнения страниц.
Страница 1: спокойная страница-открытие
На чистой странице результаты близки, а в заголовке Qwen оказался лучше нас. Он правильно прочитал логотип, тогда как стилизованные буквы превратили наш вариант в "Hero Summoning 18 Vessels 1297 the Other World Was Peaceful". Главный промах Qwen — он также прочитал мелкие фуригана над именем, поэтому подпись гласит "Miyama Kaito Miyama Kaito".
Страница 2: страница-гэг
Шутка держится на том, какие морские существа имеют духов, поэтому важны каждое существительное и каждое «не».
- ウミウシの精霊もイカの精霊もいない («никаких духов морских слизней, никаких духов кальмаров тоже»). Qwen: "The spirit of the sea slug also exists. The spirit of the squid also exists." — прямо противоположное. IsManga сохранил смысл.
- 乗りかかった船ですしね — идиома в значении «мы уже зашли так далеко». Qwen: "It's a boat I was riding on". IsManga: "Since we've already embarked on this ship together".
Страница 3: насыщенная экшн-комедийная страница
Здесь Qwen проваливается. Он втискивает горизонтальный английский в высокие вертикальные баллоны, разбивая слова ("W-ho is it!?", "li-m-e"), и часто читает каждую колонку как отдельную строку. IsManga вписывает текст каждого баллона комиксовым шрифтом, подогнанным по размеру.
- 一石三鳥 (одним выстрелом убить трёх зайцев). Qwen: "kill two birds with one stone". IsManga: "three birds with one stone". Счёт важен: в следующей панели их уже четыре.
- 頭に白い布巻いた褐色でヒゲのおっさん!? Qwen: "Answer: From (1) N top = 6". IsManga: "A brown-skinned middle-aged man with a beard and a cloth wrapped around his head!?"
- Нарисованные от руки крики. Qwen: "persimmon", "mountain bird", "sacrifice". IsManga: "Nng-aaaaah! My head, gah!"
Скорость
Мы также замерили, сколько времени каждая модель тратила на возврат переведённой страницы.
| Модель | Время на страницу |
|---|---|
| IsManga | от 2 до 2,5 с |
| Qwen-MT-Image 2.0 | от 4,8 до 8,5 с |
IsManga работал в 2–4 раза быстрее, и на целой главе эта разница заметна.
Где мы ещё ошибаемся
Большинство наших неверных строк возникают по трём причинам:
- Звуковые эффекты. そっ (тихо двигаясь) стало "So?", а しぬぅう («Я умираю!») осталось транслитерированным вместо перевода.
- Имена. Мы придумали "Yuko" на странице 2 и записали один персонаж и как "Ufufu", и как "Yufufu".
- Стилизованный текст. Помимо логотипа на странице 1, один баллон на странице 3 повторил строку другого баллона, а 腐葉土 (лиственный перегной) стало "ripe magic leaves" — строкой, которую Qwen перевёл верно.
Этим мы займёмся дальше.
Попробовать
Три страницы — это не бенчмарк, но они показывают, где каждый инструмент находится сегодня. Чтобы попробовать IsManga на своей манге, установите расширение для Chrome или приложение Manga Translator с ismanga.com и откройте любую главу в оригинале.
Думаете о собственной ИИ-инфраструктуре вместо облачного API? Попробуйте наш калькулятор ROI, чтобы узнать, сколько можно сэкономить.


