IsManga против Qwen-MT-Image 2.0: три страницы манги бок о бок

Мы прогнали три необработанные японские страницы манги через Qwen-MT-Image 2.0 и IsManga и оценили все 41 строку. IsManga дал вдвое больше верных ответов и работал в 2–4 раза быстрее.
B

3 мин чтения

IsManga против Qwen-MT-Image 2.0: три страницы манги бок о бок

Перевод страницы манги — это больше, чем перевод текста. Инструмент должен найти каждый баллон, прочитать вертикальный японский текст (включая рукописные надписи), перевести его с учётом контекста, стереть оригинал и вписать английский текст обратно.

Мы прогнали три необработанные японские страницы через Qwen-MT-Image 2.0, модель для перевода изображений от Alibaba, и через нашу собственную модель IsManga, после чего оценили все 41 строку диалога. Ни один из вариантов не редактировался вручную.

Точность

Каждая строка оценивалась как верная, с незначительной ошибкой (смысл сохраняется), неверная или оставленная на японском. Мелкие звуковые эффекты не учитывались.

41 строкаIsMangaQwen
Верно2713
Незначительная ошибка58
Неверно715
Оставлено на японском или транслитерировано25

IsManga дал вдвое больше верных строк, и разрыв растёт по мере усложнения страниц.

Страница 1: спокойная страница-открытие

Исходная японская первая страница из I Got Caught Up in a Hero Summoning, but the Other World Was Peaceful
Из I Got Caught Up in a Hero Summoning, but the Other World Was Peaceful.
Первая страница в переводе Qwen-MT-Image 2.0 и IsManga
Верные строки: IsManga 5 из 7, Qwen 3 из 7.

На чистой странице результаты близки, а в заголовке Qwen оказался лучше нас. Он правильно прочитал логотип, тогда как стилизованные буквы превратили наш вариант в "Hero Summoning 18 Vessels 1297 the Other World Was Peaceful". Главный промах Qwen — он также прочитал мелкие фуригана над именем, поэтому подпись гласит "Miyama Kaito Miyama Kaito".

Страница 2: страница-гэг

Исходная японская страница-гэг о морских существах-духах
Исходная страница.
Страница-гэг в переводе Qwen-MT-Image 2.0 и IsManga
Верные строки: IsManga 7 из 11, Qwen 4 из 11.

Шутка держится на том, какие морские существа имеют духов, поэтому важны каждое существительное и каждое «не».

  • ウミウシの精霊もイカの精霊もいない («никаких духов морских слизней, никаких духов кальмаров тоже»). Qwen: "The spirit of the sea slug also exists. The spirit of the squid also exists." — прямо противоположное. IsManga сохранил смысл.
  • 乗りかかった船ですしね — идиома в значении «мы уже зашли так далеко». Qwen: "It's a boat I was riding on". IsManga: "Since we've already embarked on this ship together".

Страница 3: насыщенная экшн-комедийная страница

Исходная японская экшн-комедийная страница из Tsukimichi: Moonlit Fantasy
Из Tsukimichi: Moonlit Fantasy.
Экшн-комедийная страница в переводе Qwen-MT-Image 2.0 и IsManga
Верные строки: IsManga 15 из 23, Qwen 6 из 23.

Здесь Qwen проваливается. Он втискивает горизонтальный английский в высокие вертикальные баллоны, разбивая слова ("W-ho is it!?", "li-m-e"), и часто читает каждую колонку как отдельную строку. IsManga вписывает текст каждого баллона комиксовым шрифтом, подогнанным по размеру.

  • 一石三鳥 (одним выстрелом убить трёх зайцев). Qwen: "kill two birds with one stone". IsManga: "three birds with one stone". Счёт важен: в следующей панели их уже четыре.
  • 頭に白い布巻いた褐色でヒゲのおっさん!? Qwen: "Answer: From (1) N top = 6". IsManga: "A brown-skinned middle-aged man with a beard and a cloth wrapped around his head!?"
  • Нарисованные от руки крики. Qwen: "persimmon", "mountain bird", "sacrifice". IsManga: "Nng-aaaaah! My head, gah!"

Скорость

Мы также замерили, сколько времени каждая модель тратила на возврат переведённой страницы.

МодельВремя на страницу
IsMangaот 2 до 2,5 с
Qwen-MT-Image 2.0от 4,8 до 8,5 с

IsManga работал в 2–4 раза быстрее, и на целой главе эта разница заметна.

Где мы ещё ошибаемся

Большинство наших неверных строк возникают по трём причинам:

  • Звуковые эффекты. そっ (тихо двигаясь) стало "So?", а しぬぅう («Я умираю!») осталось транслитерированным вместо перевода.
  • Имена. Мы придумали "Yuko" на странице 2 и записали один персонаж и как "Ufufu", и как "Yufufu".
  • Стилизованный текст. Помимо логотипа на странице 1, один баллон на странице 3 повторил строку другого баллона, а 腐葉土 (лиственный перегной) стало "ripe magic leaves" — строкой, которую Qwen перевёл верно.

Этим мы займёмся дальше.

Попробовать

Три страницы — это не бенчмарк, но они показывают, где каждый инструмент находится сегодня. Чтобы попробовать IsManga на своей манге, установите расширение для Chrome или приложение Manga Translator с ismanga.com и откройте любую главу в оригинале.

Думаете о собственной ИИ-инфраструктуре вместо облачного API? Попробуйте наш калькулятор ROI, чтобы узнать, сколько можно сэкономить.

  • #ai-translation
  • #manga-translation
  • #qwen
  • #model-comparison
  • #raw-manga