Яндекс Переводчик по фото онлайн

Уже второй год доступна веб-версия Яндекс Переводчика по фото.

В чем суть

Вы загружаете картинку или фото на сайт, а Яндекс распознает на ней текст и переводит его.

Например, можно сфотографировать меню ресторана,  или же график с непонятными подписями. Или вывеску. Или отсканированный текст. Можно сфотографировать заметку в журнале на чужом языке и загрузить для распознавания и перевода. Переводчик не очень требователен к качеству фото, подойдет снимок, сделанный под углом, или растянутый.

Заметила, что фотография, сделанная камерой телефона Samsung распознается гораздо хуже, чем фото с нормальной камеры или айфона. Дело в качестве оптики и разрешении снимка. С Samsung удается распознать только крупные буквы.

С каких языков распознаются картинки

С английского, русского, испанского, итальянского, немецкого, польского, португальского, турецкого, украинского, французского, китайского, норвежского, шведского,  датского и чешского – всего с 15 языков.

На какие языки переводятся картинки

Практически на любые, сейчас в проекте 94 языка.

Перевод картинок доступен и в мобильной версии онлайн, а также есть приложения под iOS и Android.

Как пользоваться – общий алгоритм

  1. Зайдите на Яндекс.Переводчик.
  2. Выберите «Картинки».
  3. Загрузите картинку. Можно выбрать файл через проводник или просто перетащить его на активную вкладку браузера, где открыт Яндекс Переводчик.
    Поддерживаются форматы изображений  jpeg, png, bmp и gif.
    Поддерживаются форматы изображений  jpeg, png, bmp и gif.
  4. Выберите язык оригинала и язык перевода. Впрочем, доступно и автоопределение языка оригинала.
  5. Щелкните «Открыть в переводчике».
    Желтым цветом подсветился распознанный текст
    Желтым цветом подсветился распознанный текст
  6. Слева появится текст, распознанный с картинки, а справа – перевод.

Нюансы использования или как улучшить качество перевода

Выбор как переводить
Выбор как переводить

Обратите внимание на опцию «Слова», «Линии» и «Блоки». Это немаловажная настройка, влияющая на качество перевода. Она появляется после того, как вы загрузили картинку.

  • «Слова» — то, что написано на картинке, воспринимается как отдельные слова. И переводится пословно.
  • «Линии» — текст переводится построчно.
  • «Блоки» — текст переводится как единое целое.

На моей картинке строка, так что я выбираю «Линии». А по умолчанию все перевелось бы по отдельному слову, что было бы неправильно. Ведь я перевожу предложение «Минздав устал предупреждать» целиком, а не пословно.

А если бы я переводила график, где к оси X и Y приписаны непонятные слова, то выбирала бы опцию «Слова».

А сфотографированный абзац из книги, конечно, следовало бы переводить как блок.

Сравните, как переводится надпись на картинке при выборе опции «Слова» и «Линии»:

Результат пословного и построчного перевода
Результат пословного и построчного перевода

Альтернативы переводчику

Основной конкурент Яндекс.Переводчика – Google Переводчик. Но он хуже распознает русский язык. И для того, чтобы им воспользоваться, надо выполнить хитрые действия:

  1. Загрузить картинку на  drive.google.com и щелкнуть файл правой кнопкой мыши.
  2. Выбрать «Открыть с помощью» —>  «Google Документы».

Это стадия распознавания, которая преобразует картинку в текст.

А дальше надо полученный текст перевести онлайн в Google Переводчике. Это если вы с компьютера.

С мобильного же устройства все гораздо проще: есть куча мобильных приложений, поддерживающих перевод с камеры, среди них  переводчики от того же Яндекс,  Abbyy, Google и Майкрософт.

Как работает перевод с картинки от Яндекс.Переводчика

Работа делится  два этапа: распознавание изображений и перевод текста. И большую помощь оказывает нейронная сеть – самообучающаяся система. Чем больше картинок она распознает и переводит, тем лучше знает, как правильно делать.

Раньше для перевода текста использовались жесткие алгоритмы, которые сопоставляли исходное слово переводу в соответствии со словарем и правилами грамматики. Результат был ужасный.

Дальше в игру вступил статистический перевод – когда в переводе участвовал огромный массив уже готовых парных текстов оригинал-перевод. Алгоритм искал по нему вычислял наиболее вероятный результат перевода какой-либо фразы или слова. И весь текст собирался из таких вероятностных кусочков. Яндекс использовал статистическую систему с момента запуска.

Теперь же участвует нейронная сеть,  которая способна самообучаться и хорошо справляется с обработкой естественных данных. А текст и картинки – естественные данные. Нейронная сеть переводит предложения целиком, не дробя их на отдельные фразы и слова.

Поскольку в некоторых случаях лучше работает статистический перевод, а в некоторых – нейронная сеть, используется и то, и другое. Это гибридная система перевода, которая используется сейчас.

Качество существенно улучшилось. Встречаются, конечно, ляпы, но все же это шаг вперед по сравнению с тем, что было 10 лет назад.

 

Добавить комментарий

Ваш e-mail не будет опубликован. Обязательные поля помечены *