Яндекс улучшает перевод текстов на фото: новое решение с нейросетями и YandexGPT

Яндекс внедрил новую технологию, использующую нейросети для перевода текста на изображениях. Улучшенная визуализация и модель YandexGPT обеспечивают точные переводы, сохраняющие стиль и игру слов. Это новшество доступно в их приложениях и скоро появится в Умной камере.

Яндекс представляет обновлённую технологию перевода текста на изображениях

Яндекс представил обновленную технологию, использующую нейросети для перевода текста, расположенного на изображениях.

Данное новшество служит отличным инструментом для быстрого перевода меню в ресторанах или расшифровки сложной иностранной технической документации. Благодаря усовершенствованной визуализации, переведенные тексты теперь легче воспринимаются и максимально сохраняют оригинальный вид. Обновление доступно в приложениях Переводчик и Браузер, и вскоре будет интегрировано в Умную камеру.

Совершенно новая модель YandexGPT способна распознавать стиль исходного текста и сохранять в нём игру слов, что крайне полезно при переводе рекламных слоганов или заголовков в прессе.

Теперь переводы становятся более точными и контекстуальными, что улучшает качество как кратких, так и детальных текстов. Эта технология работает с английским языком и позволяет выполнять переводы на русский, предоставляя пользователям новые возможности.

Улучшенная визуализация перевода

Для улучшения удобства чтения текста на изображениях Яндекс значительно усовершенствовал визуализацию перевода. Технология сначала удаляет оригинальный текст с изображения, а затем накладывает переведенный текст, подбирая оптимальный шрифт, размер и цвет. Благодаря этим улучшениям, переведенные изображения выглядят естественным и контрастным. Даже если на фотографии видна лишь часть слова, система способна распознать его значение, что обеспечивает большую точность перевода.