Для того чтобы воспользоваться новой функцией Google Translate, пользователю необходимо сделать снимок текста при помощи камеры на мобильном устройстве. Фотография делается непосредственно через приложение. После этого пальцем на снимке нужно выделить часть текста, предназначенную для перевода, и указать язык, на котором сделана надпись, так как автоматическое распознавание языка оригинала в программе не предусмотрено. Приложение отправляет данные на сервер, откуда пользователю мгновенно приходит ответ.
По словам разработчиков, данная функция может оказаться весьма полезной для путешественников. Находясь в чужой стране, человек может сфотографировать указатель, дорожный знак или меню в ресторане, и моментально получить перевод интересующей его информации.
На данный момент возможность распознавания и перевода текста доступна для таких языков, как английский, немецкий, французский, испанский, итальянский, русский, португальский, польский, турецкий, голландский и чешский. По словам разработчиков Google, впоследствии они планируют «обучить» приложение и другим языкам.
На данный момент перевод текста по фотографии с Google Translate доступен владельцам мобильных телефонов на платформе Android 2.3 Gingerbread и выше. Также аналогичная функция была предусмотрена в разработанном в 2009 году приложении Google Goggles, также работавшем на платформе Android.