Google Translate вече превежда от 27 езика чрез камерата на смартфона

Мобилната версия на Google Translate вече превежда в реално време от 27 езика, използвайки вградените камери на устройствата, съобщава британският вестник Observer.

Достатъчно е да насочите камерата на телефона си към текста, който искате да бъде преведен, и веднага ще забележите трансформацията в желания от вас език. Функцията не се нуждае от интернет връзка.

Приложението е достъпно от доста време, но съвместимостта му бе доста ограничена – 7 езика. След промяната моменталните преводи са възможни на 27, сред които е и българският.

Ако пък решите да направите снимка на надписа, вместо да чакате превод в реално време, опциите се разширяват до 37 езика.

Как работи?

Първо. Приложението трябва да изчисти неяснотите в изображението и да идентифицира текста. Когато засече „петна от пиксели”, оцветени в един и същи цвят, Translate знае, че те са букви. Когато тези петна са близко едно до друго, технологията разбира, че става въпрос за изречения, които трябва да прочете.

Второ. Приложението трябва да разпознае всяка отделна буква. Именно тук личат усилията на компанията.

„Използваме сложна мрежа, която учим кои петна са букви и кои не, за да може тя да разпознава различните символи”, обяснява в блога си Отавио Гуд, софтуерен инженер в Google.

Учените трябвало да обучат програмата да работи не само с ясни букви, но и с размазани. „В реалния свят буквите се изменят под влиянието на прах, петна и отражения”, пише Гуд.

Третата стъпка е проверка на разпознатите букви в речника, за да бъде генериран преводът, извършван с такава точност, че дори програмата да обърка буквата S с числото 5, думата пак е лесно разпознаваема.

Най-накрая преведеният текст се нанася върху непреведения (оригиналното изображение) в същия стил.

„Това е възможно, тъй като вече сме открили и прочели буквите в кадъра и знаем къде точно се намират. Виждаме и цветовете около тях и можем да използваме тази информация, за да изтрием оригиналния текст и да наложим превода отгоре, като запазим оригиналния фон”, обяснява инженерът.

Версията на приложението е налична както за Android, така и за iOS.