Yandex jako pierwszy na świecie zaprezentował prototyp automatycznego tłumaczenia wideo lektora. Użytkownicy mogą oglądać filmy w obcym języku z rosyjskim głosem. Firma planuje sprzedawać technologię klientom korporacyjnym, ponadto nowy rozwój pomoże zmniejszyć dystans do Google i wesprze wzrost udziału Yandex Browser w Rosji 0 akcji
Co się stało?
Yandex zaprezentował w swojej przeglądarce prototyp tłumaczenia maszynowego: teraz technologia umożliwia oglądanie niektórych filmów w języku angielskim z tłumaczeniem poza ekranem na język rosyjski. Pracownicy Yandex zaczęli myśleć o nowej technologii jesienią 2020 roku, a rozwój rozpoczęli na początku 2021 roku: w marcu firma otrzymała pierwszy działający prototyp. Nowa technologia nie ma odpowiednika na świecie, według firmy łączy w sobie tłumaczenie maszynowe, biometrię, rozpoznawanie mowy i technologie syntezy. Jak na razie Yandex nie ma pełnoprawnego produktu, który pozwoli na tłumaczenie dowolnego wideo w Internecie, ale do końca 2021 roku firma doda do niego nowe funkcje – tłumaczenie wideo na żądanie, dodatkowe funkcje itp.
Co to oznacza?
Yandex tworzy produkty, z których korzystają dziesiątki milionów użytkowników – na przykład Przeglądarka, Mapy, Wyszukiwarka itp. Firma udostępnia je za darmo, czasami pokazuje reklamy. Yandex wykorzystuje technologię w swoich masowo produkowanych produktach, aby przyciągnąć do nich nowych użytkowników.
Również poszukiwane technologie stworzone przez Yandex są przenoszone przez firmę do Yandex.Cloud, a ten dział już sprzedaje je klientom korporacyjnym i biznesowym – powiedział szef Yandex Browser Roman Iwanow. Na przykład Yandex.Cloud sprzedaje klientom b2b technologie Translator lub technologię rozpoznawania i syntezy mowy Yandex.SpeechKit. „Myślę, że technologia tłumaczenia wideo będzie również poszukiwana przez klientów Yandex.Cloud” – przewiduje Ivanov.
Dlaczego muszę o tym wiedzieć?
Zbliżenie
Firmy na całym świecie osobno rozwijają technologie, które Yandex wykorzystał w tłumaczu lektora. Google automatycznie wygenerował napisy w filmach na YouTube, a w smartfonach z Androidem w ustawieniach systemu operacyjnego możesz włączyć funkcję automatycznego generowania napisów dla dowolnego wideo odtwarzanego przez gadżet.
Niedawno amerykańska firma Timekettle ogłosiła zbiórkę pieniędzy na platformie crowdfundingowej Indiegogo na słuchawki bezprzewodowe WT2 Edge z tłumaczem symultanicznym w 40 językach i zebrała prawie milion euro. Na razie nie wiadomo, czy produkt spełnia jego opis, firma obiecuje zaprezentować go inwestorom w sierpniu 2021 roku.
Na początku lipca 2021 roku deweloper o nicku tgaru wprowadził rozszerzenie do przeglądarki YouTube SubSound , który automatycznie odczytuje napisy w YouTube. Bezpłatne rozszerzenie mówi napisami wybranymi przez użytkownika do filmu, obsługuje języki rosyjski, angielski, japoński, chiński, francuski i inne.
Wiodąca chińska firma w dziedzinie sztucznej inteligencji iFlytek produkuje między innymi przenośne translatory, które potrafią np. przetłumaczyć rosyjski na chiński i odwrotnie. Analitycy Goldman Sachs zauważają, że firma spodziewa się osiągnąć przychody w wysokości 100 miliardów juanów (15 miliardów dolarów) do 2025 roku, w porównaniu z 13 miliardami juanów (2 miliardy dolarów) w 2020 roku. Chwalą również możliwości technologii sztucznej inteligencji iFlytek w obliczu ich rosnącej penetracji w Chinach.
Trudność w stworzeniu technologii symultanicznego tłumaczenia wideo polega na tym, że proces tłumaczenia jest etapowy. Musisz rozpoznać mowę, przetłumaczyć ją na tekst, następnie przetłumaczyć tekst na inny język, a następnie skopiować, aby płeć mówcy i długość dubbingu pasowały. Iwanow nie wyklucza, że Google za jakiś czas wprowadzi podobną technologię. „Mieliśmy po prostu szczęście, że byliśmy pierwsi” – dodał.
Prosperowanie podczas pandemii: jakie technologie są bardziej popularne w 2020 roku
Dla inwestora
Konsumpcja treści wideo stale rośnie na całym świecie. Potencjalnie automatyczne tłumaczenie i dubbing filmów wideo może być bardzo pożądane wśród użytkowników, zwłaszcza jeśli Yandex rozszerzy bazę dostępnych języków, mówi Artem Mikhailin, analityk w VELES Capital. Jeśli technologia zacznie odnosić poważne sukcesy, największe światowe firmy IT szybko stworzą podobne narzędzia i wdrożą je do swoich zasobów.
Oprócz tego, że dla Yandex wprowadzenie nowej technologii jest image story stanie się dla firmy dodatkowym narzędziem do napędzania ruchu. Nowa funkcja może stać się jednym z czynników, które powinny wspierać wzrost udziału Yandex Browser w Rosji – mówi Oksana Musyatsa, analityk Sova Capital. Jeśli w grudniu 2020 r. udział Yandex Browser w Rosji na wszystkich urządzeniach wynosił 19,5%, to w czerwcu 2021 r. wzrósł do 20,2%. Jednocześnie przeglądarka Google Chrome już od czterech lat zajmuje ponad 40% rynku.