Google ще използва AI в YouTube: дублажите ще станат по-реалистични

Преди време Google реализира система на платформата YouTube за автоматично дублиране на видеоклиповете на родния език на потребителя, за да увеличи ангажираността на аудиторията, тъй като консумацията на забавно или образователно съдържание на разбираем език е много по-лесно и по-приятно. И сега ИТ-гигантът иска да достигне съвсем различно ниво, като използва собствената си, базирана на изкуствен интелект, технология, което не само ще преведе речта на разбираем за потребителя език, но и ще синхронизира движенията на устните на хората в кадъра, което прави видеоклиповете по-привлекателни и автентични.

Будика Котахачи, ръководител на отдела за автоматично дублиране на YouTube, говори подробно за новата технология по време на интервю за Digital Trends. Например, той съобщи, че новата система прави сложни промени на ниво пиксел, за да трансформира устата на говорителя, осигурявайки по-голям реализъм във видео дублажа. Тази система работи въз основа на специален изкуствен интелект, който може да разпознае фините нюанси на структурата на лицето на човек, включително и триизмерно възприемане на устните, зъбите и различни изражения на лицето на автора на съдържанието. И като се има предвид, че Google доста добре владее технологията за текстово преобразуване към видео чрез модела Veo 3, можем да приемем, че новата технология ще работи много успешно.

Засега обаче тази технология има определени ограничения. Първо, системата поддържа синхронизация на устните само в резолюция 1080p и AI все още не може да обработва клипове в резолюция 4K. По-точно, най-вероятно, това просто изисква значително повече ресурси, а Google все още не е готов да ги разпредели на функцията, която в момента просто се разработва. Второ, устните се поддържат само на английски, немски, френски, португалски и испански език, въпреки че в бъдеще компанията планира да разшири поддръжката за повече от 20 езика, които в момента се поддържат от автоматичния дублаж на YouTube.

И трето, Google все още не е готов да посочи конкретни дати за стартирането на това нововъведение. Но най-вероятно новата функция ще бъде стартирана като част от пилотен проект с малка група автори — компанията направи същото с автоматичната система за дублиране. В същото време, според Android Authority, функцията за устните може да бъде платена, въпреки че в момента не е напълно ясно как точно ще бъде монетизирана. Може би ще е достъпен само за собствениците на Premium абонаментите.

Наскоро YouTube получи напълно нов интерфейс на плейъра, който е видим за всички платформи по целия свят. Основната концепция на промените е постигане на по-изчистен и приятен за използване от потребителите интерфейс.