Runway представи AI генератора на реалистично видео Gen-3 Alpha

Нюйоркският стартъп Runway миналата година пусна първия си модел с изкуствен интелект за генериране на видео, но оттогава работата му беше засенчена от такива мощни проекти като OpenAI Sora и Luma AI Dream Machine, представени миналата седмица. Сега компанията реши да отговори на конкурентите, като разказа за новия си модел Gen-3 Alpha.

Невронната мрежа Gen-3 Alpha е, както обещава разработчикът, „първата от предстоящата серия от модели, обучени от Runway върху нова инфраструктура, изградена за широкомащабно мултимодално обучение. Това ще бъдат AI модели, способни да „представят и симулират широк спектър от ситуации и взаимодействия, подобни на тези в реалния свят“ .

Новата система ви позволява да генерирате висококачествени, детайлни и изключително реалистични видеоклипове с дължина 10 секунди — те се отличават с широка гама от емоции в героите и движеща се камера при „заснемане“. Създаването на 5-секундно видео отнема 45 секунди, докато 10-секундните видеоклипове се появяват за 90 секунди. Компанията все още не е отворила общия достъп до новия модел, но в „следващите дни“, както уточнява техническият директор на Runway Анастасис Германидис, платените абонати на платформата ще могат да го използват (от $15 на месец или от $144 на година ), а след това и всички останали.

Моделът Gen-3 Alpha е „обучен съвместно на видео и изображения“ — „сътрудничество на интердисциплинарен екип от изследователи, инженери и художници“ — но компанията не разкрива произхода на всички материали от масива за обучение. „Имаме вътрешен изследователски екип, който наблюдава нашето обучение, и използваме внимателно подбрани вътрешни набори от данни, за да обучим нашите модели“ — обясни говорителят на Runway.

Компанията също така „си сътрудничи с водещи развлекателни и медийни организации за създаване на персонализирани версии на Gen-3„, които ще „генерират по-стилистично ориентирани и последователни герои и наред с други неща ще помогнат за насочване към конкретни артистични и наративни изисквания“ — казва разработчикът. Конкретни имена не са посочени, но е известно, че продуктите на Runway са били използвани в своите произведения от режисьорите на филми като „Всичко, навсякъде, наведнъж“ и „Народният жокер“. На сайта на компанията има формуляр за заявка, който компаниите, които се надяват на сътрудничество, могат да попълнят — за тях разработчикът ще подготви своя собствена версия на Gen-3 Alpha. Цената на този модел не е посочена.