FRIDA, роботизирана ръка със залепена към нея четка за рисуване, използва изкуствен интелект, за да си сътрудничи с хората върху произведения на изкуството. Помолете FRIDA да нарисува картина и тя започва работа, поставяйки четка върху платното.
„Има една картина на жаба балерина, която според мен се получи много добре“
каза Питър Шалденбранд, доктор по компютърни науки в Института по роботика, който работи с FRIDA, изследвайки изкуствения интелект и креативността му.
„Наистина е глупаво и забавно, и мисля, че изненадата от това, което FRIDA генерира въз основа на моя принос, беше наистина интересно да се види.“
FRIDA, кръстена на Фрида Кало, означава Framework and Robotics Initiative for Developing Arts.
Потребителите могат да насочват FRIDA, като въведат текстово описание, изпратят други произведения на изкуството, за да вдъхновят нейния стил, или качат снимка, и я помолят да нарисува нейната представа.
Екипът експериментира и с други входни данни, включително аудио. Пуснаха „Dancing Queen“ на ABBA и помолиха ФРИДА да я нарисува.
„FRIDA е роботизирана система за рисуване, но не е художник. Тя не генерира идеи, а е система, с която един артист може да си сътрудничи. Художникът може да определи цели на високо ниво за FRIDA и след това тя да ги изпълни.“
каза Шалденбранд.
Роботът използва AI модели, подобни на тези захранващи инструменти като ChatGPT на OpenAI и DALL-E 2, които генерират съответно текст или изображение. FRIDA симулира как би нарисувала изображение с щрихи с четка и използва машинно обучение, за да оцени напредъка си, докато работи.
Крайните продукти на FRIDA са импресионистични и причудливи. Движенията на четката са смели. Липсва им прецизността, търсена толкова често в роботизираните начинания. Ако FRIDA направи грешка, тя я коригира, включвайки грешното петно боя в крайния резултат.
„FRIDA е проект, който изследва пресечната точка на човешкото и роботизираното творчество.“
каза Маккан.
FRIDA използва AI и машинно обучение няколко пъти по време на своя артистичен процес.
Първо, прекарва час или повече в учене как да използва четката си.
След това използва големи визуално-езични модели, обучени върху масивни набори от данни, които съчетават текст и изображения, извлечени от интернет, като предварително обучение за контрастен език-изображение, за да разбере входните данни.
Други инструменти за генериране на изображения, като DALL-E 2 на OpenAI, използват големи визуално-езични модели за създаване на цифрови изображения. FRIDA прави тази крачка напред и използва въплътената си роботизирана система за създаване на физически картини. Едно от най-големите технически предизвикателства при създаването на физическо изображение е намаляването на разликата между симулацията и реалността, разликата между това, което FRIDA композира в симулация, и това, което рисува върху платното.
Тя използва идея, известна като real2sim2real. Действителните движения на четката на робота се използват за обучение на симулатора да отразява и имитира физическите възможности и материалите за рисуване.
След като човешкият потребител на FRIDA е посочил концепция на високо ниво за картината, която иска да създаде, роботът използва машинно обучение, за да направи своята симулация и да разработи план за създаването на картината, за постигане на целите на потребителя. FRIDA показва цветова палитра на компютърен екран, която потребителя да смеси и да предостави на робота. В момента се разработва автоматично смесване на бои, ръководено от Jiaying Wei, магистър в Училището по архитектура, с Eunsu Kang, преподавател в отдела за машинно обучение.
Въоръжена с четка и боя, FRIDA ще направи първите си щрихи. От време на време роботът използва камера отгоре, за да заснеме изображение на картината. Изображението помага на FRIDA да оцени напредъка си и да прецизира плана си, ако е необходимо. Целият процес отнема часове.
„Хората се чудят дали FRIDA ще вземе работните места на артисти, но основната цел на проекта е точно обратното. Искаме наистина да насърчим човешкото творчество. Например, аз лично исках да бъда художник. Сега мога да си сътруднича с FRIDA, за да изразя идеите си в живописта.“
каза Жан О, един от членовете на факултета, който си сътрудничи с Шалденбранд.
Всичко важно от света на технологиите, директно в пощата ти.
С абонирането приемате нашите Условия и Политика за поверителност. Може да се отпишете с един клик по всяко време.
Коментирайте статията в нашите Форуми. За да научите първи най-важното, харесайте страницата ни във Facebook, и ни последвайте в Google Новини, TikTok, Telegram и Viber или изтеглете приложението на Kaldata.com за Android, iPhone, Huawei, Google Chrome, Microsoft Edge и Opera!
