Компанията майка на TikTok, ByteDance, представи ИИ-инструмента за създаване на 3D съдържание Seed3D 1.0, който може да трансформира едно 2D изображение в пълноценен 3D модел на симулационно ниво, допълнен с подробна геометрия, фотореалистични текстури и физически базирани материали за рендериране (PBR), които отчитат реалните свойства на отражението, пречупването и разсейването на светлината.
Според компанията, базирана на архитектура за дифузионен преобразувател (Diffusion Transformer (DiT)), съчетаваща свойствата на дифузионните модели и трансформърите, Seed3D 1.0 превъзхожда конкурентите си както с отворен, така и със затворен код по качество на текстурата и геометрична точност. Използвайки само 1,5 милиарда параметъра, Seed3D 1.0 превъзхожда дори по-големи модели, като Hunyuan3D 2.1 с 3 милиарда параметъра.
Ключовата особеност на този нов ИИ-инструмент е комбинацията от мултимодален дифузионен преобразувател (Multimodal Diffusion Transformer, MMDiT) и стратегията за поетапно генериране. Първо, системата анализира изображението, използвайки визуално-езиков модел (Vision-Language Model, VLM), за да извлече параметрите на обекта и пространството. След това, за всеки локализиран обект, Seed3D 1.0 синтезира съответната геометрия и материали. Крайната сцена се сглобява чрез позициониране на всеки генериран обект според пространствената конфигурация, предвидена от VLM. Тази структура позволява генерирането на сцени в различни мащаби, от помещения като офиси до мащабни градски сцени.
Съобщава се, че Seed3D 1.0 осигурява съгласуваност на текстурите в различни перспективи. Вместо да използва стандартни текстури, ИИ-инструментът създава материали, които са съгласувани по вид от всички ракурси, осигурявайки както реализъм, така и структурна точност за използване на ниво симулация.
Компанията отбелязва, че създадените със Seed3D модели могат да бъдат директно интегрирани в симулационни платформи като Isaac Sim за обучение на изкуствен интелект.
Всичко важно от света на технологиите, директно в пощата ти.
С абонирането приемате нашите Условия и Политика за поверителност. Може да се отпишете с един клик по всяко време.
Коментирайте статията в нашите Форуми. За да научите първи най-важното, харесайте страницата ни във Facebook, и ни последвайте в Google Новини, TikTok, Telegram и Viber или изтеглете приложението на Kaldata.com за Android, iPhone, Huawei, Google Chrome, Microsoft Edge и Opera!
