Тази нова ИИ техника може да промени начина, по който виждаме света

Представете си, че винаги можете да надникнете зад ъгъла или да погледнете през всичко, което пречи на видимостта ви. Сякаш имате рентгеново зрение. Сега това може да е възможно благодарение на нови изследвания.

Група учени от Масачузетския технологичен институт и Университета „Райс“ разкриха невероятна технология за компютърно зрение, която може да промени начина, по който виждаме света. Скоро може да живеем в свят, в който лъскавите предмети се превръщат в необикновени „камери“, които ни позволяват да гледаме заобикалящата ни среда през техните неповторими лещи.

Тяхната технология работи чрез заснемане на изображения на конкретен обект от различни ъгли. След това превръща повърхността му във виртуален сензор, който улавя отраженията. Тогава системата с изкуствен интелект картографира тези отражения, като това ѝ позволява да прецени дълбочината на изображението и да разкрие нови перспективи, които досега са били скрити от погледа.

„Демонстрирахме, че всяка повърхност може да бъде превърната в сензор с помощта на тази формула, която трансформира обектите във виртуални пиксели и сензори. Тази техника има огромен потенциал в множество домейни“, обяснява Кушагра Тивари, съавтор на изследването.

Изследователите, включително съавторът Акшат Дейв от Университета „Райс“, Никхил Бехари, Цофи Клингхофър, Ашок Веерарагхаван и старши автор Рамеш Раскар, са готови да представят своите новаторски открития на престижната Конференция за компютърно зрение и разпознаване на модели.

Има ли някакви практически начини за използване на тази технология?

Приложенията на технологията са практически неограничени, тъй като тя дава възможност на потребителите наистина да виждат зад ъгъла и отвъд всичко, което пречи на видимостта им. Една област, в която тази технология може да бъде наистина трансформираща, са автономните превозни средства.

Представете си самоуправляваща се кола, която използва отражения от улични лампи или сгради, покрай които минава, за да разбере заобикалящата я среда, дори когато е възпрепятствана от паркиран камион. Това не е просто футуристично – това е практично и може да представи по нов начин безопасността и навигацията на автономния транспорт.

Но има и предизвикателства, защото реалният живот не е толкова прост, колкото криминалните сериали, в които детективите магически подобряват замъглените отражения, за да разкриват престъпления. Отраженията могат да бъдат изкривени и да предлагат ограничен поглед върху света. Как изследователите са преодолели предизвикателствата, породени от отраженията? Те разработиха тристепенна техника, наречена ORCa (Objects as Radiance-Field Cameras – Обекти като камери с радиационно поле).

Първо, те заснемат множество изображения на обект от различни ъгли, улавяйки различни отражения върху лъскавата му повърхност. След това те трансформират повърхността на обекта във виртуален сензор, който улавя светлина и отражения. И това е – лъскавият обект сега е „камера“.

И накрая, системата използва виртуалните пиксели на повърхността на обекта, за да пресъздаде 3D среда от гледна точка на обекта.

Суперсилите на ORCa не спират дотук. Анализирането на множество отражения може да оцени дълбочината между лъскавия обект и другите елементи в сцената. Системата дори подсказва формата на обекта. Също така, благодарение на своето 5D представяне на полето на излъчване на сцената, тя може да разкрие скрити функции, невидими заради различни препятствия. Сякаш виждаш света през изцяло нов поглед!

Изследователите сега проучват приложения в изображенията с дрон и допълнително подобряват възможностите на системата чрез включване на допълнителни визуални знаци. Тази новаторска техника е готова да трансформира компютърното зрение и да отключи нови измерения на възприятието, разширявайки разбиране ни за света, който ни заобикаля.