ИИ изпреварва учените в генерирането на иновативни идеи за изследвания

Големите езикови модели (LLM) доказаха, че са в състояние да генерират нови идеи за изследвания на експертно ниво. Нещо повече, според ново проучване тези идеи са по-оригинални и интересни от предложените от експертите.

Това поставя под въпрос уникалността на човешкия интелект в научните иновации и открива нови хоризонти за развитието на ИИ в научната общност.

Напредъкът в областта на големите езикови модели предизвика вълна от ентусиазъм сред изследователите. Оказа се, че ИИ-моделите като ChatGPT на OpenAI и Claude на Anthropic са способни самостоятелно да генерират и потвърждават нови научни хипотези. Смяташе се, че създаването на нови знания и правенето на научни открития са изключителен привилегия на хората, за разлика от механичното комбиниране на знания от учебни данни от ИИ.

Въпреки това, след като вече измести хората в областта на художественото изразяване, музиката и програмирането, сега ИИ се насочва към науката, показвайки способността си да генерира идеи за научни изследвания – средно повече нови идеи, отколкото са предложили учените.

За да се провери тази хипотеза, беше проведено проучване в областта на обработката на естествен език (NLP). NLP е област от ИИ, която се занимава с комуникацията между хора и ИИ на език, който и двете страни могат да разберат. Тя обхваща не само основния синтаксис, но и нюансите на езика, разбирането на контекста, а напоследък дори вербалния тон и емоционалните нюанси на речта. В проучването участват 100 експерти по NLP (доктори и постдокторанти от 36 различни института), които участват в своеобразно научно състезание с базирани на LLM „мисловни агенти“. Целта беше да се установи чии идеи за изследвания са по-оригинални, интересни и осъществими.

За чистотата на експеримента 49 експерти формулираха идеи по 7 конкретни теми в областта на NLP, докато специално обучен от изследователите изкуствен интелект генерираше идеи по същите теми. За да се мотивират участниците в мозъчната атака да генерират качествени идеи, за всяка концепция, предложена от експертите, бяха платени по 300 долара, а всяка от петте най-добри човешки идеи получи допълнителни 1000 долара. След приключването на работата LLM беше използван за стандартизиране на стиловете на писане на всеки документ, като същевременно беше запазено оригиналното съдържание, за да се изравнят условията и да се направи изследването възможно най-безпристрастно.

След това всички подадени материали бяха прегледани от 79 рецензенти, които оцениха сляпо всички идеи за научни изследвания. Експертната група направи 298 прегледа, като всяка идея получи между два и четири независими прегледа.

Резултатите бяха поразителни. Идеите, генерирани от изкуствен интелект, получиха статистически значимо по-високи оценки по критериите за новост и очарование, отколкото човешките идеи. Същевременно идеите на ИИ получиха малко по-ниски оценки по критерия за осъществимост и малко по-високи по критерия за ефективност в сравнение с човешките идеи, въпреки че тези разлики не бяха статистически значими.

Проучването разкри и някои слабости в работата на ИИ, като например липсата на разнообразие на идеите. Дори когато ИИ получава ясни инструкции да не се повтаря, той бързо ги забравя. Освен това ИИ не е бил в състояние последователно да тества и оценява идеите и е получил ниски оценки за съгласие с човешките преценки. Важно е да се отбележи, че проучването разкри и някои ограничения в методологията. По-специално, оценяването на „оригиналността“ на дадена идея дори от група експерти остава субективно, така че се планира по-обстойно проучване, в което идеите, генерирани както от ИИ, така и от хора, са изцяло оформени като проекти, което позволява по-задълбочено проучване на тяхното въздействие в реални сценарии.

Въпреки това първоначалните резултати от проучването със сигурност са впечатляващи.

Понастоящем изкуственият интелект е най-бързо развиващата се технология, която човечеството някога е виждало и затова е разумно да се очаква, че много от неговите недостатъци ще бъдат отстранени през следващите няколко години. Много изследователи на ИИ смятат, че човечеството се приближава към раждането на свръхинтелигентност – моментът, в който ИИ с общо предназначение ще надмине човешкия опит в почти всяка област. Способността на ИИ да генерира по-оригинални и убедителни идеи от учените може да доведе до преосмисляне на процеса на научни открития и ролята на човека в него.