Повече от половината от отговорите на ChatGPT на въпроси за програмиране са грешни

Най-четени

Емил Василев
Емил Василев
Емил Василев редовно превежда сложни научни теми на достъпен език — от въпроси като „Какво е имало преди Големия взрив?" до практическото приложение на биотехнологиите в лечението на болести. Тази комбинация от технологична и научна журналистика го прави един от най-разностранните автори в екипа на Kaldata.

Напоследък, на фона на шума около изкуствения интелект (ИИ) програмистите все по-често се обръщат към чатботове, базирани на ИИ като ChatGPT на OpenAI за помощ при писането на код. Това от своя страна доведе до спад в трафика към Stack Overflow, който беше принуден да съкрати почти 30% от персонала си миналата година.

Оказва се обаче, че е твърде рано да се разчита на ИИ за писане на код. Според проучване на екип от експерти от университета „Пърдю“, представено този месец на конференцията Computer-Human Interaction, 52% от отговорите за програмиране, генерирани от ChatGPT са били грешни.

В проучването програмистите от „Пърдю“ са разгледали повече от 517 въпроса в Stack Overflow и са анализирали отговорите на ChatGPT

„Установихме, че 52% от отговорите на ChatGPT съдържат погрешна информация, 77% от отговорите са по-многословни от човешките отговори, а 78% от отговорите се характеризират с различна степен на несъответствие с човешките отговори.“

казват изследователите

Изследователският екип е направил и лингвистичен анализ на 2000 произволно избрани отговора на ChatGPT и е установил, че те са „по-формални и аналитични“, но също така отразяват „по-малко негативни настроения“ – нещо, с което обикновено се отличава изкуственият интелект.

Коментирайки резултатите от проучването, изданието Futurism изрази загриженост, че много програмисти предпочитат да се обръщат за помощ към ChatGPT. Изследователите от „Пърдю“ са анкетирали 12 програмисти и са установили, че 35% от анкетираните предпочитат да разчитат на отговорите на ChatGPT и в 39% от случаите не забелязват грешки в отговорите, генерирани от ИИ.

Изследователите допускат, че потребителите се подкупват от любезността, проявявана от изкуствения интелект.

„Последвалите интервюта разкриха, че вежливият език, ясно формулираните отговори в стил учебник и пълнотата са някои от основните причини, поради които отговорите на ChatGPT изглеждат по-убедителни, така че участниците се отпускат и не забелязват някои грешки в отговорите на ChatGPT.“

съобщават те

АбонаментВсичко важно от света на технологиите, директно в пощата ти.

С абонирането приемате нашите Условия и Политика за поверителност. Може да се отпишете с един клик по всяко време.


Коментирайте статията в нашите Форуми. За да научите първи най-важното, харесайте страницата ни във Facebook, и ни последвайте в Google Новини, TikTok, Telegram и Viber или изтеглете приложението на Kaldata.com за Android, iPhone, Huawei, Google Chrome, Microsoft Edge и Opera!

Нови ревюта

Подобни новини