Изкуствен интелект постави по-точна диагноза от двама истински лекари

Ново проучване разглежда как големите езикови модели функционират в различни медицински контексти, включително реални случаи от спешни отделения, където AI модел се е оказал по-точен от лекарите.

Проучването, публикувано в списание Science е проведено от екип изследователи под ръководството на лекари и компютърни специалисти от Харвардския медицински факултет и Медицинския център „Бет Израел“. Изследователите проведоха редица експерименти, за да сравнят AI моделите на OpenAI с лекарите.

В един от експериментите учените се съсредоточиха върху 76 пациенти, постъпили в спешното отделение на болницата „Бет Израел“. Те сравниха диагнозите, поставени от двама лекари с диагнозите, генерирани от AI моделите o1 и 4o. Тези диагнози бяха оценени от двама други лекуващи лекари, които не знаеха кои от тях принадлежат на хора, а кои – на AI.

„На всеки етап от диагностиката o1 показваше резултати, които номинално бяха по-добри или равни на тези на двамата лекуващи лекари и AI модела 4o. Разликите „са били особено забележими на първия етап от диагностиката (първоначално сортиране в спешното отделение), когато за пациента се знае най-малко информация, а необходимостта да се вземе правилното решение е най-висока“.

се казва в проучването

В прессъобщението на Харвардския медицински факултет относно това проучване се подчертава, че учените „изобщо не са обработвали предварително данните“ – AI моделите са получавали същата информация, която е била достъпна в електронните медицински досиета към момента на поставяне на всяка диагноза.

Използвайки тази информация, AI моделът o1 успя да предложи „точна или много близка диагноза“ в 67% от случаите на сортиране, докато единият от лекарите поставяше точна или близка диагноза в 55% от случаите, а другият – в 50%.

Трябва да се отбележи, че проучването не твърди, че AI е готов да взема реални решения за живота и смъртта в спешното отделение. Вместо това то посочва, че получените резултати демонстрират „остра необходимост от проучвания за оценка на тези технологии в условия на реално обслужване на пациенти“.

Изследователите също така отбелязаха, че са проучвали единствено начина, по който AI моделите работят с текстова информация, и че „съществуващите проучвания показват, че съвременните фундаментални модели са по-ограничени в разсъжденията си въз основа на нетекстови данни“.

Адам Родман, лекар от болницата „Бет Израел“ и един от водещите автори на проучването предупреди пред The Guardian, че „в момента не съществува формална система за отговорност“ за диагнозите, поставени от AI, и че пациентите все още „искат хора да ги насочват при решенията за живота и смъртта и да ги насочват при сложните решения за лечението“.