Apple разработва технология за контрол на iPhone чрез силата на мисълта

Apple обяви, че до края на тази година нейните смартфони iPhone ще имат нови функции за достъпност за потребители с увреждания. Сред тях са етикетите Accessibility Nutrition в App Store и приложението Magnifier за Mac. Apple обяви и партньорство със Synchron – стартъп, който разработва технология за парализирани хора за взаимодействие с iPhone чрез мозъчни сигнали.

Според The Wall Street Journal Synchron разработва устройство (имплант), наречено Stentrode. Компанията го описва като „устройство, подобно на стент, което се имплантира във вена над моторната кора на мозъка“ и е оборудвано с електроди, които отчитат мозъчни сигнали. Отбелязва се, че от 2019 година насам Stentrode е бил имплантиран при 10 пациенти с двигателни увреждания.

Чрез партньорството със Synchron Apple планира да задълбочи разработката на мозъчно-компютърни интерфейси (BCI) за преобразуване на мозъчните сигнали в команди за взаимодействие с интерфейсите на iPhone, iPad, Mac и Vision Pro.

BCI имплантът на Synchron се поставя в моторната кора на мозъка, по-специално на повърхността на кръвоносен съд, чрез минимално инвазивна ендоваскуларна процедура, която включва поставяне на катетър през югуларната вена.

Изследователите смятат, че мозъчно-компютърните интерфейси като Stentrode и Neuralink ще направят революция в способността на хората със заболявания като амиотрофична латерална склероза (АЛС) да взаимодействат с цифрови устройства. В статия на Wall Street Journal се разказва за Марк Джаксън, пациент с АЛС от Питсбърг (САЩ), който става един от първите изпитатели на импланта Stentrode:

„Марк Джаксън, един от първите тестери на импланта Stentrode успя да изкачи планина в швейцарските Алпи и да усети как краката му треперят, но Джаксън не може да се изправи, а и никога не е бил в Швейцария. За целта той използва очилата за виртуална реалност на Apple, които са свързани с неговия имплант. Джаксън не напуска дома си извън Питсбърг, защото има АЛС. Въпреки това той се научава да управлява своя iPhone, iPad и очилата Vision Pro с помощта на импланта Stentrode, който се свързва с различни операционни системи на Apple.“

пише WSJ

Според Джаксън технологията на Synchron е „все още в ранен етап на развитие“ и не разполага с някои ключови функции. Например, няма поддръжка на симулирано движение на курсора, което значително забавя навигацията. Партньорството на Apple със Synchron е важна стъпка напред в разработването на такива мозъчно-компютърни интерфейси. Като част от операционните системи iOS 19 и visionOS 3, които ще бъдат пуснати тази есен, Apple ще въведе разширена поддръжка на BCI с нов протокол за Switch Control. Това ще позволи на потребителите да управляват устройства без физическо взаимодействие.

iOS 19 ще донесе и още едно важно нововъведение за хората с АЛС и тези, които са застрашени от загуба на говорни функции. През 2023 година, като част от iOS 17, Apple представи революционната функция Personal Voice, която позволява на потребителите да създават и съхраняват цифрово копие на своя глас. Първата версия на Personal Voice изискваше потребителят да произнесе 150 различни фрази, за да обучи модела за машинно обучение на Apple. След това гласът се обработваше от системата през нощта.

В iOS 19 Apple значително ще оптимизира този процес. Потребителите вече ще трябва да записват само 10 различни фрази. Системата ще ги обработва за по-малко от минута. Apple твърди, че новата версия на Personal Voice дава по-естествено звучащ цифров глас и осигурява по-хармоничен резултат.