Apple розробить технологію для управління iPhone силою думки - Synchron їй допоможе

Компанія Apple повідомила, що до кінця поточного року у смартфонів iPhone з'являться нові функції доступності для користувачів з обмеженими можливостями. Йдеться про мітки Accessibility Nutrition в App Store і застосунок Magnifier для Mac. Також Apple оголосила про партнерство зі стартапом Synchron, який розробляє технології взаємодії паралізованих людей з iPhone за допомогою мозкових сигналів.

Як повідомляє The Wall Street Journal, Synchron веде розробку пристрою (імплантату) під назвою Stentrode. Компанія описує його як «пристрій, схожий на стент, який імплантується у вену над руховою корою мозку» і оснащений електродами, що зчитують сигнали мозку. Зазначається, що з 2019 року Stentrode було імплантовано 10 пацієнтам із порушеннями рухових функцій.

Завдяки партнерству з Synchron компанія Apple планує поглибити розробку інтерфейсів мозок-комп'ютер (BCI) для перетворення мозкових сигналів у команди взаємодії з інтерфейсами iPhone, iPad, Mac та Apple Vision Pro. Імплантат Synchron BCI встановлюється в рухову кору головного мозку, а саме - на поверхню кровоносної судини, за допомогою мінімально інвазивної ендоваскулярної процедури, що передбачає введення катетера через яремну вену.

Дослідники вважають, що інтерфейси мозок-комп'ютер, такі як Stentrode і Neuralink, зроблять революцію в можливостях людей із захворюваннями, такими як бічний аміотрофічний склероз (БАС), взаємодіяти з цифровими пристроями. У статті Wall Street Journal повідомляється про Марка Джексона (Mark Jackson), пацієнта з БАС із Піттсбурга, США, який став одним із перших тестувальників імплантату Stentrode:

"Марк Джексон, один із перших тестувальників імплантату Stentrode, зміг піднятися на гору в швейцарських Альпах і відчути, як тремтять його ноги. Але Джексон не може встати, і він ніколи не був у Швейцарії. Для цього він використовував гарнітуру віртуальної реальності Apple, яка була під'єднана до його імплантату. Джексон не залишає домівки за межами Піттсбурга, тому що у нього БАС. Проте, він вчиться керувати своїм iPhone, iPad і гарнітурою Vision Pro за допомогою імплантату Stentrode, що з'єднується з різними операційними системами Apple", - пише WSJ.

За словами Джексона, технологія Synchron «все ще перебуває на ранній стадії розробки» і поки що позбавлена деяких ключових функцій. Наприклад, відсутня підтримка імітації переміщення курсора, що значно уповільнює навігацію. Партнерство Apple з Synchron є важливим кроком вперед у розвитку подібних інтерфейсів мозок-комп'ютер. У рамках операційних систем iOS 19 і visionOS 3, які вийдуть цієї осені, Apple впровадить розширену підтримку BCI з новим протоколом для Switch Control. Це дасть змогу користувачам керувати пристроями без фізичної взаємодії.

iOS 19 також принесе ще одне значне нововведення - для людей із БАС і тих, хто перебуває в групі ризику втрати мовної функції. У 2023 році у складі iOS 17 компанія Apple представила революційну функцію Personal Voice, яка дає змогу користувачам створювати та зберігати цифрову копію свого голосу. Перша версія Personal Voice вимагала вимовити 150 різних фраз для навчання моделі машинного навчання Apple. Потім голос оброблявся системою протягом ночі.

В iOS 19 Apple значно оптимізує цей процес. Тепер користувачам потрібно записати всього 10 різних фраз. Система обробить їх менш ніж за хвилину. Apple стверджує, що нова версія Personal Voice дає більш природне звучання цифрового голосу і забезпечує більш гармонійний результат.