На WWDC 2023 Apple представила новый для себя тип устройства – гарнитуру смешанной реальности под названием Vision Pro. Исследователь нейротехнологических прототипов Стерлинг Криспин после дебюта новинки поделился некоторой информацией о процессе разработки.

Стерлинг Криспин проработал исследователем прототипов нейротехнологий в группе разработки технологий в Apple более трёх лет, что является самым продолжительным периодом, когда он «когда-либо работал над одним проектом». Работа Криспина заключалась в определении психического состояния пользователей на основе данных, собранных «из их тела и мозга, когда они находились в условиях «‎погружения» в виртуальную реальность.

Используя отслеживание взгляда, электрическую активность, сердцебиение, мышечную активность, кровяное давление, проводимость кожи и другие показатели, модели ИИ могут попытаться открыть мысли пользователя. «Модели искусственного интеллекта пытаются предсказать, испытываете ли вы любопытство, блуждаете в мыслях, боитесь, обращаете внимание, вспоминаете прошлый опыт или какое-то другое когнитивное состояние», – заявил Криспин.

Одним из самых поразительных результатов стала возможность спрогнозировать, что пользователь нажмёт до того, как он это сделал. Как пояснил Криспин, наблюдая за поведением глаз пользователя, и переделывая пользовательский интерфейс в режиме реального времени, можно создать биологическую обратную связь с его мозгом. Исследователь сравнивает это с «грубым компьютерным интерфейсом мозга через глаза».

В ходе другого эксперимента при определении состояния пользователям могут показываться визуальные эффекты или воспроизводиться звуки способами, которые они не воспринимают, а затем измерять реакцию на этот стимул. Также Стерлинг Криспин рассказал, как можно использовать машинное обучение и сигналы тела для прогнозирования концентрации внимания пользователя, расслабленности или для определения того, насколько хорошо он учится. Используя эту информацию и состояние, система может адаптировать виртуальную среду для улучшения требуемого состояния.

Подпишись вTelegram
NVIDIA RTX Pro 6000 Blackwell оказалась лучше RTX 5090 в играх

NVIDIA RTX Pro 6000 Blackwell оказалась лучше RTX 5090 в играх

Xiaomi анонсировала собственный процессор XRING 01

Xiaomi анонсировала собственный процессор XRING 01

11-дюймовый планшет OPPO Pad SE с батареей на 9340 мАч стоит $125

11-дюймовый планшет OPPO Pad SE с батареей на 9340 мАч стоит $125

ТОП-10 самых дорогих брендов в 2025 году

ТОП-10 самых дорогих брендов в 2025 году

Sony выпустила флагманские наушники WH-1000XM6

Sony выпустила флагманские наушники WH-1000XM6

Oukitel показала смартфон с аккумулятором на 16 000 мАч

Oukitel показала смартфон с аккумулятором на 16 000 мАч

Qualcomm представила SoC Snapdragon 7 Gen 4 для смартфонов среднего уровня

Qualcomm представила SoC Snapdragon 7 Gen 4 для смартфонов среднего уровня

OPPO выпустила серию смартфонов Reno 14

OPPO выпустила серию смартфонов Reno 14

Опубликованы подробные характеристики Nintendo Switch 2

Опубликованы подробные характеристики Nintendo Switch 2

Apple работает над нейроинтерфейсом в стиле Neuralink

Apple работает над нейроинтерфейсом в стиле Neuralink

Хидео Кодзима назвал свои идеи для игр, которые никто не купит

Хидео Кодзима назвал свои идеи для игр, которые никто не купит

Microsoft увольняет более 6000 человек в пользу ИИ

Microsoft увольняет более 6000 человек в пользу ИИ